やりたいこと
下記のサイトのランキングをスクレイピングするために,
通信状況を調べjsonファイルからデータを取得しようと考えています。
https://www.spooncast.net/jp/ranking/topfan?date_type=daily
実際のコード
下記のコードを実行しましたがエラーになりました。
import pandas as pd
import requests
url_rank = ('https://jp-api.spooncast.net/ranks/fan/?date_type=daily')
headers = {'Content-Type': 'application/json'}
r = requests.get(url_rank, headers=headers)
users = pd.DataFrame.from_dict(r.json()['results']['author'])
users = users[['nickname', 'profile_url']]
エラー内容
---------------------------------------------------------------------------
TypeError Traceback (most recent call last)
<ipython-input-17-0958c513ae04> in <module>
4 headers = {'Content-Type': 'application/json'}
5 r = requests.get(url_rank, headers=headers)
----> 6 users = pd.DataFrame.from_dict(r.json()['results']['author'])
7 users = users[['nickname', 'profile_url']]
8
TypeError: list indices must be integers or slices, not str
strではなく整数かスライスでなければならないと書かれていますが、よくわかりません。
原因と解決策を教えていただけると嬉しいです。
また、このサイトはランキングが一つのリンクにまとまっておらず、4つに分かれています。
https://jp-api.spooncast.net/ranks/fan/?date_type=daily
https://jp-api.spooncast.net/ranks/fan/?cursor=cD0zMA%3D%3D&date_type=daily
https://jp-api.spooncast.net/ranks/fan/?cursor=cD02MA%3D%3D&date_type=daily
https://jp-api.spooncast.net/ranks/fan/?cursor=cD05MA%3D%3D&date_type=daily
開発者ツールについて使い慣れていないからかもしれませんが、これらの情報を一つに取得する方法はないのでしょうか?
それとも取得したデータを結合するとかしないとだめでしょうか?
宜しくお願いします。