python分析推特_用Python关注者的关注者抓取Twitter数据的最快方法
我在用Python在Twitter上做一個關于用戶社交關系的研究。在
問題是“什么是最快的方式抓取某個用戶的關注者信息”
我搜索了很多信息,目前正在使用Tweepy:c = tweepy.Cursor(api.followers_ids, id=centre, count=5000).items()
while True:
try:
followers_ids_list.append(c.next())
except tweepy.TweepError:
# hit rate limit, sleep for 15 minutes
time.sleep(15 * 60 + 15)
continue
之后,我使用/users/lookup根據之前獲得的id查找User()對象。在
但是,這條路很慢…我想知道有沒有比我現在做的更快的。在
因為我想找到用戶關系,這意味著followers in depth 2是不夠的。在
比如說,我有100個粉絲,而這100個粉絲有自己的200個粉絲,那么抓住這個社交網絡(深度=3)所需的時間是:
(1+100+100*200)/15個電話*15分鐘/60分鐘=335小時=14天左右!在1個呼叫:請求我的追隨者ID(100ID)
100個電話:請求100個追隨者ID(100*200ID)
100*200呼叫(至少):請求100*200(關注者的關注者)用戶的ID。
我能想到的另一種選擇是twitter.com沒有api的網站(但是,我想,這樣會使我的IP或帳戶被禁止在Twitter上使用…)
總結
以上是生活随笔為你收集整理的python分析推特_用Python关注者的关注者抓取Twitter数据的最快方法的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 2015计算机二级公共基础知识,2015
- 下一篇: 服务器响应options,HTTP发送对