我正在尝试从Twitter帐户(https://twitter.com/oldLentach/followers)解析关注者的昵称。
这是我检测昵称以及一些不必要的内容的方式,以后可以很容易地将其过滤掉:
[el.get_attribute('href') for el in
browser.find_elements_by_xpath('//div//a[@role="link"][@aria-haspopup="false"][@data-focusable="true"]')]
然后我向下滚动页面以加载新用户并重复上面的代码:
browser.execute_script("window.scrollTo(0, document.body.scrollHeight);")
但是,输出与我没有进行任何滚动时完全相同! (我检查了滚动条是否正常工作)
请帮助我!
我不知道您是否最终找到答案,但是您可能希望使用tweepy。
用户alecxe在一个类似的问题上给出了一个非常好的答案:Get All Follower IDs in Twitter by Tweepy
干杯!