[需求背景]
领导给你一批 kol twitter 用户,需要定时抓取这些 kol 的 twitter 情况,你会怎么实现
[实现方案]
用一个新的账号(注意,需要用新的,不能用自己经常使用的账号),用这个新的账号批量关注上面的 kol 信息。
关注了这些 kol 之后,每次就只需要请求当前账号关注列表的帖子就可以了,相比于如果需要去请求每个 kol 的最新信息,大大降低的封号风险
[项目]
https://github.com/xiaoxiunique/x-kit 地址
我将核心逻辑提取了出来。
如果你有更加高效的抓取方案,欢迎分享
|