Telegram数据抓取技巧

魔方调酒师提问于06月15日

电报的“爬虫”和百度的“蜘蛛”，在抓取策略上有何不同？

电报爬虫和百度蜘蛛爬取方式不同。电报爬虫爬取群组、频道的公开内容，需要用户授权。百度蜘蛛通过网页链接逐层爬取，需要开放的互联网路径。电报搜的到百度搜不到的原因，是因为有很多电报群属于私密和半公开，百度蜘蛛进不去。