6 回复
这个应该是微信小程序爬虫账户。尝试在登录逻辑里过滤一下此类账户。
可以尝试:
1、修改sitemap.json
2、限制此类特征用户写入数据库:
爬虫访问小程序内页面时,会携带特定的 user-agent:mpcrawler
及场景值:1129
。
这个应该是微信小程序爬虫账户。尝试在登录逻辑里过滤一下此类账户。
可以尝试:
1、修改sitemap.json
2、限制此类特征用户写入数据库:
爬虫访问小程序内页面时,会携带特定的 user-agent:mpcrawler
及场景值:1129
。