mpcrawler 爬虫请求太频繁了，我如果都拦截了有什么负面效果吗?
发布于 4 年前 作者 guiying82 9722 次浏览 来自 官方Issues

这是给我做压力测试吗，凌晨开始的，一秒钟多则十线程，少则三秒一次。

全是跑小程序的接口，产品详情接口居多，我刚开始以为被攻击了，直接都封了，配图的create_time是请求到达时间。

小程序appid:wxb33da1ab395848be

3 回复

页面收录设置：可对整个小程序的索引进行关闭，小程序管理后台-功能-页面内容接入-页面收录开关

sitemap 配置：可对特定页面的索引进行关闭

详细见： https://developers.weixin.qq.com/miniprogram/dev/framework/sitemap.html

如果都拦截了，会导致你的小程序SEO效果变差，自己取舍吧

可以在后台配置频率的

6666

回到顶部