页面内容接入主动推送有大量的无效网页?
发布于 6 年前 作者 lei99 690 次浏览 来自 官方Issues

APPID:wx77deaacf778533d2

pages/third/index?id=49e285307b8b4f83b87b14e1dab20698

pages/third/index?id=858a3c82cfda4ec6aa377b94c1d55302

pages/third/index?id=5b1df4e7fe434efe88b338aae7c49a9b

1 回复

你好,爬虫侧查了一下,这个月主动推送触发的爬虫抓取有11k的页面,其中有1.5k的白页,看了下这些白页有一些是因为页面本身内容较少,有些是爬虫打开时页面没有完全加载出来(可能是并发较高,有些请求回吐数据较慢),对于这些无效的页面,爬虫还会再次抓取的

回到顶部