新人一枚,怎么知道网站是否爬取完整,希望大家给一个具体的方法

【新人一枚,怎么知道网站是否爬取完整,希望大家给一个具体的方法】

新人一枚,怎么知道网站是否爬取完整,希望大家给一个具体的方法

文章插图
一个新人,怎么知道网站抓取是否完整?希望大家能给我一个具体的方法 。如何知道网站抓取是否完整?希望大家能给我一个具体的方法简介:比如解决方案:你是想说搜索引擎是否能完整抓取你网站的所有页面,还是说你抓取别人网站的时候抓取了所有页面? lt/brgt; ltpgt当我爬上一个指定的网站时,我是否爬上了改变后的网站的所有页面? lt/brgt