如题所述
这些死链都已经被收录了,而且为什么我用百度站长平台的抓取诊断测试了,他也可以被抓取呀
抓取诊断和是否被抓取没联系,你如果不想被抓取,就设置robot,来控制被抓取的信息!
我知道怎么回事了,是404页面的返回码是200,所以百度认为网页可以被抓,所以才会被收录。