百度收录了大量死链网址如何处理

子牙 2020 年 12 月 13 日01:14:0019,644 views
摘要

最近姜成使用了一个老域名做新站的时候,发现site查询收录的时候,百度将大量老域名的旧网址索引放出来了,并重新抓取了老页面。为此需要将收录的死链进行提交到百度后台,因为重重原因无法查看日志发现死链,只能通过site查询到百度收录的老网页进行提交了。

最近姜成使用了一个老域名做新站的时候,发现site查询收录的时候,百度将大量老域名的旧网址索引放出来了,并重新抓取了老页面。为此需要将收录的死链进行提交到百度后台,因为重重原因无法查看日志发现死链,只能通过site查询到百度收录的老网页进行提交了。
基本思路有了后,我就准备开干了,一开始自己写了python方法进行抓取百度收录的网址,并获取真实网址并判断真实网址的访问状态。今天突然发现站长工具本身有个比较好用的两个工具结合起来也可以实现相同的方法。现在老姜就给大家介绍下如何使用站长工具软件处理百度收录了大量死链网址。
一、真实结果查询工具提取真实网址
站长工具软件使用小工具中打开 真实结果查询工具,并输入关键词,关键词就用site:www.域名.com 这样就好了,然后直接勾选不限制进行查询,查询后结果导出。
百度收录了大量死链网址如何处理 百度收录了大量死链网址如何处理
二、http状态批量查询工具查询网页状态码
通过使用小工具打开http状态批量查询工具,并导入上一步查询到的真实网址,然后批量导入并查询,最后将查询结果导出,然后根据网页状态码为404的网址提取并通过百度死链工具提交死链。
百度收录了大量死链网址如何处理
百度收录了大量死链网址如何处理
以上就是百度收录了大量死链网址如何处理的办法,特别是老域名换程序做新站,用这个方法可以降低百度蜘蛛的无效抓取提升百度爬虫效率。
weinxin
姜成营销
这是我的微信扫一扫
子牙
  • 本文由 发表于 2020 年 12 月 13 日01:14:00
  • 转载请务必保留本文链接:https://www.jiang-cheng.com/?p=940