sitemap的 基础问题,不太忙的大神劳烦看一眼。

下载了sitemapx 如果今天制作了一批sitemap网址如何保证明天再抓取的时候没有重复网址被抓取,小爬虫什么的 我也没发现问题这方面相关处理方法 难道抓取日志会有记录么。

0 回答
该问题还没有收到回答 :(
我来回答
sitemap的 基础问题,不太忙的大神劳烦看一眼。
匿名回答
最新问题
  • 赚米米平台 (1 分钟前)
  • 赚米米补单平台qq 215201444 (2 分钟前)
  • 补单平台赚米米 (6 分钟前)
  • 搜关键词,首页几乎是分类网、B2B网站的,做个独立网站还有机么? (49 分钟前)
  • 网站robots百度访问不了301什么情况 (1 小时前)
  • 你们所说的老域名仅仅只是注册时间长的吗? (1 小时前)
  • 其他问题
  • 朋友公司SEO的几个问题,请大家帮忙解答。 (1 回复)
  • 百度是怎样判断品牌站点的? (0 回复)
  • 为什么百度只放收录却迟迟不给网站权重? (3 回复)
  • 请评估一下这个网站大概值多少钱,养生类的 (3 回复)
  • 谁懂采集啊 (3 回复)
  • 收录的时候只收录了标题,描述收录有的正常有的不正常,这是为什么啊? (4 回复)
  • ------------ 这是底线啦 -----------
    我要提问 我来回答