蜘蛛抓取有好多动态链接是否有影响?506

我的网站显示的蜘蛛抓取,有好多动态链接是否有影响?是否需要处理。该如何处理?

如果不是自己网站本身实际存在的url,很可能是网站由于被人刷,导致的。

对应这些动态链接,可以在robots文件中,写一个屏蔽抓取动态链接的语法。


User-agent: * 

Disallow: /*?*


2022-06-29


上一篇:sitemap里有大量的转码链接,对网站有没有影响?

下一篇:如何选择好记的域名?