设为首页收藏本站

开启辅助访问切换到宽版

destoon采集论坛»destoon采集论坛 › 产品交流 › 产品使用 › 百度和谷歌抓取的都是动态路径的。

发新帖

查看: 97|回复: 3

百度和谷歌抓取的都是动态路径的。

144 主题	517 帖子	1760 积分

Rank: 6 Rank: 6

积分: 1760

发消息

发表于 2014-12-15 20:22:58 | 显示全部楼层 |阅读模式

百度和谷歌抓取的都是动态路径的。伪静态的尽然不抓取了。

/seo/show.php&itemid=52&page=
/case/show.php&itemid=11&page=
/case/show-11.thml 这样的链接反而抓取不了。

回复

使用道具举报

71 主题	3608 帖子	8055 积分

Rank: 8 Rank: 8

积分: 8055

发消息

发表于 2014-12-16 08:39:16 | 显示全部楼层

静态应该可以吧

回复支持反对

使用道具举报

38 主题	2116 帖子	4496 积分

Rank: 8 Rank: 8

积分: 4496

发消息

发表于 2014-12-16 09:02:24 | 显示全部楼层

后台都是可以设置的，不是么

回复支持反对

使用道具举报

3 主题	144 帖子	309 积分

Rank: 3 Rank: 3

积分: 309

发消息

发表于 2014-12-16 13:55:50 | 显示全部楼层

你可以用*?*屏蔽动态网址

回复支持反对

使用道具举报

发新帖

|小黑屋|手机版|Archiver|destoon采集论坛

GMT+8, 2026-1-24 03:55 , Processed in 0.013786 second(s), 21 queries .

Powered by Discuz! X3.4

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表