这是一个创建于 3653 天前的主题，其中的信息可能已经有所发展或是发生改变。
爬amazon.cn的定向爬虫，这几天就感觉不大对，查了下一看爬到的都是0字节，手工调试发现原来是撞墙了，就是这个亚马逊的页面：
http://www.amazon.cn/JavaScript%E5%8A%A8%E6%80%81%E7%BD%91%E9%A1%B5%E7%BB%8F%E5%85%B8%E5%AE%9E%E4%BE%8B%E6%95%99%E7%A8%8B-%E9%99%88%E4%BA%89%E8%88%AA/dp/B00114B83W
感觉没什么敏感词啊，陈争航这个人名除了写这本书什么也没干，是良民啊~
http://www.amazon.cn/JavaScript%E5%8A%A8%E6%80%81%E7%BD%91%E9%A1%B5%E7%BB%8F%E5%85%B8%E5%AE%9E%E4%BE%8B%E6%95%99%E7%A8%8B-%E9%99%88%E4%BA%89%E8%88%AA/dp/B00114B83W
感觉没什么敏感词啊，陈争航这个人名除了写这本书什么也没干，是良民啊~
 |
1
mornlight 2014-11-27 17:57:29 +08:00
你可能得先排除一下是不是你的爬虫被amazon屏蔽了
|
 |
2
Livid MOD 是的，这个页面确实在国外点开是 connection reset
|
 |
3
efi 2014-11-27 17:59:51 +08:00
wtf
|
 |
4
66beta 2014-11-27 18:00:37 +08:00
难道是因为评论里有“卓越亚马逊”，哈哈哈
|
 |
5
wesley 2014-11-27 18:01:53 +08:00  1
“动态网”才是真真的G点
|
|
6
efi 2014-11-27 18:02:15 +08:00 1
你URL里面有一个关键词，你可以自己测试。我刚发出来被删了，这不是深度检测的关键词。不能发的能不能把规矩说明，不要偷偷删。
|
 |
7
laoyuan OP 1
@Livid
去掉中间的slug就没问题了 http://www.amazon.cn/dp/B00114B83W 所以不是页面内容触发的，就是url触发，而中间那段decode过来完全不知道痛点在哪里：JavaScript动态网页经典实例教程-陈争航 |
 |
8
halczy 2014-11-27 18:04:25 +08:00
这个简介是谁写的...
JaVascript JavaScljpt JavaScriDt |
 |
13
9hills 2014-11-27 18:07:22 +08:00
|
|
14
laoyuan OP 说实话弄书最容易碰到敏感词了，什么时候阿里云上SSD我就把网站搬回国内了
|
|
15
laoyuan OP 唉，标题有这个词的亚马逊图书条目有267个。。。
|
|
18
laoyuan OP 又发现一个新的 url 触发：看中国
|
|
19
laoyuan OP 亚马逊中国全站 https 了，这个问题貌似不存在了
|
Select Language