V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
This topic created in 3859 days ago, the information mentioned may be changed or developed.
网易杭州的菜单，公网的， ip 属于杭州电信。
目测没有什么防爬虫措施。
侵删（虽然应该不用保密）
url 格式为：
http://numenplus.yixin.im/singleNewsWap.do?materialId=14905
规律：
每周末或节假日末，集中更新下一周(到周日)的菜单， materialId 一般是连续的。
比如这次是 10.7 日更新了 14903,14904,14905,14906 ；
然后会更新一堆新闻之类的，比如 14920 ；
可能有一串 id 都是同一篇文章，比如 14800-14810 ；
有些 id 、过大的 id 对应的页面提示无内容。
 |
1
kendetrics Oct 9, 2015  1
饿了。。
|
 |
2
tomine Oct 9, 2015
哪里体现出了爬虫？
|
 |
3
k1995 Oct 9, 2015
百度云爬虫路过， http://pan.whatsoo.com
|
 |
5
vivisidea Oct 9, 2015
菜单都是骗人的。。。。
|
 |
7
Marfal Oct 9, 2015
|
Select Language