V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
This topic created in 4737 days ago, the information mentioned may be changed or developed.
之前看了“谁写个自动领取奖励脚本？”（https://study.congcong.us/t/68136），自己刚接触python，所以想试着写一个练练手。
用到python的requests库，关于网站登录部分，分析了一下登录提交的表单，有5个字段，类似下面：
next=%2F&u=***&p=***&once=21381&next=%2F
首先分析登录界面取出next,once,next值，分别为input_next_value_pre、input_once_value、input_next_value_post, 然后用requests请求页面，主要代码如下：
signin_url = "https://study.congcong.us/signin"
user_agent = "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_8_3) \
AppleWebKit/537.31 (KHTML, like Gecko) \
Chrome/26.0.1410.65 Safari/537.31"
headers = {"User-Agent": user_agent}
logininfo = {"next": input_next_value_pre,
"u": usr_name,
"p": passwd,
"once": input_once_value,
"next": input_next_value_post
}
signin_req = requests.post(signin_url,
data=logininfo,
headers=headers,
)
结果登录老是失败，怀疑是v2ex的登录表单中有两个next字段，并且值一样，这样构建post字典第二个next就被忽略，不知道该怎么解决呢？
用到python的requests库，关于网站登录部分，分析了一下登录提交的表单，有5个字段，类似下面：
next=%2F&u=***&p=***&once=21381&next=%2F
首先分析登录界面取出next,once,next值，分别为input_next_value_pre、input_once_value、input_next_value_post, 然后用requests请求页面，主要代码如下：
signin_url = "https://study.congcong.us/signin"
user_agent = "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_8_3) \
AppleWebKit/537.31 (KHTML, like Gecko) \
Chrome/26.0.1410.65 Safari/537.31"
headers = {"User-Agent": user_agent}
logininfo = {"next": input_next_value_pre,
"u": usr_name,
"p": passwd,
"once": input_once_value,
"next": input_next_value_post
}
signin_req = requests.post(signin_url,
data=logininfo,
headers=headers,
)
结果登录老是失败，怀疑是v2ex的登录表单中有两个next字段，并且值一样，这样构建post字典第二个next就被忽略，不知道该怎么解决呢？
Supplement 1 · May 13, 2013
 |
1
whtsky May 12, 2013 via iPhone
你很缺钱么…
|
 |
2
DH May 12, 2013  1
我估计是cookie的问题，你在post之前，先GET一次，把cookie存下来，再post。
|
 |
3
swulling May 12, 2013 1
1. 第一次请求的时候有PB3_SESSION的cookie，不用存，用requests的话直接用Session就很方便
2. next不是问题，你提交两个就好了 3. 注意POST的Referer要带上 实测可以登陆，没问题 |
|
4
swulling May 12, 2013 1
4. next不用分析页面，直接'/'就好
|
|
7
DH May 12, 2013 1
网站防爬虫的办法是五花八门，每个站都不一样。
|
|
12
DH May 12, 2013 1
一般就是cookie上做文章，有些好像是js设置cookie，就得运行js代码或者弄明白算法自己算。
苹果那个下单页面，把cookie放在静态文件里面，这些文件一般爬虫不抓，就缺cookie的值。 |
 |
17
yanwen May 12, 2013
菜鸟求代码。
|
|
20
swulling May 12, 2013
|
|
23
swulling May 13, 2013
|
|
26
yanwen May 14, 2013
|
|
29
yanwen May 14, 2013
会不会是BS版本的问题？？我装了两个BS版本。。一个是3的。。一个是4的。。是这个原因么？
|
|
31
yanwen May 14, 2013
卸了BS3.2.1之后，还是不行。。没办法。mark一下。。改天有时间再弄。。
|
 |
34
xuelang OP |
|
35
yanwen May 15, 2013
真奇怪。。等我重装py看看能不能解决。。真搓。。哎。。
|
 |
36
xieren58 May 17, 2013
怎么不用mechanize ？
|
Select Language