V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
推荐关注
Meteor
JSLint - a JavaScript code quality tool
jsFiddle
D3.js
WebStorm
推荐书目
JavaScript 权威指南第 5 版
Closure: The Definitive Guide
huyia

facebook 爬虫

  •  
  •   huyia · Aug 2, 2019 · 5352 views
    This topic created in 2467 days ago, the information mentioned may be changed or developed.

    最近在研究 facebook,推特爬虫,发现网站加载了一大堆的 js 代码,网上查询了一下,这是使用了 chunk 技术,由服务器一段一段的分发加密数据给客户端,然后由 js 解密。我想实现只用 python 请求库来完成这个爬虫,不用 splash 等自动化插件,但是发现很难下手,哪位兄弟能指点一下我该怎么继续下去,求指教

    No Comments Yet
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2536 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 27ms · UTC 05:04 · PVG 13:04 · LAX 22:04 · JFK 01:04
    ♥ Do have faith in what you're doing.