介绍如果我们用Requests库采集一些大型电商网站的页面,可能会发现一个令人疑惑的现象:对于同一个URL,同一个页面,我们抓取到的内容与我们在浏览器中看到的内容有所不同,这是因为,我们通过程序获得的是原始的HTTP内容,但浏览器中的页面其实是在此基础上,经过Javascript进一步加工和处理后生成的效果,然后,再嵌入到原始的HTML中,呈现给用户。这种AJAX网页开发技术是当前主流的网页开发技

- 阅读全文 -