背景介绍
最近计划爬取百度招聘里面的内容,准备使用“开发者工具”网络抓包时,却发现只要打开开发者工具,就会跳转到about:blank
空白页。
https://talent.baidu.com/jobs/social-list?search=python
分析
前端跳转很明显时通过JS完成,既然每次都准确到空白页,那必然是做了一个跳转。
如果是使用window.close()函数会直接关闭网页而不是变成一个空白页。
有跳转就是有目标地址,直接通过网页另存为把整个网页存在本地。
几个js全打开,搜索about:blank
,在Page.4d03da52.chunk.js
中找到
确定位置后,打开开发者工具
,暂停脚本执行,再访问目标页面,通过一步步执行,当发现出现Page.4d03da52.chunk.js
文件时,进行内容替换,这里可以直接把函数内容删除
替换完后,让脚本正常执行,即可得到一个不会自动跳转空白页的百度招聘。
如果想以后每次访问都不会自动跳转也可以直接用油猴脚本把这个函数替换掉。