深耕网络安全领域，聚焦护网行动（HW）、渗透测试、等级保护（等保）、CTF 竞赛四大核心方向，提供技术干货、实战经验与行业洞察。

xpath语法常用规则nodename 选取此节点的所有子节点/ 从当前节点选取直接子节点// 从当前节点选取子孙节点，而不考虑它们的位置，跨节点获取标签. 选取当前节点… 选取当前节点的父节点@ .

Python3批量爬取美女照片并保存到本地（二）上一波写错了，很尴尬就能爬显示的一部分照片，网站有限制，从上波的爬取可以看出来，返回的json中只有一部分图片，我们这次通过爆破路径达到不注册登录批量下载的目的。直接上代码了：目标路径https://www.0xu.cn/gallery/ctmn/1import requestsimport jsonimport reimport osnumber='1'int(number)path='qcmn/'url='https://www.0

看新闻的时候忽然发现了一个图片网站，那肯定得爬一下。网址：https://www.0xu.cn/不难发现，qcmn这个路径对应青春美女右键检查图片地址可见访问该地址成功访问到了图片正式开始第一步：请求网页并分析返回包提取图片url地址。检查发现qcmn第一张图片对应路径3087右键检查network搜索对应请求发现返回包是一段json一、先写一个获取URL的函数import requestsimport jsonimport repage=1path='qcmn'

之前写的笔趣阁爬虫1.0还没有实现下载功能，今天又补充了很多东西。不过还有不少问题。大佬们可以提提建议。在昨天的基础上增加了以下内容：一、###获取小说简介ddef get_jianjie(): pattern_description=re.compile(r'description"\scontent="(.*)"/>') resp_description=pattern_description.findall(resp2) resp_description=''.j

编程语言的学习往往在项目实战中是最深刻的。每天早上上班地铁上很多人都在看小说打发时间，我也是一个玄幻小说迷，那么就从写一个小说网站的爬虫开始吧。我一直在笔趣阁看小说，右键查看了下网页源代码，发现目标网站应该是可以爬的（小说内容源代码可见）。可以开始了爬虫大致分为三个步骤：1、发起请求：我们需要先明确如何发起 HTTP 请求，获取到数据。2、解析数据：获取到的数据乱七八糟的，我们需要提取出我们想要的数据。3、保存数据：将我们想要的数据，保存下载一、确定目标和思路浏览网站之后做出如下打算：

Python3爬虫入门​网络爬虫，也叫网络蜘蛛(Web?Spider)。它根据网页地址(URL)爬取网页内容，而网页地址(URL)就是我们在浏览器中输入的网站链接。在浏览器的地址栏输入URL地址，在网页处右键单击，找到检查。(不同浏览器的叫法不同，Chrome浏览器叫做检查，Firefox浏览器叫做查看元素，但是功能都是相同的)每个网站都有爬虫协议，(例如：https://www.baidu.com/robots.txt，这里会写清楚哪些允许 哪些不被允许)可见即可爬（技术上）违法的：擦边球