- 博客(11)
- 收藏
- 关注
RSS订阅
1原创 op运维常用命令集
综上所述，这个命令的作用是：在当前目录的直接子项中查找所有文件和目录（不包括当前目录本身），但不包括任何以。注意：这里也可以用grep，不过grep -E 的方式会有大坑，无法只匹配上“整体项”。这个命令是一个在Unix/Linux系统中使用的shell命令，用于在当前目录（意味着搜索将仅限于当前目录的直接子项，不会递归到更深层次的子目录。意味着搜索将从当前目录的直接子项开始，不会包括当前目录本身。：这是用于在文件系统中查找文件和目录的命令。：这个选项指定了搜索的最小深度。：这个选项指定了搜索的最大深度。
2025-01-04 01:13:55
237
转载 asyncio异步任务和同步任务的性能比较
1. 前言在执行一些 IO 密集型任务的时候，程序常常会因为等待 IO 而阻塞。比如在网络爬虫中，如果我们使用 requests 库来进行请求的话，如果网站响应速度过慢，程序一直在等待网站响应，最后导致其爬取效率是非常非常低的。为了解决这类问题，本文就来探讨一下 Python 中异步协程来加速的方法，此种方法对于 IO 密集型任务非...
2020-08-05 10:53:37
754
转载 scrapy运行爬虫的几种方式
1.开启多个命令行，分别执行scrapy cralw xxxx2.编写一个脚本，写入以下代码，执行工程下的所有爬虫：# -*- coding: utf-8 -*-# @Time : 25/12/2016 5:35 PM# @Author : ddvv# @Site :# @File : run.py# @Software: PyCharmfrom scrapy.utils.project import get_project_settingsfrom scrapy.c
2020-07-01 15:32:39
1155
原创 记一次百万级数据SQL语句优化
起因：公司的订单数据日益增多，使得订单表做统计查询速度异常缓慢。查询耗时平均为4s。优化方向：1.查看mysql慢查询日志：mysqldumpslow -t 10 /www/mysql/mysql-slow.log #显示出慢查询日志中最慢的10条sql由于当初写统计查询时，没有考虑那么多。只想把结果早点显示出来，便出现了这种情况：SELECT s.id,s.shop_mer_id,s...
2019-05-28 18:03:28
2268
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人