背景 爬虫服务器,内存一紧张,MySQL 就容易挂,需要整一个脚本定时执行,如果MySQL 正常运行,就跳过,否则执行重启命令 脚本内容/root/mysql_listen.sh #!/bin/bas…
某个系统的多语言文件使用json格式存储,正常是数据库界面化编辑再生成到文件中,通过git action进行发布。有个需求,我用脚本批量处理了对应分支的数据,合并时因为key的顺序等等,冲突异常的多。…
我们都知道在某个文件中查找指定字符串可以使用 grep "要搜索的字符串" 0_0_info.txt,那现在有n个文件都需要查找,应该怎么办呢? Google 到可以使用如下命令来…
有个需求需要把前者处理成后者,也就是有重复行的保留且仅保留一个值,最后就实现整个text中每一行均为唯一值。Sublime 有正则匹配及替换的能力。 首先点击菜单栏 编辑,选择行排序 ⌘+shift+…
部署 Nexus 使用Docker,没启动起来,看起来是因为 M1 Mac 的原因,所以自行编译了一次镜像 初始化目录 mkdir pip-server-nexus cd pip-server-nex…
我们后来改成了基于 Nexus 部署,这样 composer 和 npm 都支持了,可以查看这篇文章 目录结构 > tree . ├── auth │ └── htpasswd.txt ├── doc…
资源 官方文档:https://python-rq.org/ Github: https://github.com/rq/rq 安装 pip install rq 使用 创建任务 import red…
有一批json文件需要进行批量处理,流程基本上是 json.loads(f.read()) 再 f.write(json.dumps(json_)),但是这些文件之前还有的转义符会被自动去掉,由于是通…
为了保障网站的访问速度,应该对网站文章中使用的配图定义一些规范: 格式使用 jpg 而不是 png 限定最大宽度,如图片宽度小于 700px 时使用原图,否则限定宽度为700等比缩放 同时生成 web…
最近有个需求需要爬取 GSC 的页面,先用 requests 获取页面,配合 beautifulsoup 进行解析即可,还需要搞定登录状态的问题。 用 requests 怎么都搞不定登录,Google…