依赖 关于依赖包的安装请看文档 docxtpl文档地址: https://docxtpl.readthedocs.io/en/latest/[https://docxtpl....
依赖 关于依赖包的安装请看文档 docxtpl文档地址: https://docxtpl.readthedocs.io/en/latest/[https://docxtpl....
前言 最近开始好好在看go语言,拖延很久终于把小伙伴给的《Go语言实战》书看完了,但是还没实际上手操作过,想着当年学python的时候也是从爬虫实战开始的,那就先写个go的并...
在分布式多节点系统下,或者是使用gunicorn等工具启用多个worker的情况下,如何保证后端的定时任务、初始化任务只执行一次呢?比如使用apscheduler或者flas...
Gitlab-CI/CD 持续集成测试篇 一、 Gitlab-CI/CD使用场景 首先,公司使用Gitlab作为工作仓库进行代码发布及版本控制,Gitlab内置了CI/C...
1. 目标 由于Flask是一个轻量级的Web框架,自带app.run()方法能够提供http接口服务,测试环境下测试非常方便,但是如果在生产环境上单纯使用Flask还是会有...
记录最近一个大文件数据处理入库任务,需求大致是这样: 数据处理需求: 需要定期拉取一个千万行级的大型文件,文件内容是按照指定分隔符进行分割的数据表内容. 每行结束按照\n换行...
项目背景 之前项目中经常使用paramiko模块SFTP下载远端文件到本地,再读取本地文件进行相关操作后入库,最终再删除该本地文件。 思考优化 但是最近开始思考到,其实很多情...
最近遇到一个需求,大致情景是这样的:多个worker同时从rabbitmq消息队列中取数进行处理,并将处理后的数据插入或更新到同一个MongoDB表中,该过程会存在大量并发,...
Oct. 12th, 2018 最近使用python的多进程编程来处理一个MongoDB的数据库。这个程序中,每一个进程都要对数据库中的某些数据进行更新。如果目标数据不存在的...