提到JS的调试,写过JS的同志都知道:简单,console.log解决一切问题。其实JS调试还有很多好用的工具可供选择,使用起来会比直接log更为高效,但是我在工作中很少见到...
最近在爬虫的时候,需要搞清楚其中一个JS文件的加密逻辑,需要对JS文件进行debug,这就需要借助override功能。override功能可以将远程的页面下载到本地,便可对...
在爬虫的时候,基于该方法能够快速构建代码,不用再费力解析headers、body等参数了。 1. 进入开发者模式,选择NETWORK,找到想要模拟的请求。 2. 右键该链接,...
2021最佳实践:pyenv 管理python版本, poetry 负责依赖包管理。 1. pyenv python 版本控制 1. 安装: curl https://pye...
借鉴官方样例以及项目经验,以下是dockerfile的最佳实践 1. Dockerfile样例 2. entrypoint.sh样例, 来自官网 根据CMD第一个参数的不同,...
进入windows powershell后不显示(base),执行 conda activate envs_name 命令后也无法进入相应的虚拟环境,解决方法如下: 1.按下...
常用命令 看文件大小 du -h --max-depth=1 定时任务:*/1 * * * * cp -r /home/sunxuen/test /home/sunxuen/...
整自己的github https://www.52nlp.cn/bert-paper-%E8%AE%BA%E6%96%87-%E6%96%87%E7%AB%A0-%E4%BB...
jupyter lab 中使用conda的虚拟环境 1. 首先激活想要使用的conda环境 conda activate env_name 2.在该虚拟环境下安装ipyker...
最近在复现基于milvus的问答时,遇到了在命令行输入中文导致编码错误的问题,需要修改locale设置,同时记录一下常见配置文件的修改方法。 1. profile文件 1.1...
训练模型时遇到gpu利用率上不去的情况,瓶颈可能在于cpu,可以启动多个线程给gpu传数据。原文链接[https://blog.csdn.net/qq_32998593/ar...
当我们在终端启动服务或者训练模型时,启动命令往往会阻塞自己,即无法在终端继续输入,同时为了保证终端关闭不影响进程中断,需要在后台启动进程. 1. nohup命令 后台启动常用...
1. 抽取pdf内容 数据分析常见的需求是抽取pdf内容,很多常用的包pdfminer.six、pdfminer3k等用法比较繁琐且不清晰,终于让我找到一个简单粗暴的工具 ...
在windows上安装docker时需要有Hyper-V功能,但是家庭版没有该功能,所以需要手动添加。 解决办法:1.将如下代码添加到记事本中,并另存为Hyper-V.cmd...