发简信
IP属地：广东
-
-
如何实现元宇宙产品-元管理
一、元宇宙产品 元宇宙产品的本质是基于现有产品再进行资源整合、矩阵内资源互换等操作后产生的。 当人们在讨论元宇宙时，其本质就是探讨在拥有广大用户的现有产品该如何整合，通过规模...
-
咖啡店新开店扩展模式1。前提 以下一切数据均来自于虚构的平行世界。切勿当真。 2。为什么要新开店 1）假设红色星星是店的所在地，红色圆圈是该店顾客所在地（假设顾客只选取附近的咖啡店光顾）：首家店...
-
廿玖-Python 多线程之与 NodeJS 不同之处
1. 多线程与停等 一直写着 JS，所以觉得，如果你在 Python 用一个 threading.Timer 的话，就像 JS的 setTimeout 其余东西都是会继续运行...
-
廿捌-原爬虫项目加入客制化内容，Python 读取 URL 域名
1. 把客制化内容加到原爬虫中 冲凉前刚完成客制化爬虫：廿柒- 客制化爬虫以及爬虫调参冲完凉转瞬一想就觉得还是把他加到原爬虫不用维护两个相似的项目了，不是更好？ 2. 在原项...
-
廿柒- 客制化爬虫以及爬虫调参1. 前文提要 前期用 Python 做了某些爬虫，但是发现有几个问题： 爬的内容有很多未完全读取网页内容的信息 前期只爬取 tag 为 的信息，但其实很多内容在 ...
-
廿陆- Python 爬虫 异步改为同步加多进程 以及 某著名社交网站爬虫设想
1. 前言 前几天折腾了很久之后，发现有很多结果出来不满意，反正是我自己个人的项目，所以其实没什么所谓。但精益求精总是要的吧，反正在家闲着也是闲着。 2. 异步爬虫改回同步爬...
-
廿伍-爬虫接受JS渲染
1. 开始 研究了好久，终于发现了如何做，不过无法异步完成，只能用 Supervisor 开多进程去做了。 2.使用 selenium 渲染JS 首先我必须放出参考文章 ht...
-
廿肆-Django 建设 WebApp 管理 MongoDB 数据库内容
1. 缘起 前期爬了很多数据，我们需要有一个交互界面去判断爬取的数据归属情绪是哪种。因为程序是部署在云服务器上的，所以当然就是建立一个 WebApp 去交互，而我前期又帮公司...
-
廿叁-Supervisor 配置 Django 被 Sqlite3 在 LD_LIBRARY_PATH 上坑了
1. Django简单运行可以 前期说想写个 Web App 做管理以及发布 API。廿贰-NodeJS简单代理池（承） 以及 Python 捉取网页内容写好后在 Githu...
-
廿贰-NodeJS简单代理池（承） 以及 Python 捉取网页内容
1.关于 NodeJS 简单代理池 前面基本建设可以参考以前的文章：拾肆-NodeJS简单代理池（起）拾捌-NodeJS简单代理池（转） 1.1 本次更新综述 本次只是在看到...
-
廿壹-爬 URL 、Python 异步 、Supervisor 安装配置等事宜
1.综述 伪代码 可以参考《廿-爬URL以及分词情绪分析初步设想》，才发现这个要做一整天才做得出来，不过大部分时间都是用来 部署 服务器。 代码放在大型同性交友网站其实根据 ...
-
廿-爬URL以及分词情绪分析初步设想
1.爬网络页面链接 其实是想捉取大量 网络内容 以对以后建立 情绪 爬虫作为 样本 ，设想就是不断把所有网络 可读取 的 页面 都抓下来。 1.1 数据库设计 以一个 数据库...
-
拾玖-Python 异步 爬虫 MongoDB 等事宜实施
1. 综述 根据前期的 NodeJS 代理池开展的爬虫终于有所进展，技术实现已初步实现，相关引用资料如下所示： 爬虫http://c.biancheng.net/view/2...
-
拾捌-NodeJS简单代理池（转）1.缘起 原本的架构介绍如下：拾肆-NodeJS简单代理池（起） 然后今天为了做其他需要把这个完善一下。 2.配置文件 原本就没用 ini 的配置文件存储方式，所以就用一个 ...
-
崔秉龙于2020年大年初五学习计划
1.把前期做的代理池修改一下 (预计完成时间为0.75天) 修改主要有以下几点： 爬出来的数据在保存的时候写入什么时候保存（存入日期） 不要一连不上就抛弃，需要在在保存数据内...
