1、基本使用 fromselenium importwebdriver fromselenium.webdriver.common.by importBy fromselenium.webdriver.support importexpected...

本文主要介绍在使用阿里云Redis的开发规范，从下面几个方面进行说明。 键值设计 命令使用 客户端使用 相关工具 通过本文的介绍可以减少使用Redis过程带来的问题。 一、键值设计 1、key名设计 可读性和可管理性 以业务名(或数据库名)为前缀...

不要惊讶，网上看了下分库分表的文章，很神奇的是，都在讲怎么进行分库分表，却不说分完以后，怎么部署上线的。这样在面试的时候就比较尴尬了。 你们自己摸着良心想一下，如果你真的做过分库分表，你会不知道如何部署的么？因此我们来学习一下如何部署吧。那么，请...

最近在研究自媒体相关的东西，对百家号、企鹅号、壹点号、搜狐号、惠头条等十余个自媒体平台，进行了较详细的研究。通过对百度搜索中获取的几十万的百家号信息，整理出了下面一百个发文最多的账号，供大家参考。

最近开始对先前做的采集器进行升级，由于在其开发过程中，需要不断的对其进行测试。每次修改一个bug，或新增一个功能，都需要登录服务器、 上传文件、解压、重启服务等，非常繁琐。 今天开始使用Fabric来实现几个简单的、重复性的操作，如登录服务器、执...

这几年，由于一直负责公司所有产品、项目等的数据采集，所以涉及到的服务器有几十台吧。同时，由于不同项目需求不同，定制开发的采集脚本也有几百个，每次有新功能发布，或者修改了一个小小的 Bug，都需要重复的执行：登录服务器-->切换到指定目录--...

1月11日是在他去年11月底宣布Y Combinator（以下简称 YC）美国总部停止中国区运营后，首度以奇绩论坛新基金创始人的身份对外发表演讲。他说：创业是一个历史潮流、拥抱创业创新面临的挑战，以及把握住属于创业者的机会，是他想要表述的的创业方...

每个Web 项目中都需要一个后台管理，但是从零开发一套后台控制面板并不容易，幸运的是有很多开源免费的后台控制面板，可以给开发者使用。今天就介绍几个常用的后台控制模板给大家参考。 AdminLTE GitHub 地址：https://github....

GNE: 通用新闻网站正文抽取器 GeneralNewsExtractor（GNE）是一个通用新闻网站正文抽取模块，输入一篇新闻网页的 HTML， 输出正文内容、标题、作者、发布时间、正文中的图片地址和正文所在的标签源代码。GNE在提取今日头条、...

数据采集中，发布时间解析的正确与否，直接关系着使用数据的产品的质量。一般在做做大规模数据爬取时，都会整理一下发布时间规律，如特殊关键字，时间正则等。下面介绍一下，我在工作中处理的具体步骤。 1：收集发布时间标识词 一般情况下，标识发布时间的...