【经验分享】“selenium + phantomjs”如何正确退出phantomjs进程? 背景:程序用使用diver.quit()或driver.close()方法退出phantomjs进程偶尔会失败,出现“OSError: Bad file descriptor”异常。经测如下方法可以有效解决问题: import signal driver.service.process.send_signal(signal.SIGTERM) ​

11月3日 15:24转发|评论

谷歌DNS 8.8.8.8现在貌似故障了,在美国无法解析安居客域名,换用114.114.114.114可以: dig @8.8.8.8 www.anjuke.com 查询不到(图1); dig @114.114.114.114 www.anjuke.com 能查询到(图2); ​

9月30日 22:11转发|评论

【实践出真知】山东和苏州两地总结出来的经验:pppd持续出现“No response to 3 echo-requests, Serial link appears to be disconnected"可能是宽带接入设备(Modem)负载太大了! ​

9月29日 17:49转发|评论

【新品发布】正规IDC机房17万IP代理招租,按流量计费,无带宽和并发限制! 遍布世界57个国家,700台专业服务器,每台1C的IP,共计17万IP。支持按国家筛选!默认自动负载均衡! 点击查看详情 >>> http://t.cn/R0WMsU2 国家和IP数量如下表: Country IP Count Turkey 256 Canada 512 Madagascar 2560 It ​

9月28日 21:48转发|评论

淘宝外卖(口碑外卖)全国所有城市商户数据2017年9月底更新(62.8万家)。2017年9月底更新。含店招、营业执照和餐饮服务许可证图片文件。 >>> http://t.cn/R0oybU9 ​

9月27日 09:56转发|评论

是谁把我的7777端口占用了? lsof -i:7777 ​

9月27日 09:55转发|评论

成功绕过淘宝(口碑)外卖签名机制,顺利拿到Ajax返回数据。 PS:常规模拟浏览器方法无效,需结合抓包。 ​

9月22日 21:32转发|评论

Firefox历史版本下载地址:http://t.cn/Rbu2y44 PS:slimerjs支持Firefox from 38.0 to 52.0. ​​​​

9月22日 11:34转发|评论

【无关技术】更多的时候是做一个运维,看着爬虫输出的信息越快越开心 http://t.cn/R0Lvf6P ​

9月22日 10:06转发|评论

【经验分享】Chrome V55以后不支持设置页面编码了(不信你试试看)。不过,这货(Set Character Encoding插件)可以帮你实现。 http://t.cn/RaIDInW ​

9月20日 17:23转发|评论

【经验分享】由于项目需要在Linux Server下将近千万个word文档(*.doc)转换为文本格式(html或txt),经测试效果最好的方法是使用LibreOffice的命令行工具。 安装: sudo apt-get purge libreoffice-core sudo add-apt-repository -y ppa:libreoffice/ppa sudo apt-get update sudo apt-get install ​

9月14日 15:10转发|评论

搜房网(房天下)全国新房楼盘+二手房小区数据2017年07月份更新(“小区名称”,”城市”,”小区地址”,”项目特色”,”所属区域”,”邮编”,”产权描述”,”物业类别”,”竣工时间”,”开发商”,”建筑结构”,”建筑类别”,”建筑面积”,”占地面积”,”当期户数”,”总户数”,”绿化率”,”容积率”,”物 ​

8月17日 09:55转发|评论

【经验分享】利用Fiddler2的Custom Rules自动抓取App的TOKEN并记录到文件 >>> http://t.cn/R9RdWc3 ​

8月10日 16:03转发|评论

【经验分享】某拨号服务器的Web API接口突然变得不稳定,重启Apache2后正常,但是过不来多久又会挂掉。查看error日志,发现如下信息: """ [mpm_event:error] [pid 54893:tid 140124506744704] AH00484: server reached MaxRequestWorkers setting, consider raising the MaxRequestWorkers setting "" ​

8月5日 10:50转发|评论

给遨游做个广告。目前支持"S5+认证"代理的浏览器几乎没有,但不是没有,让我来告诉你它就是遨游5。 ​

7月26日 14:47转发|评论

【经验分享】requests库使用socks5代理提示“Missing dependencies for SOCKS support”问题解决: pip install pysocks pip install requests[socks] >>> http://t.cn/R9ZI4eH ​

7月26日 11:54转发|评论

【经验分享】又解决一个疑难杂症:py2exe打包某使用paste的程序时总是失败,提示“No module named paste”,确认paste库是安装成功的。经过层层追踪最终发现是py2exe中的imp.find_module('paste')报的错。 经过验证,imp.find_module('paste')果真报错: Python 2.7.6 (default, Jun 22 2015, 17:58: ​

7月21日 12:30转发|评论

[good]国内知名本地生活信息平台3648万商户数据2017年07月份更新 附:CSV数据量统计截图。 ​

7月3日 10:14转发|评论

【山重水复疑无路,柳暗花明又一村】 经过不懈努力终于搞定裁判文书网App的数据解密! ​​​​

6月30日 12:02转发|评论

【如何启停虚拟网卡】 ifup, ifdown无效。正确做法如下: 查看虚拟网卡(名称:v123456)状态: ip link show v123456 启动虚拟网卡(名称:v123456): sudo ip link set v123456 up ​

6月27日 18:02转发|评论