【经验分享】Dell 服务器远程管理卡客户端不支持Java8,需用Java 7。 ​

4月12日 12:13转发|评论

【经验分享】Ubuntu server下firefox headless截图中文显示为乱码。原因是缺少中文字体,安装中文字体后显示正常。 sudo apt-get install xfonts-wqy ​

4月9日 12:37转发|评论

[2019年4月4日上午10点多]部分地区114.114.114.114和8.8.8.8均出现故障,导致Squid大量出现503错误 ​

4月4日 11:01转发|评论

【经验分享】Ubuntu 16.04 Server下firefox -v提示如下错误: XPCOMGlueLoad error for file /data/firefox/libxul.so: libXt.so.6: cannot open shared object file: No such file or directory Couldn't load XPCOM. 解决: sudo apt-get install libxt6 ​

4月1日 17:29转发|评论

【经验分享】Ubuntu下如何快速定位一个服务对应的启动文件? 方法: systemctl status <service> 或者 systemctl show <service> 例如,我们要查看x11vnc服务对应的启动文件路径(想增加一个启动参数) systemctl status x11vnc 返回信息如下: ● x11vnc.service - Start x11vnc at startup. Lo ​

3月27日 17:37转发|评论

【经验分享】pyautogui出现“SyntaxError: 'return' with argument inside generator”异常(如图所示)的解决:卸载pyscreeze,安装pyscreeze 0.1.19版本即可。 sudo pip uninstall pyscreeze sudo pip install pyscreeze==0.1.19 ​

3月27日 11:51转发|评论

【经验分享】使用 Chrome DevTools Protocol 协议,在Network.responseReceived时调用Network.getResponseBody获取应答正文有时会出现“No resource with given identifier”异常,是什么原因? 解答:当浏览器接收到HTTP应答头之后Network.responseReceived被调用,但此时HTTP应答正文(ResponseBody) ​

3月25日 16:42转发|评论

【经验分享】使用Fiddler时如何屏蔽Chrome的证书警告:"Your connection is not private"/"您的连接不是私密连接"(如图1所示)? 启动chrome的时候加上--ignore-certificate-errors命令行参数(如图2所示)即可。 测试效果如图3所示。 ​

3月21日 17:30转发|评论

【经验分享】Ubuntu server下google-chrome启动出现"[5430:5430:0321/124708.367027:ERROR:browser_dm_token_storage_linux.cc(101)] Error: /etc/machine-id contains 0 characters (32 were expected)."问题的解决: sudo cp /var/lib/dbus/machine-id /etc/machine-id 参考:http://t.cn/ExQt3an ​

3月21日 12:57转发|评论

【经验分享】requests库使用py2exe打包之后出现"Could not find a suitable TLS CA certificate bundle"问题的解决: 原因是打包之后按默认路径无法找到cacert.pem文件。将cacert.pem复制到exe同目录下,然后在程序里设置REQUESTS_CA_BUNDLE环境变量,如下: os.environ['REQUESTS_CA_BUNDLE'] = ​

3月20日 13:11转发|评论

【经验分享】Ubuntu上添加可信任根证书 1. 如果是pem格式的根证书,先重命名为 .crt格式,例如( mitmproxy-ca-cert.crt)。 2. sudo cp mitmproxy-ca-cert.crt /usr/local/share/ca-certificates。 3. sudo update-ca-certificates update-ca-certificates命令将PEM格式的根证书内容附加到/etc/ssl ​

3月18日 11:03转发|评论

【经验分享】Python urllib2连接HTTPS网站出现“SSL routines:SSL23_GET_SERVER_HELLO:sslv3 alert handshake failure”问题(如图1所示)的解决。从这里github.com/pytorch/pytorch/issues/3193得知,Python2.7.9之前的版本连接某些HTTPS网站会有这个问题,之后的版本没有问题。于是测了下别的服务器 ​

3月14日 15:41转发|评论

【经验分享】远程GeckoDriver的使用 - 鲲之鹏的技术人员在本文向您介绍如何远程使用GeckoDriver调用多台服务器上的Firefox浏览器进行数据抓取。 >>> http://t.cn/EMnLGuL ​

3月14日 15:26转发|评论

【经验分享】PDF表格抽取Python库 Camelot - http://t.cn/E7ao8cR Camelot is a Python library that makes it easy for anyone to extract tables from PDF files! 依赖的库有点多,不过效果超赞! 实测效果: 图1为PDF原始文件截图; 图2为抽取为CSV后截图; ​

2月20日 12:00转发|评论

【经验分享】“永辉生活微信小程序”不响应KEYCODE_PAGE_UP(92) 怎么破? 测试发现可以响应KEYCODE_DPAD_DOWN(20),不过KEYCODE_DPAD_DOWN一次只能滚动很小的幅度。怎么提升效率? 一次发送多个CODE即可。 例如,一次发送10个KEYCODE_DPAD_DOWN操作: adb shell input keyevent 20 20 20 20 20 20 20 ​

2月15日 19:14转发|评论

18年12月下旬淘宝升级了反爬虫策略,其中一项最重要的改变就是商品搜索必须要登录才能进行,登录之后访问频繁就会出现验证码。鲲之鹏的技术人员通过技术攻关,目前已有了突破性的进展。目前可以实现: (1)自动登录,绕过淘宝对Selenium的屏蔽。 (2)自动搜索。 (3)验证码自动解决。 下面是我们测 ​

1月21日 10:51转发|评论

微信公众号文章抓取示例 ​

1月18日 18:08转发|评论

【经验分享】如何获取我查查App当前所选城市? adb pull /data/data/com.wochacha/shared_prefs/com.wochacha_preferences.xml ./com.wochacha_preferences.xml 然后读取"SelectedCityName"属性。如图所示。 ​

1月18日 14:09转发|评论

拼多多商品ID采集:Selenium + Mitmproxy ​

1月18日 12:39转发|评论

【经验分享】SSH本地端口映射。场景如下: 某Linux母机下有多台KVM虚拟机,虚拟机的VNC只开放了127.0.0.1的访问权限。如何远程连接这些VNC端口呢? 可以使用SSH本地端口映射实现,在本地机执行如下命令: ssh -L 127.0.0.1:5901:127.0.0.1:5901 user@ip-of-linux-host 解释一下:监听本地5901端口,将 ​

1月16日 12:01转发|评论