【经验分享】Ubuntu上添加可信任根证书 1. 如果是pem格式的根证书,先重命名为 .crt格式,例如( mitmproxy-ca-cert.crt)。 2. sudo cp mitmproxy-ca-cert.crt /usr/local/share/ca-certificates。 3. sudo update-ca-certificates update-ca-certificates命令将PEM格式的根证书内容附加到/etc/ssl ​

3月18日 11:03转发|评论

【经验分享】Python urllib2连接HTTPS网站出现“SSL routines:SSL23_GET_SERVER_HELLO:sslv3 alert handshake failure”问题(如图1所示)的解决。从这里github.com/pytorch/pytorch/issues/3193得知,Python2.7.9之前的版本连接某些HTTPS网站会有这个问题,之后的版本没有问题。于是测了下别的服务器 ​

3月14日 15:41转发|评论

【经验分享】远程GeckoDriver的使用 - 鲲之鹏的技术人员在本文向您介绍如何远程使用GeckoDriver调用多台服务器上的Firefox浏览器进行数据抓取。 >>> http://t.cn/EMnLGuL ​

3月14日 15:26转发|评论

【经验分享】PDF表格抽取Python库 Camelot - http://t.cn/E7ao8cR Camelot is a Python library that makes it easy for anyone to extract tables from PDF files! 依赖的库有点多,不过效果超赞! 实测效果: 图1为PDF原始文件截图; 图2为抽取为CSV后截图; ​

2月20日 12:00转发|评论

【经验分享】“永辉生活微信小程序”不响应KEYCODE_PAGE_UP(92) 怎么破? 测试发现可以响应KEYCODE_DPAD_DOWN(20),不过KEYCODE_DPAD_DOWN一次只能滚动很小的幅度。怎么提升效率? 一次发送多个CODE即可。 例如,一次发送10个KEYCODE_DPAD_DOWN操作: adb shell input keyevent 20 20 20 20 20 20 20 ​

2月15日 19:14转发|评论

18年12月下旬淘宝升级了反爬虫策略,其中一项最重要的改变就是商品搜索必须要登录才能进行,登录之后访问频繁就会出现验证码。鲲之鹏的技术人员通过技术攻关,目前已有了突破性的进展。目前可以实现: (1)自动登录,绕过淘宝对Selenium的屏蔽。 (2)自动搜索。 (3)验证码自动解决。 下面是我们测 ​

1月21日 10:51转发|评论

微信公众号文章抓取示例 ​

1月18日 18:08转发|评论

【经验分享】如何获取我查查App当前所选城市? adb pull /data/data/com.wochacha/shared_prefs/com.wochacha_preferences.xml ./com.wochacha_preferences.xml 然后读取"SelectedCityName"属性。如图所示。 ​

1月18日 14:09转发|评论

拼多多商品ID采集:Selenium + Mitmproxy ​

1月18日 12:39转发|评论

【经验分享】SSH本地端口映射。场景如下: 某Linux母机下有多台KVM虚拟机,虚拟机的VNC只开放了127.0.0.1的访问权限。如何远程连接这些VNC端口呢? 可以使用SSH本地端口映射实现,在本地机执行如下命令: ssh -L 127.0.0.1:5901:127.0.0.1:5901 user@ip-of-linux-host 解释一下:监听本地5901端口,将 ​

1月16日 12:01转发|评论

【经验分享】KVM调整磁盘大小: 1. 查看原磁盘大小。 qemu-img info win7.img 如图是80G。 2. 增加10G。 sudo qemu-img resize win7.img +10G 3. 查看增加后的磁盘大小。 qemu-img info win7.img 如果是90G。 4. 重启虚拟机,进入虚拟机磁盘管理再确认下。 如图2所示,多了一个10GB的空闲分区。 ​

1月16日 11:37转发|评论

【经验分享】KVM在Ubuntu下的安装配置 >>> http://t.cn/EGdGjVE ​

1月9日 16:03转发|评论

【经验分享】拼多多列表页商品最大可见数为1000个。 如何测试Ajax动态分页列表的最大可翻页数?这个文章还是我3年前写的,后来时常用到。 http://t.cn/RLfKlUC ​

1月3日 15:33转发|评论

【经验分享】安卓模拟器中需要先关闭物理键盘,才能正常使用ADB Keyboard。设置方法见附图。 ​​​​

1月2日 16:52转发|评论

常见安卓模拟器远程ADB监听端口(如图) ​

2018-12-26 09:49转发|评论

【赞】pywebview是webview组件的轻量级跨平台原生封装,实现利用Web技术开发GUI应用 >>> 项目主页:http://t.cn/EUJ5Esq 说明文档:http://t.cn/EUJ5Esy How to build cross platform Desktop GUI based apps with Python and web technologies and frameworks:http://t.cn/EUJ5EsU ​

2018-12-13 12:27转发|评论

【有图有真相】江苏省苏州市电信DHCP租期为48小时,有图有真相。 ​

2018-11-19 16:02转发|评论

【经验分享】DeleGate有的时候响应速度异常的慢,经查是设计上存在缺陷,修改官方源码,重新编译后问题解决,详见 >>> http://t.cn/E24NJYb ​

2018-11-16 22:33转发|评论

【经验分享】Ubuntu14.04的Squid3.3.8(apt-get安装的官方二进制版本)在编译的时候被加上了 --with-filedescriptors=65536选项。我们从Squid官方下载了3.3.8的源码,重新编译Squid,并将 --with-filedescriptors=65536选项去掉。编译完成后,用新生成的squid二进制文件覆盖原版本squid文件,问题成功 ​

2018-11-16 22:31转发|评论

【有图有真相】江苏省泰州市电信DHCP租期为48小时,有图有真相。 ​

2018-11-16 16:04转发|评论