scrapy 重定向

scrapy可以支持重定向,有以下方法:

阅读更多

教你如何将自己的脚本代码放到服务器上运行

上次弄了个机器人,反响挺不错的,我也挺满意的,因为这个我也初步了解了服务器这个东西,懂得了如何将自己的脚本代码放到服务器上运行了,妈妈再也不怕我每天都得开着电脑才能运行脚本了,不过说实话,这个服务器真贵,不过有阿里云学生机,想尝试了解下的可以去试试,非常建议去折腾下,可以学到的东西很多。

阅读更多

爬虫不得不学之 JavaScript 函数对象篇

今天好像是情人节?所以最适合面向对象,JavaScript 也有对象,我们也可以随时面向对象,方便得很,那怎样才有对象呢?下面告诉你!

阅读更多

爬虫不得不学之 JavaScript 入门篇

现在的爬虫越来越难了,不再和之前的那样,随便抓个包就可以找到相关的 url ,然后 post 一下或者 get 一下数据就出来了。还有一个可能就是可能你以前用来学习的爬虫网站太简单了,还没有看见过那些猛的。上两周我就想弄弄知乎登陆,参数的加密算是把 js 代码扣出来了,但是只能在浏览器上运行,一换到 Python 执行就各种报错,你不会 JavaScript 就什么都调不了,所以二话不说,开启了新的大陆。那就开始吧!

阅读更多

小白也可以看会的破解抖音字体反爬

现在的网站,处处都是反爬,我们这些爬虫的经常需要和他们斗智斗勇,就看谁更厉害。这不,就连字体也弄成了反爬,而且还不止一个网站,常见的就有猫眼和汽车之家。不过,字体反爬也没有用,毕竟我们会破!哈哈。

阅读更多

adb安装以及一些简单的操作

1.安装adb

安装jdk

在安装 Android SDK 之前首先需要安装 jdk 版本 8,因为只支持这个版本

阅读更多

安装docker及其简单操作

1.下载地址

https://download.docker.com/win/stable/DockerToolbox.exe

阅读更多

安装mitmproxy以及遇到的坑和简单用法

mitmproxy 是一款工具,也可以说是 python 的一个包,在命令行操作的工具。

阅读更多

为了一窥国足输韩国之后人们的评论,我爬了懂球帝APP

如果你是个足球迷的话,估计或多或少都会看一下昨晚中国踢韩国的比赛,因为不管他们踢得怎样,我们还是深爱着他们,那句话说得好,“国足虐我千百遍,我待国足如初恋”。更何况他们两场都踢赢了,所以面对第三场实力有点强的韩国队也是希望能赢的,毕竟我们也在十二强赛上赢过他们!

阅读更多

学习用python操作mysql

还没有学习如何用python来操作数据库,那我今天就带大家来学习如何用python操操作数据库。

阅读更多