Python爬虫(四)使用selenium和headless浏览器
当只是爬静态网页时，用requests并解析页面是很方便的。如果我们看到加载页面时有调用API(浏览器的dev tool里network标签里看)，也可以直接向这个api发送请求。
不过当遇到ajax异步加载或者需...
python动态加载所有class或所有module
如下场景：在一个package下有多个文件，每个文件里都有对应的class，我并不想写多行"from myModule import myClass"也不想每次新增了文件或者类还得去新增一行import，希望能dy...
django上传文件500错误但本地server不出现错误的问题
最近改了django，遇到一个问题，在用域名访问时，提示上传错误http500。但是登录上去，用python manage.py runserver来启动再上传文件则不出现问题...
为Django ckeditor配置上传视频
我用了ckeditor来添加富文本编辑器，不上传视频或文件的话是够用了。不过当需要上传视频的时候，就需要额外的配置。
可以用html5video的插件: https://ckeditor.com/cke4/addo...
Python爬虫(七)使用scrapy快速爬取全站页面
前面介绍了用请求解析页面数据、headless加载页面js等资源的方式。我们也可以关注一下现有的轮子，一些比较优秀的爬虫框架。这里介绍一下scrapy，并以快速爬取网站全站的链接为例子说明。
scrapy是非常强大...