Django Celery 任务异步化

django celery 2017年01月11日 星期三

一个项目其中多多少少会遇到需异步完成的任务,通俗点将就是,在一个请求正常结束之后,需额外执行其他的任务作业。这样的例子,如 缓存的更新,log的记录,短信...

Django允许Ajax多域名跨域访问

django ajax 2016年12月03日 星期六

进来做的项目,由于前后端分离,前端和后端的域名不一样,造成了需要解决跨域的问题。前端分为用户端和后台管理页面,域名也不相同,同时要支持所有的前端跨域访问,...

QQ海贼王漫画爬取日记之三大功告成

selenium phantomjs gevent 2016年10月14日 星期五

在搞清楚方法去爬取QQ海贼王漫画之后,还是需要寻求高效率的爬取,自己也去折腾一番,还是蛮有意思。最后是通过gevent + selenium + phan...

QQ海贼王漫画爬取日记之二破解JS

selenium firefox requests beautifulsoup 2016年09月09日 星期五

在上一篇中介绍了简单请求获取页面内容,页面是一段js渲染的,那就要破解js,若能够在爬取的时候执行这段js,那就OK了。

首先想着是否数据能够从接口...

QQ海贼王漫画爬取日记之一给自己挖坑

selenium requests beautifulsoup 2016年09月02日 星期五

本人也算是一个海贼迷,这几天项目已上线,相对来说算是闲了点,打算写个程序爬取QQ海贼王漫画全集,既满足兴趣,也满足了爱折腾的性格,O(∩_&cap...