有很多开源的网络爬虫,如果我们掌握某一种或多种开源的爬虫工具,再我们获取数据的道路上会如虎添翼,事半功倍。这里我介绍一下我对于Scrapy网络爬虫的学习和搭建。
首先安装scrapy。在Windows和Linux下各有不同的办法,推荐在Linux下使用。
安装好了scrapy环境... 拈花古佛 9年前 (2015-08-31) 8258℃ 0评论 0喜欢
一 module
通常模块为一个文件,直接使用import来导入就好了。可以作为module的文件类型有”.py”、”.pyo”、”.pyc”、”.pyd”、”.so... 拈花古佛 9年前 (2015-08-16) 8235℃ 0评论 0喜欢
前段时间,ThoughtWorks在深圳举办一次社区活动上,有一个演讲主题叫做“Fullstack JavaScript”,是关于用JavaScript进行前端、服务器端,甚至数据库(MongoDB)开发,一个Web应用开发人员,只需要学会一门语言,就可以实现整个应用。
受此启发... 拈花古佛 9年前 (2015-08-04) 8029℃ 0评论 0喜欢
百分之九十以上的创业公司,散伙的原因只有一个,就是没钱了。剩下的小部分,可能是理念不一致或利益分配不公导致分家,或者是因为控制权矛盾把核心成员干掉,这些情况当中,大部分还是能继续活着,只有极少部分搞大了导致公司关门。让我们跟随创新工场-孙志超来看看创业公司散伙的原因和如何避免吧。... 拈花古佛 9年前 (2015-08-04) 8038℃ 0评论 0喜欢
pipy国内镜像目前有:
http://pypi.douban.com/ 豆瓣
http://pypi.hustunique.com/ 华中理工大学
http://pypi.sdutlinux.org/ 山东理工大学
http://pypi.mirrors.ustc.edu... 拈花古佛 9年前 (2015-08-02) 13878℃ 0评论 1喜欢
干了这杯互联网泡沫! (文|留几手) 不知道从啥时候开始,兴起了一股风潮,大学生一毕业基本都不找工作了,现在都必须得创业。几个朋友一聚会,聊天,你要说你在哪哪上班打工,人家就觉得你没上进心。没个“XX创始人”、“CXO”、“XX公司合伙人”你都不好意思说自己是搞互联网的。
哥有... 拈花古佛 9年前 (2015-08-02) 8014℃ 0评论 0喜欢
官网:http://requests.ryanmccue.info
官方介绍:
Requests is a humble HTTP request library. It simplifies how you interact with other sites and take... 拈花古佛 9年前 (2015-08-02) 8484℃ 0评论 0喜欢
一款基于Bootstrap的后台管理模版:Ace。Bootstrap是Twitter于2010年开发出来的前端框架,用过的同学应该知道,这款前端框架不仅界面很美观,而且兼容了很多的浏览器,大大加速了我们开发网站的速度!这篇文章讲到的Ace是基于Bootstrap的,所以界面自然也... 拈花古佛 9年前 (2015-08-02) 10702℃ 0评论 0喜欢