养只爬虫当宠物（Node.js 爬虫爬取 58 同城租房信息）
先上一个源代码吧。https://github.com/answershuto/Rental欢迎指导交流。搭建Node.js环境及启动服务安装node以及npm，用express模块启动服务，加入自己所需要的中间件即可，这个不是本文所要讨论的重点，可以参考网上的一些教程搭建环境。获取导航页URL以及数据打开58同城主页，我主要针对杭州的二手房进行了爬取分析，所以进入杭州租房。http://hz.....
Python爬虫(四)——开封市58同城数据模型训练与检测
前文参考： Python爬虫(一)——开封市58同城租房信息 Python爬虫(二)——对开封市58同城出租房数据进行分析 Python爬虫(三)——对豆瓣图书各模块评论数与评分图形化分析 数据的构建 在这张表中我们可以发现这里有5个数据，这里有两个特征（房租是否少于2000，房屋面积是否大于50）来划分这5个出租房是否租借。 现在我们要做的就是是要根据第一个特征，第二个特征还是第三个...
Python爬虫(三)——开封市58同城出租房决策树构建
决策树框架： 1 # coding=utf-8 2 import matplotlib.pyplot as plt 3 4 decisionNode = dict(boxstyle='sawtooth', fc='10') 5 leafNode = dict(boxstyle='round4', fc='0.8') 6 arrow_args = dict(arrowstyle='...
Python爬虫(二)——对开封市58同城出租房数据进行分析
出租房面积(area) 出租房价格(price) 对比信息 代码 1 import matplotlib as mpl 2 import m...
Python爬虫(一)——开封市58同城租房信息
代码： 1 # coding=utf-8 2 import sys 3 import csv 4 import requests 5 from bs4 import BeautifulSoup 6 7 reload(sys) 8 sys.setdefaultencoding('utf-8') 9 # 请求头设置 10 11 def download(url): ...
58同城被爆简历数据泄露：700元的恶意爬虫软件可采集全国简历数据
雷锋网(公众号：雷锋网)消息，据《21世纪经济报道》记者调查发现，近日，有多个淘宝卖家廉价批发“58同城简历数据”：“一次购买2万份以上，3毛一条；10万以上，2毛一条。要多少有多少，全国同步实时更新。”甚至有卖家出售700元一套的爬虫软件，可采集全国430多个城市，以及464个职业的简历数据。 《21世纪经济报道》表示，58同城本身就没有对求职者简历做出过多保护，在58...
Python爬虫之多进程爬取（以58同城二手市场为例）
今天以58同城的二手市场为例（也就是转转）给大家介绍一下大规模的结构数据怎么爬取。 分析 先看下转转的网页结构与我想爬取的数据：
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
大数据
大数据计算实践乐园，近距离学习前沿技术
+关注