全部版块 我的主页
论坛 数据科学与人工智能 数据分析与数据科学 数据分析师(CDA)专版
2718 10
2016-11-04
样本:京东商城全品类抽样12000件商品信息目的:分析价格波动走势及相关性工具:Centos 7(两台)+Window 7+Python+PyMySQL+MySql+PyCharm+Navicat for MySql

数据表设计


20161028112211003.jpg



爬取过程


20161028113745431.jpg


部分结果


20161028114005586.jpg


微信截图_20161104100149.png


抓取环境配置:http://blog.csdn.net/zc0325/article/details/52954118
jddata_index.txt
大小:(1.79 KB)

只需: 1 个论坛币  马上下载

jddata_findInfo.txt
大小:(5.11 KB)

只需: 1 个论坛币  马上下载



03.jpg
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2016-11-6 03:39:47
哇,楼主好厉害!

要向你学习!!

何时才能达到你这种水平啊!?
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2016-11-6 14:11:57
可为 发表于 2016-11-4 10:14
样本:京东商城全品类抽样12000件商品信息目的:分析价格波动走势及相关性工具:Centos 7(两台)+Window 7 ...
这是怎么做到的
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2016-11-6 19:26:07
jiqimao742 发表于 2016-11-6 03:39
哇,楼主好厉害!

要向你学习!!
相互学习,需要数据了可以共享给你
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2016-11-6 19:27:47
gongtian 发表于 2016-11-6 14:11
这是怎么做到的
京东对访问价格的请求有IP次数限制,服务器的IP被限制了 目前在本地定时换IP继续抓着数据
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2016-11-7 04:13:08
可为 发表于 2016-11-6 19:26
相互学习,需要数据了可以共享给你
楼主,是不是理论上按照你分享的代码可以获取任意网站上自己想要的数据?
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

点击查看更多内容…
相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群