全部版块 我的主页
论坛 数据科学与人工智能 数据分析与数据科学 SAS专版
94532 1393
2011-10-29
有时我们常常需要保存备份某些网上的数据,如银行利率,股票行情,抑或统计局、各种金融机构或其他类型网站的数据。
有时这些网站会提供历史数据,有的则不会。但是我们可以通过SAS每天跑下程序获取累积历史数据作为后来的分析只用。现在我拿 获取 http://www.shibor.org/ 主页上海银行间同业拆放利率 作为案例进行演示。
可以看到,主页上每日更新的数据是在网页上。而且次数据可以在html原代码中找到。那我们就可以通过获取次网页的全部内容,然后再进行数据清洗以获得想要的两个字段:期限和利率。



高手看了,有什么更优秀的案例请多多分享。


本帖隐藏的内容

http://www.daaata.com/?p=218






本例对于高手稍许简单,只是给大家一个思路。没涉及到网页post 后的信息,此贴会有后续,望关注。



补充内容 (2012-12-30 06:18):
云哦。。不能编辑帖子了。 原来网站已挂。请登陆新网址查看
http://zhaocl.com/code/2012/12/30/web-crawler-1.html

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     [link]http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/[/link]

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     [link]http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/[/link]

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     [link]http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/[/link]

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:23):
系统bug 了。。不是我的错。。。     http://www.statalks.com/index.ph ... 网页数据总结及案例/
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2011-10-29 11:46:18
牛人
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2011-10-29 11:50:51
想学!
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2011-10-29 11:52:19
来围观一下
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2011-10-29 11:53:12
thank you!
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2011-10-29 11:53:25
thank you!
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

点击查看更多内容…

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群