经管之家App
让优质教育人人可得
立即打开
全部版块
我的主页
›
论坛
›
数据科学与人工智能
›
数据分析与数据科学
›
R语言论坛
怎么用R进行网页抓取?
楼主
我要考东财
14437
11
收藏
2013-02-27
怎么用R进行网页上的数据抓取,回答的好赏大洋啊
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
全部回复
沙发
ilikeyahoo
2013-2-28 06:06:01
R的文本处理不是很强,为什么用R做这个?奇怪的问题。感觉像那根树枝上山打老虎去
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
藤椅
trier2006
2013-2-28 09:25:58
帮顶
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
板凳
ltx5151
2013-2-28 11:34:39
如果用Python或者C#可能更容易。但是R本身也有很强的处理功能。
用regular expression. 将html的source打开,比如可以将其按照txt的格式打开。里面的编码都是有规律的,接下来用regular experssion打开。比较常用的函数有gsub, strsplit, grep等,lz可以自己看帮助文件。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
报纸
我要考东财
2013-2-28 21:51:11
谢谢了
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
地板
い轩ウゾ菱
2015-4-23 12:05:29
用XML包进行网页文本、表格抓取
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
点击查看更多内容…
7楼
dataorz
2015-4-23 16:35:56
网络爬虫利器 RCurl
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
8楼
feng026
2015-4-23 18:24:48
可以看看最新的rvest 包。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
9楼
xuxinpeng45
2015-4-23 22:52:58
R可以在网页上抓取数据,一种途径是使用函数readlines()下载网页,然后使用如grep()和gsub()一类的函数处理,对于结构复杂的网页,可以使用RCurl和XML包来提取其中想要的信息。更多信息和示例,参考在Programming with R(www.progranming.com)上找到的“Webscraping Using ReadLines and Rcurl”一文;
是我在读R语言实战的时候看到的,楼主可以参考
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
10楼
lisong-1227
2015-4-24 18:32:42
又长知识了
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
11楼
Soleking
2016-6-14 16:07:45
涨姿势!
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
12楼
七月流水
2017-1-23 15:34:53
还是没搞明白怎么搞。。。。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
相关推荐
淘宝网数据抓取
求P2P数据抓取软件
网页抓取又添利器
求助用R进行融资融券数据的网页抓取
国债到期/即期/远期收益率数据抓取工具
求助~请教网络数据抓取
【带搜索、网页抓取、正则、保存】【源码】python小例子。附源码及知识点讲解
网页抓取数据后,列表导出的问题
[博文精选]R语言:网页抓取之不同提取方法解析
网络数据抓取技术如何推进企业“大数据战略”需求
栏目导航
R语言论坛
EViews专版
文献求助专区
休闲灌水
真实世界经济学(含财经时事)
金融实务版
热门文章
中国金融生成式AI多模态内容鉴伪与安全防御 ...
全球能源转型展望2025—全球和区域预测至20 ...
海外资管机构赴上海投资指南(2025版)
understanding climate change perceptions ...
【全美经典】离散数学
全球能源转型展望2025—全球和区域预测至20 ...
世界机器人2025年报告 World Robotics 2025
甲子光年_2025甲子Cool Vendor人形机器人大 ...
AOM:The Boundaries of Trust in a New Era
气象学-山东大学
推荐文章
AI狂潮席卷学术圈,不会编程也能打造专属智 ...
10月重磅来袭|《打造Coze/Dify专属学术智能 ...
最快1年拿证,学费不足5W!热门美国人工智能 ...
关于如何利用文献的若干建议
关于学术研究和论文发表的一些建议
关于科研中如何学习基础知识的一些建议 (一 ...
一个自编的经济学建模小案例 --写给授课本科 ...
AI智能体赋能教学改革: 全国AI教育教学应用 ...
2025中国AIoT产业全景图谱报告-406页
关于文献求助的一些建议
说点什么
分享
微信
QQ空间
QQ
微博
扫码加好友,拉您进群
各岗位、行业、专业交流群