R语言爬虫遇到错误

1636

收藏 2017-08-17

悬赏 50 个论坛币未解决

我的原计划是把http://www.cbalicai.com/productTotal.html上面的理财产品爬下来。
http://www.cbalicai.com/productTotal.html
网上找的一段可行的代码：

复制代码

按它的操作一遍，果然得到一个数据表格
于是，我模仿它写了一段自己的代码，可是为什么我得到的结果是“list()” 没资料啊没资料。求高手指点。

复制代码

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

全部回复

2017-8-18 10:41:39

跟网页加载方式有关，所以要用真实的表格网址
http://www.cbalicai.com/producttoIndex.do?page.pageNo=1
末尾是1代表第1页

复制代码

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2017-8-22 13:37:42

小朝发表于 2017-8-18 10:41
跟网页加载方式有关，所以要用真实的表格网址
http://www.cbalicai.com/producttoIndex.do?page.pageNo=1
...

您的答案太棒了！再多问一句，我想做个循环，把这些都弄下来。能不能自动获取它的最大页码？

复制代码

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2017-8-22 14:32:23

tylerma3223 发表于 2017-8-22 13:37
您的答案太棒了！再多问一句，我想做个循环，把这些都弄下来。能不能自动获取它的最大页码？

这要试，或与网站联系，是否允许大批量下载。。例如，新浪网上的历史交易数据，下载几支股票是可以的，但全部股票下载，就会被阻止，出现： "HTTP error 456." 错误提醒．

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享