网页爬取如何爬取表格数据 - 经管之家

› 论坛 › 数据科学与人工智能 › 数据分析与数据科学 › R语言论坛

网页爬取如何爬取表格数据

1200

4

收藏 2021-03-30

这是我想爬取的网址，一个记录新西兰犯罪信息的网站：https://www.police.govt.nz/crime-snapshot

网站打开后可以看到一个表格，记录着各种犯罪类型以及对应的犯罪人数。我想获得这个表格的数据，但是发现只能选中表格整体，无法选中某个具体的数据，请问该如何爬取这个表格的数据呢？

附件列表

原图尺寸 363.31 KB

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

全部回复

2021-3-30 14:55:14

只能选取一整块

附件列表

原图尺寸 371.63 KB

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2021-3-30 18:47:54

这个不是表格，是Tableau的可视化界面，数据不在网页里，需要js

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2021-3-30 21:46:37

这是requests post 后返回的数据，数据在图中圈起来的地方，这是json数据，感觉有点乱，你自己找找看

捕获.PNG

附件列表

原图尺寸 32.59 KB

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

2021-4-23 16:57:01

szxship 发表于 2021-3-30 21:46
这是requests post 后返回的数据，数据在图中圈起来的地方，这是json数据，感觉有点乱，你自己找找看

非常感谢！我按照您的办法找到了json数据，然后用R的httr包的POST函数来获得返回数据，但是想请教一下POST(url, header, body)里面的body参数需要怎样设置才能定位到您截图里datavlues那样的数据呢？

二维码

扫码加我拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

相关推荐

栏目导航

热门文章

推荐文章

扫码加好友，拉您进群

各岗位、行业、专业交流群