经管之家App
让优质教育人人可得
立即打开
全部版块
我的主页
›
论坛
›
数据科学与人工智能
›
数据分析与数据科学
›
R语言论坛
给各位兄弟姐妹拜年了。小弟刚接触R一个月,关于R的速度和空间的愚见,请指教。
楼主
yukuang
1966
4
收藏
2015-02-02
碰到一个大大的矩阵运算,时间和空间复杂度都是平方。使用普通的R函数解决,碰到问题:
1、普先碰到了烦人的cannot allocate vector of size 595.8Mb。我的内存是4G,也运行了memory.limit(4000),为何到了595.8Mb就不让用了?
2、听说ff或bigmemory可以解决内存问题,在winxp下尝试了一下ff,但是用了ff很多现成的R函数就不能用了,听说是必须使用ff版的R函数才行。
3、那就牺牲时间换空间吧,总比新买些内存强啊。用了for循环较慢,又听说apply在效率上和for差不多(没试过),被老板批效率太低。
4、又试了下Rcpp,ff,C++,Eigen,boost等的组合,发现太痛苦了,程序逻辑倒不算复杂,多种语言(库)的糅合,最痛苦的就是数据类型(数据结构)的转换让人眼花。
高手们能否给兄弟指条路,到底用哪种语言或技术才能获得时间和空间都略加满意的结果,
,matlab是不是比R强些?
非得把兄弟往map/reduce上逼吗?
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
全部回复
沙发
soccy
2015-2-2 18:58:14
加内存吧,比白菜还便宜。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
藤椅
houyunhuang
2015-2-3 10:29:05
R不是很适合处理大数据,毕竟它是在内存内处理的
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
板凳
ALer
2015-2-3 16:57:23
houyunhuang 发表于 2015-2-3 10:29
R不是很适合处理大数据,毕竟它是在内存内处理的
请问哪一种适合大数据?不知道该学哪一种语言,因为想学数据分析,主要用于金融大数据
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
报纸
whlgh
2015-2-3 17:14:46
可以试试Python啊,现在两大数据分析流派R和Python,我是准备JPR都搞的,Java+Python+R。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
相关推荐
那位兄弟姐妹有政经就业方面的具体一些的信息?
请各位兄弟姐妹帮个小忙 诚恳说声谢谢大家
哪位兄弟姐妹帮帮忙吧
兄弟姐妹们给个公道话。华科与武大在你们心中地位?
拜年啦!
我需要人用疫苗的相关报告
各位兄弟姐妹,本人今年已34,借贵地有一事咨询,请进来给予指点,谢谢。(惭愧ing)
sas 学习 各位兄弟姐妹多多指教
这儿有正在搞SOA-FAP的兄弟姐妹吗?
各位兄弟姐妹早安
栏目导航
R语言论坛
创新与战略管理
经管类求职与招聘
会计与财务管理
EViews专版
行业分析报告
热门文章
CDA数据分析脱产就业班于2026年3月7日开班! ...
CDA数据分析师:深耕表格结构数据特征,筑牢 ...
中外历史年代对照表
湖南统计年鉴2025(Excel版)
中国提振消费的战略选择与国际经验,提振消 ...
2026太空算力发展研究报告
Measure Theory for Analysis and Probabil ...
下载到假资源如何退单
安徽全省一盘棋发力汽车产业
【24顶刊热点!】2000-2024上市公司股价崩盘 ...
推荐文章
2026JG学术冬训营:从Stata初高到Python机器 ...
【必看】【本版版规,欢迎发悬赏贴求助】
26年寒假天津站|Gemini论文写作&数据分析 ...
关于如何利用文献的若干建议
关于学术研究和论文发表的一些建议
关于科研中如何学习基础知识的一些建议 (一 ...
一个自编的经济学建模小案例 --写给授课本科 ...
AI智能体赋能教学改革: 全国AI教育教学应用 ...
2025中国AIoT产业全景图谱报告-406页
关于文献求助的一些建议
说点什么
分享
微信
QQ空间
QQ
微博
扫码加好友,拉您进群
各岗位、行业、专业交流群