经管之家App
让优质教育人人可得
立即打开
全部版块
我的主页
›
论坛
›
数据科学与人工智能
›
数据分析与数据科学
›
R语言论坛
给各位兄弟姐妹拜年了。小弟刚接触R一个月,关于R的速度和空间的愚见,请指教。
楼主
yukuang
2015
4
收藏
2015-02-02
碰到一个大大的矩阵运算,时间和空间复杂度都是平方。使用普通的R函数解决,碰到问题:
1、普先碰到了烦人的cannot allocate vector of size 595.8Mb。我的内存是4G,也运行了memory.limit(4000),为何到了595.8Mb就不让用了?
2、听说ff或bigmemory可以解决内存问题,在winxp下尝试了一下ff,但是用了ff很多现成的R函数就不能用了,听说是必须使用ff版的R函数才行。
3、那就牺牲时间换空间吧,总比新买些内存强啊。用了for循环较慢,又听说apply在效率上和for差不多(没试过),被老板批效率太低。
4、又试了下Rcpp,ff,C++,Eigen,boost等的组合,发现太痛苦了,程序逻辑倒不算复杂,多种语言(库)的糅合,最痛苦的就是数据类型(数据结构)的转换让人眼花。
高手们能否给兄弟指条路,到底用哪种语言或技术才能获得时间和空间都略加满意的结果,
,matlab是不是比R强些?
非得把兄弟往map/reduce上逼吗?
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
全部回复
沙发
soccy
2015-2-2 18:58:14
加内存吧,比白菜还便宜。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
藤椅
houyunhuang
2015-2-3 10:29:05
R不是很适合处理大数据,毕竟它是在内存内处理的
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
板凳
ALer
2015-2-3 16:57:23
houyunhuang 发表于 2015-2-3 10:29
R不是很适合处理大数据,毕竟它是在内存内处理的
请问哪一种适合大数据?不知道该学哪一种语言,因为想学数据分析,主要用于金融大数据
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
报纸
whlgh
2015-2-3 17:14:46
可以试试Python啊,现在两大数据分析流派R和Python,我是准备JPR都搞的,Java+Python+R。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
相关推荐
那位兄弟姐妹有政经就业方面的具体一些的信息?
请各位兄弟姐妹帮个小忙 诚恳说声谢谢大家
哪位兄弟姐妹帮帮忙吧
兄弟姐妹们给个公道话。华科与武大在你们心中地位?
拜年啦!
我需要人用疫苗的相关报告
各位兄弟姐妹,本人今年已34,借贵地有一事咨询,请进来给予指点,谢谢。(惭愧ing)
sas 学习 各位兄弟姐妹多多指教
这儿有正在搞SOA-FAP的兄弟姐妹吗?
各位兄弟姐妹早安
栏目导航
R语言论坛
武汉大学经济与管理学院
经管在职研
stata专版
行业分析报告
经管文库
热门文章
OpenClaw+Claude Code丨从"手动科研"到 ...
从数据源头到商业洞察:CDA数据分析师视角下 ...
斯坦福2026报告:中国AI模型追上美国(英)-4 ...
2025年全国及各省市经济财政债务分析
商业航天行业Space X:引领商业航天范式变革 ...
好书分享-AI开天辟地者:《艾伦 图灵传》
奇瑞风云T9L全球上市
2012-2024年上市公司企业实质性创新/策略性 ...
【重磅,24更新!】2012-2025我国社会融资规 ...
三只松鼠章燎原最新发声!
推荐文章
五一充电,学术突围!四大AI赋能王牌课程, ...
关于学术研究和论文发表的一些建议
几种免费下载文献的方法----我的文献应助经
【必看】【本版版规,欢迎发悬赏贴求助】
【新课】26年3月|Gemini辅助论文写作与数据 ...
关于如何利用文献的若干建议
关于科研中如何学习基础知识的一些建议 (一 ...
一个自编的经济学建模小案例 --写给授课本科 ...
AI智能体赋能教学改革: 全国AI教育教学应用 ...
2025中国AIoT产业全景图谱报告-406页
说点什么
分享
微信
QQ空间
QQ
微博
扫码加好友,拉您进群
各岗位、行业、专业交流群