经管之家App
让优质教育人人可得
立即打开
全部版块
我的主页
›
论坛
›
数据科学与人工智能
›
数据分析与数据科学
›
R语言论坛
给各位兄弟姐妹拜年了。小弟刚接触R一个月,关于R的速度和空间的愚见,请指教。
楼主
yukuang
1906
4
收藏
2015-02-02
碰到一个大大的矩阵运算,时间和空间复杂度都是平方。使用普通的R函数解决,碰到问题:
1、普先碰到了烦人的cannot allocate vector of size 595.8Mb。我的内存是4G,也运行了memory.limit(4000),为何到了595.8Mb就不让用了?
2、听说ff或bigmemory可以解决内存问题,在winxp下尝试了一下ff,但是用了ff很多现成的R函数就不能用了,听说是必须使用ff版的R函数才行。
3、那就牺牲时间换空间吧,总比新买些内存强啊。用了for循环较慢,又听说apply在效率上和for差不多(没试过),被老板批效率太低。
4、又试了下Rcpp,ff,C++,Eigen,boost等的组合,发现太痛苦了,程序逻辑倒不算复杂,多种语言(库)的糅合,最痛苦的就是数据类型(数据结构)的转换让人眼花。
高手们能否给兄弟指条路,到底用哪种语言或技术才能获得时间和空间都略加满意的结果,
,matlab是不是比R强些?
非得把兄弟往map/reduce上逼吗?
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
全部回复
沙发
soccy
2015-2-2 18:58:14
加内存吧,比白菜还便宜。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
藤椅
houyunhuang
2015-2-3 10:29:05
R不是很适合处理大数据,毕竟它是在内存内处理的
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
板凳
ALer
2015-2-3 16:57:23
houyunhuang 发表于 2015-2-3 10:29
R不是很适合处理大数据,毕竟它是在内存内处理的
请问哪一种适合大数据?不知道该学哪一种语言,因为想学数据分析,主要用于金融大数据
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
报纸
whlgh
2015-2-3 17:14:46
可以试试Python啊,现在两大数据分析流派R和Python,我是准备JPR都搞的,Java+Python+R。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
相关推荐
那位兄弟姐妹有政经就业方面的具体一些的信息?
请各位兄弟姐妹帮个小忙 诚恳说声谢谢大家
哪位兄弟姐妹帮帮忙吧
兄弟姐妹们给个公道话。华科与武大在你们心中地位?
拜年啦!
我需要人用疫苗的相关报告
各位兄弟姐妹,本人今年已34,借贵地有一事咨询,请进来给予指点,谢谢。(惭愧ing)
sas 学习 各位兄弟姐妹多多指教
这儿有正在搞SOA-FAP的兄弟姐妹吗?
各位兄弟姐妹早安
栏目导航
R语言论坛
站务与外事
CFA、CVA、FRM等金融考证论坛
外文文献专区
经管文库(原现金交易版)
金融类
热门文章
CDA 数据分析师:线性回归实战指南 —— 从 ...
世界上最简单的会计书(高清pdf版)
同心动力携手山西金控,共筑金融企业“以人 ...
AI应用新范式:从工具革命到“超级OS”的演 ...
R语言实战 机器学习与数据分
R语言预测实战
20XX年扶贫办雨露计划工作方案
如盈财女:10.31黄金短线偏强,上方还有上涨 ...
蔡定创教授、李云庆院长致联合国秘书长古特 ...
产品质量监督抽查企业基本信息扩展数据
推荐文章
AI狂潮席卷学术圈,不会编程也能打造专属智 ...
最快1年拿证,学费不足5W!热门美国人工智能 ...
关于如何利用文献的若干建议
关于学术研究和论文发表的一些建议
关于科研中如何学习基础知识的一些建议 (一 ...
一个自编的经济学建模小案例 --写给授课本科 ...
AI智能体赋能教学改革: 全国AI教育教学应用 ...
2025中国AIoT产业全景图谱报告-406页
关于文献求助的一些建议
几种免费下载文献的方法----我的文献应助经
说点什么
分享
微信
QQ空间
QQ
微博
扫码加好友,拉您进群
各岗位、行业、专业交流群