经管之家App
让优质教育人人可得
立即打开
全部版块
我的主页
›
论坛
›
数据科学与人工智能
›
数据分析与数据科学
›
数据分析与数据挖掘
如何根据增量数据更新预测算法的结果?
楼主
墨移
2726
1
收藏
2016-02-13
悬赏
30
个论坛币
已解决
采用决策树、神经网络、回归等算法时,包括集成学习,一般基于历史样本数据训练模型,如果加入增量数据后(不是时序模型问题)除了将算法在全量数据(历史样本数据+增量数据)上重新运行一遍外,是否有其他的算法或机制对模型结果进行更新?在大数据应用的时候,如果一旦有增量数据就在全量数据上更新算法结果太费资源了。例如在推荐应用中,网易云音乐根据用户每天的行为数据更新推荐结果。
最佳答案
Crsky7
查看完整内容
不用重跑全量数据啊,这些互联网公司用的都是online learning算法,比如stochastic gradient descent这种,每过来一个样本,更新一次参数,drop掉这个样本,甚至不需要储存历史样本数据,但可以达到和跑全量数据差不多的效果。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
全部回复
沙发
Crsky7
2016-2-13 12:18:14
不用重跑全量数据啊,这些互联网公司用的都是online learning算法,比如stochastic gradient descent这种,每过来一个样本,更新一次参数,drop掉这个样本,甚至不需要储存历史样本数据,但可以达到和跑全量数据差不多的效果。
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
相关推荐
matlab用于数据挖掘的m语言算法源码
非常有用的滤波算法:kalman filter 的几篇入门文章
[分享]马上毕业了,共享点matlab编的遗传算法优化神经网络的资料
sas对数据集合并的问题(感觉属于数据更新)
求助:数据更新的问题
编辑非要更新数据 但数据还没出来
股价崩盘指标数据更新到2019
股价同步性指标数据更新到2019
分类计算的死亡率及病死率统计:数据更新至2014年
财务重述数据更新至19年
栏目导航
数据分析与数据挖掘
计量经济学与统计软件
winbugs及其他软件专版
爱问频道
数据求助
文献求助专区
热门文章
海外资管机构赴上海投资指南(2025版)
世界机器人2025年报告 World Robotics 2025
甲子光年_2025甲子Cool Vendor人形机器人大 ...
understanding climate change perceptions ...
【全美经典】离散数学
全球能源转型展望2025—全球和区域预测至20 ...
AOM:The Boundaries of Trust in a New Era
气象学-山东大学
Gain or pain The double‐edged sword eff ...
全国数智产业发展研究报告(2024-2025)
推荐文章
AI狂潮席卷学术圈,不会编程也能打造专属智 ...
10月重磅来袭|《打造Coze/Dify专属学术智能 ...
最快1年拿证,学费不足5W!热门美国人工智能 ...
关于如何利用文献的若干建议
关于学术研究和论文发表的一些建议
关于科研中如何学习基础知识的一些建议 (一 ...
一个自编的经济学建模小案例 --写给授课本科 ...
AI智能体赋能教学改革: 全国AI教育教学应用 ...
2025中国AIoT产业全景图谱报告-406页
关于文献求助的一些建议
说点什么
分享
微信
QQ空间
QQ
微博
扫码加好友,拉您进群
各岗位、行业、专业交流群