经管之家App
让优质教育人人可得
立即打开
全部版块
我的主页
›
论坛
›
提问 悬赏 求职 新闻 读书 功能一区
›
学习笔记1.0
训练贝叶斯信念网络
楼主
kongying168
6924
2
收藏
2010-12-15
贝叶斯信念网络如何学习?在学习或训练信念网络时,许多情况都是可能的。网络结构可能预先给定,或由数据导出。网络变量可能是可见的,或隐藏在所有或某些训练样本中。隐藏数据的情况也称为空缺值或不完全数据。
如果网络结构已知并且变量是可见的,训练网络是直接了当的。该过程由计算
CPT
项组成,与朴素贝叶斯分类涉及的计算概率类似。
当网络结构给定,而某些变量是隐藏的时,则可使用梯度下降方法训练信念网络。目标是学习
CPT
项的值。设
S
是
s
个训练样本
X1,X2,…Xs
的集合,
wijk
是具有是双亲
Ui=uik
的变量
Y=yij
的
CPT
项。
wijk
可以看作权,类似于神经网络中隐藏单元的权。权的集合总称为
w
。这些权被初始化为随机概率值。梯度下降策略采用贪心爬山法。在每次迭代中,修改这些权,并最终收敛到一个局部最优解。
基于
w
的每个可能设置都等可能地假定,该方法搜索能最好地对数据建模的
wijk
值。目标是最大化
。这通过按
梯度来做,使得问题更简单。给定网络结构和
wijk
的初值,该算法按以下步骤处理:
(
1
)计算梯度:
对每个
i, j, k
,计算
(
7.11
)
(
7.11
)式右端的概率要对
S
中的每个样本
Xd
计算。为简洁计,我们简单地称此概率为
p
。当
Yi
和
Ui
表示的变量对某个
Xd
是隐藏的时,则对应的概率
p
可以使用贝叶斯网络推理的标准算法(如商用软件包
Hugin
提供的那些(
http://www.hugin.dk
)),由样本的观察变量计算。
(
2
)沿梯度方向前进一小步:
用
(
7.12
)
更新权值,其中
l
是表示步长的学习率,而
由(
7.11
)计算。学习率被设置为一个小常数。
(
3
)更新规格化权值:
由于权值
wijk
是概率值,它们必须在
0.0
和
1.0
之间,并且对于所有的
i, k
,
必须等于
1
。在权值被(
7.12
)式更新后,可以对它们重新规格化来保证这一条件。
有一些算法,由给定可观察变量的训练数据学习网络结构。该问题是离散优化问题。
附件列表
训练贝叶斯信念网络.doc
大小:23 KB
马上下载
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
全部回复
沙发
犹豫的小圈圈
2011-3-11 09:13:55
唔 不错 不错
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
藤椅
tangu0ping
2015-2-3 14:59:53
请问,贝叶斯网络参数学习 效果如何,有评价的标准么?像是贝叶斯网络结构学习,可以用MDL或者BIC评分来看结构学习好坏。非常感谢!
扫码加我 拉你入群
请注明:姓名-公司-职位
以便审核进群资格,未注明则拒绝
相关推荐
朴素贝叶斯分类的流程(转)
扩展的树增强朴素贝叶斯网络信用评估模型
朴素贝叶斯分类器程序为什么运行出来结果不正确?
基于默认网络贝叶斯模型的轻微型肝性脑病的判别方法
四种贝叶斯分类器及其比较
基于朴素贝叶斯的文本分类研究综述
朴素贝叶斯在文本分类中的应用
改进的增量贝叶斯模型的研究
请教大神们贝叶斯父节点的问题
求助!如何用sas做贝叶斯网络?
栏目导航
学习笔记1.0
金融学(理论版)
学术道德监督
国内外文献账号区
商学院
宏观经济学
热门文章
我该如何记住你?智能体记忆系统的演化之路
202601-中国智能驾驶行业趋势白皮书
到2032年全球RJ11连接器市场规模将接近12.4 ...
油罐车加油系统,全球前10强生产商排名及市 ...
2026年亚马逊市场趋势报告
无上高明的“无为”“无住”哲学在传统中国
现代数学基础 现代极限理论及其在随机结构中 ...
高教现代数学基础15 有限群表示论 曹锡华,时 ...
【25更新,详细,热点指标!】2002-2025省级ZF ...
【热点变量,详细,24更新!】2003-2025地级市 ...
推荐文章
2026JG学术冬训营:从Stata初高到Python机器 ...
【必看】【本版版规,欢迎发悬赏贴求助】
26年寒假天津站|Gemini论文写作&数据分析 ...
关于如何利用文献的若干建议
关于学术研究和论文发表的一些建议
关于科研中如何学习基础知识的一些建议 (一 ...
一个自编的经济学建模小案例 --写给授课本科 ...
AI智能体赋能教学改革: 全国AI教育教学应用 ...
2025中国AIoT产业全景图谱报告-406页
关于文献求助的一些建议
说点什么
分享
微信
QQ空间
QQ
微博
扫码加好友,拉您进群
各岗位、行业、专业交流群