全部版块 我的主页
论坛 经济学人 二区 外文文献专区
1394 36
2022-06-11
英文标题:
《Multitask Learning Deep Neural Networks to Combine Revealed and Stated
  Preference Data》
---
作者:
Shenhao Wang, Qingyi Wang, Jinhua Zhao
---
最新提交年份:
2019
---
英文摘要:
  It is an enduring question how to combine revealed preference (RP) and stated preference (SP) data to analyze travel behavior. This study presents a framework of multitask learning deep neural networks (MTLDNNs) for this question, and demonstrates that MTLDNNs are more generic than the traditional nested logit (NL) method, due to its capacity of automatic feature learning and soft constraints. About 1,500 MTLDNN models are designed and applied to the survey data that was collected in Singapore and focused on the RP of four current travel modes and the SP with autonomous vehicles (AV) as the one new travel mode in addition to those in RP. We found that MTLDNNs consistently outperform six benchmark models and particularly the classical NL models by about 5% prediction accuracy in both RP and SP datasets. This performance improvement can be mainly attributed to the soft constraints specific to MTLDNNs, including its innovative architectural design and regularization methods, but not much to the generic capacity of automatic feature learning endowed by a standard feedforward DNN architecture. Besides prediction, MTLDNNs are also interpretable. The empirical results show that AV is mainly the substitute of driving and AV alternative-specific variables are more important than the socio-economic variables in determining AV adoption. Overall, this study introduces a new MTLDNN framework to combine RP and SP, and demonstrates its theoretical flexibility and empirical power for prediction and interpretation. Future studies can design new MTLDNN architectures to reflect the speciality of RP and SP and extend this work to other behavioral analysis.
---
中文摘要:
如何结合显示偏好(RP)和陈述偏好(SP)数据来分析旅游行为是一个长期存在的问题。本研究针对这个问题提出了一个多任务学习深度神经网络(MTLDNNs)的框架,并证明了MTLDNNs比传统的嵌套logit(NL)方法更通用,因为它具有自动特征学习能力和软约束。设计了约1500个MTLDNN模型,并将其应用于在新加坡收集的调查数据,重点关注四种当前出行模式的RP,以及将自动驾驶汽车(AV)作为RP之外的一种新出行模式的SP。我们发现,MTLDNN始终优于六个基准模型,尤其是经典NL模型,在这两种RP中的预测精度约为5%和SP数据集。这种性能的提高主要归功于MTLDNNs特有的软约束,包括其创新的体系结构设计和正则化方法,但与标准前馈DNN体系结构赋予的自动特征学习的通用能力无关。除了预测之外,MTLDNN也是可解释的。实证结果表明,AV主要是驾驶的替代品,AV替代品的特定变量在决定AV采用方面比社会经济变量更重要。总体而言,本研究引入了一个新的MTLDNN框架,将RP和SP结合起来,并展示了其理论灵活性和预测和解释的经验能力。未来的研究可以设计新的MTLDNN架构来反映RP和SP的特性,并将此工作扩展到其他行为分析。
---
分类信息:

一级分类:Economics        经济学
二级分类:General Economics        一般经济学
分类描述:General methodological, applied, and empirical contributions to economics.
对经济学的一般方法、应用和经验贡献。
--
一级分类:Computer Science        计算机科学
二级分类:Machine Learning        机器学习
分类描述:Papers on all aspects of machine learning research (supervised, unsupervised, reinforcement learning, bandit problems, and so on) including also robustness, explanation, fairness, and methodology. cs.LG is also an appropriate primary category for applications of machine learning methods.
关于机器学习研究的所有方面的论文(有监督的,无监督的,强化学习,强盗问题,等等),包括健壮性,解释性,公平性和方法论。对于机器学习方法的应用,CS.LG也是一个合适的主要类别。
--
一级分类:Quantitative Finance        数量金融学
二级分类:Economics        经济学
分类描述:q-fin.EC is an alias for econ.GN. Economics, including micro and macro economics, international economics, theory of the firm, labor economics, and other economic topics outside finance
q-fin.ec是econ.gn的别名。经济学,包括微观和宏观经济学、国际经济学、企业理论、劳动经济学和其他金融以外的经济专题
--

---
PDF下载:
-->
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2022-6-11 08:35:54
多任务学习深度神经网络,将暴露和陈述偏好数据相结合,王申浩;王庆义;金华赵麻省理工学院UG 2019摘要如何结合显示偏好(RP)和陈述偏好(SP)数据来分析旅行行为是一个长期存在的问题。本研究针对这个问题提出了一个多任务学习深度神经网络(MTLDNNs)的框架,并证明了MTLDNNs比传统的嵌套logit(NL)方法更通用,因为它具有自动特征学习和软约束的能力。设计了约1500个MTLDNN模型,并将其应用于在新加坡收集的调查数据中,重点关注四种当前出行模式的RP和SP,其中自动驾驶汽车(AV)是RP之外的一种新出行模式。我们发现,MTLDNN在RP和SPdatasets。这种性能改进主要归功于软约束特定的MTLDNNs,包括其创新的体系结构设计和正则化方法,但与标准前馈DNN体系结构赋予的自动特征学习的通用能力无关。除了预测之外,MTLDNN也是可解释的。实证结果表明,AV主要是驾驶的替代品,在决定AV采用方面,AV替代特定变量比社会经济变量更重要。总的来说,本研究引入了一个新的MTLDNN框架,将RP和SP结合起来,并展示了其预测和解释的理论灵活性和经验能力。未来的研究可以设计新的MTLDNN架构,以反映RP和SP的特性,并将此工作扩展到其他行为分析。1.
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2022-6-11 08:35:57
简介揭示偏好(RP)和陈述偏好(SP)数据都被广泛用于需求分析,各有利弊。RP数据通常被认为具有更强的外部有效性,但由于覆盖范围有限和属性的高度相关性而存在问题。当研究人员试图了解新属性或替代品的影响时,SP数据是必要的,而由于受访者对调查格式的敏感性和不切实际的假设场景,他们会产生偏见。为了缓解这些问题,研究人员通常使用嵌套logit(NL)方法将它们结合起来,将RP和SP中的备选方案分配给两个具有不同比例因子的巢穴【33、12、6、7】。这种NL方法用于预测未来的出行需求,并根据参数估计检查决定采用某些出行方案的因素。然而,这种NL方法严重依赖于基于领域知识的手工特征工程,与深度神经网络(DNN)中的自动特征学习相比,这种方法可能限制太多,如许多实证研究所示[41、8、17]。这种自动学习特征的能力是由DNN作为通用近似器的理论吸引力所实现的[36、35、18],因此,DNN在自然语言处理、图像识别和旅行行为分析等领域展示了其非凡的预测能力[20、40、41]。DNN在理论上的吸引力和经验上的预测能力促使我们思考,是否有可能在DNN框架中以比传统NL方法更通用和灵活的方式解决RP和SP结合进行需求分析的经典问题。本文提出了多任务学习深度神经网络(MTLDNN)框架,将RP和SP联合建模为两个不同但相关的任务。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2022-6-11 08:36:00
图1显示了一种MTLDNN体系结构,该体系结构从共享层开始,以任务特定层结束,捕捉了任务之间的相似性和差异性【15】。这种体系结构比经典的NL方法更通用,因为它具有自动特征学习和软约束的能力。MTLDNN中的自动特征学习是指基于强大的模型类假设(如DNN)自动学习特征转换的过程,而非NL中依赖研究人员先验知识的手工特征工程。软约束是指MTLDNN体系结构的灵活性和MTLDNN训练过程中使用的正则化方法,而非硬约束,如任务之间的参数共享,通常在NL方法中完成。具体而言,图1中的原型MTLDNN架构是灵活的,因为它可以采用不同的形式,具有不同的共享层和任务特定层,这些层被设计到MTLDNN模型的超参数空间中。在新加坡收集的数据集中进一步研究了MTLDNN框架,该数据集研究了自动驾驶汽车(AV)的采用,在SP调查中,将AV出行模式添加到四种显示的出行模式中。在此应用中,前1名和前10名集成MTLDNN模型的性能始终优于其他六个模型,包括带参数约束的NL(NL-C),这种嵌套logit方法也可以被视为RP和SP之间异方差的汇总估计[44,32]FC&ReLUFC&ReLUFC&ReLUFC&ReLUFC&ReLUFC&ReLUFC&ReLUFC&ReLUFC&ReLUFC&ReLUINPUTSTASK 1 OUTPUTSTASK 2 Outputshared LAYERSTASK-SPECIFIC LAYERSFig。1.
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2022-6-11 08:36:03
MTLDNN体系结构;此体系结构有3个共享层和3个任务特定层,但它们通常表示Mshared和Mtask特定层;FC表示完全连接的层;直线单位的ReLU。无参数约束NL(NL-NC)、独立多项式logit模型(MNL-SPT)、RP和SP的联合多项式logit模型(MNL-JOINT)、独立DNN模型(DNN-SPT)和RP和SP的联合DNN模型(DNN-JOINT)。具体而言,MTLDNNs在联合RP和SP、单个RP和单个SP数据集的预测准确率约为5%,优于经典基准NL-NC和NL-C模型。为了将这种表现归因于潜在的原因,我们以成对的方式比较了八种模型,消除了TLDNN和NL方法之间的混淆差异。我们发现,这5%的预测精度提高主要是由MTLDNN框架中设计的软约束引起的,而标准DNN架构的简单应用并不能提高模型性能。为了解释MTLDNN的适用性,我们可视化了选择概率函数和输入变量之间的关系,并使用MTLDNN的梯度信息计算了弹性,就像机器学习社区通常所做的那样,以揭示DNN模型的信息[3,56]。结果显示了出行模式如何相互替代,作为替代特定变量和个体特定变量改变其值。这一解释MTLDNNs的过程表明,MTLDNNs不仅可以更准确地预测,而且还可以提供关键见解,至少与classicaltools具有相同的水平。据我们所知,这是首次提出MTLDNN框架,将ERP和SP结合在需求分析中。即使使用这种最简单的MTLDNN框架(图1),我们的分析也显示了其在理论性质和经验预测方面的威力。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2022-6-11 08:36:06
由于这种MTLDNN体系结构是众多可能性中最简单的,因此进一步的研究可以探索多种其他MTLDNN体系结构,以结合RP和SP,实现更好的预测和解释【43、28、46、55】。MTLDNN框架还可用于联合分析汽车拥有和出行模式选择【62,75】、活动模式和出行链选择【39,24】以及传统上由结构方程模型(SEM)分析的许多其他应用。此外,MTLDNNs和NL模型之间视觉结构的相似性促使我们提出这样一个问题:MTLDNNs是否可以被视为NL的一般扩展,我们无法回答这个问题,但相信这是未来研究的一个有趣问题。本文的组织结构如下。第2节回顾了MTLDNN模型以及将RP和SP相结合的传统方法。第3节介绍了MTLDNN模型,并讨论了为什么它比NL方法更通用。第4节介绍了实验设置,第5节分析了模型性能、MTLDNNs预测增益的来源以及MTLDNNs中的经济信息。第6节总结了我们的发现,并讨论了未来的研究方向。2、文献综述WRP和SP数据对于出行需求分析都是必要的,但它们来自不同的问题来源。RP数据是有问题的,因为它的属性覆盖范围有限,属性之间的相关性高,背景信息的质量差[7],尽管它显然具有更好的外部有效性。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

点击查看更多内容…
相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群