全部版块 我的主页
论坛 经济学论坛 三区 发展经济学
1967 0
2018-11-28
<br>
目 录
目录<br>
摘要<br>
前言<br>
作者简介<br>
参考文献<br>
第一章、什么是大数据<br>
1.1、大数据定义<br>
{1}、什么是数据<br>
{2}、大数据又是如何产生的呢<br>
1.2、预测 大数据的核心
第二章:大数据怎样在影响着我们的生活<br>
2.1、这些年带来的影响<br>
第三章:大数据面临的问题与解决<br>
3.1、大数据面临的困境危害<br>
3.2、我们应该如何处理这些困难<br>
    3.3、结语<br>
   参考文献<br>
    <br>
摘  要
   随着现代社会高速发展,我们的生活也处在大数据的高速发展中,随着互联网的发展,人们之间的交流越来越密切,生活也越来越方便,而“大数据”对于人们来说就像一阵风可以触上却又摸不着的,它不是什么具体的事物,却时时刻刻影响着我们。<br>
   大数据这几年迎接来了许多挑战与机遇,而且这个词用的频率也越来也高,人们接触的越来越广泛,在未来几年将面临越来越多的变革,所以说大数据未来的发展是可观的。<br>
关键词:大数据  挑战 机遇 发展<br><br><br><br><br><br><br><br><br><br><br><br><br>
前  言<br>
大数据开启了一个前所未有的时代,就像人们用天文望远镜洞察宇宙的变化,用显微镜观察小生物的形态与状态。大数据逐步地在影响人们的生活方式与更多的了解世界,也带来了前所未有的变革,现在大数据呈爆发式的增长,现在已在蓄势待发中……<br>
作者简介
维克托迈尔——舍恩伯格,他是大数据时代的预言家,欧盟互联网官方政策背后的重要制定者与参与者。二十多来一直致力于网络经济、信息创新等方面的研究,从维也纳大学到哈佛大学,从新加坡国立大学到牛津大学,世界上最著名的互联网研究都留下了他的足迹。<br>
第一章 什么是大数据<br>
1.1 大数据的定义详解<br>
大数据(Big data)通常用来形容一个公司创造的大量非结构化和半结构化数据,这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起,因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百或甚至数千的电脑分配工作。<br>
{1}、什么是数据?<br>
数据就是数值,也就是我们通过观察、实验或计算得出的结果。数据有很多种,最简单的就是数字。数据也可以是文字、图像、声音等。数据可以用于科学研究、设计、查证等。总之,数据的具体定义是不唯一的。<br>
{2}、大数据又是如何产生的呢?<br>
    1.“大数据”的名称来自于未来学家托夫勒所著的《第三次浪潮》<br>
尽管“大数据”这个词直到最近才受到人们的高度关注,但早在1980年,著名未来学家托夫勒在其所著的《第三次浪潮》中就热情地将“大数据”称颂为 “第三次浪潮的华彩乐章”。《自然》杂志在2008年9月推出了名为“大数据”的封面专栏。从2009年开始“大数据”才成为互联网技术行业中的热门词汇。<br>
2.最早应用“大数据”的是麦肯锡公司(McKinsey)<br>
对“大数据”进行收集和分析的设想,来自于世界著名的管理咨询公司麦肯锡公司。麦肯锡公司看到了各种网络平台记录的个人海量信息具备潜在的商业价值,于是投入大量人力物力进行调研,在2011年6月发布了关于“大数据”的报告,该报告对“大数据”的影响、关键技术和应用领域等都进行了详尽的分析。麦肯锡的报告得到了金融界的高度重视,而后逐渐受到了各行各业关注。<br>
1.2、预测 大数据的核心<br><br>
大数据的预测,每一种变化事前一定会有征兆,也就是说每一件事情都有迹可循,如果找到了征兆与变化之间的规律,就可以进行预测。大数据预测无法确定某件事情必然会发生,但是它可以给我们一个概率。大数据的预测可以运用多个方面,<br>
1、体育赛事预测<br>
每当世界杯的时候,各个网络公司就会对赛事进行预测,如谷歌,百度等,对赛事预测哪个队赢的概率多大,一一分析,主要考虑整个团队的实力、优势、以及近期的表现等几个因素,而这些都源于互联网大数据,随后再利用一个由搜索专家设计的机器学习模型来对这些数据进行汇总和分析,进而做出预测结果。<br>
2、股票市场预测<br>
专家通过研究发现,用户通过谷歌搜索的金融关键词或许可以知道金融市场的走向,相应的投资战略收益高达326%。目前,美国已经有许多对冲基金采用大数据技术进行投资,并且收获甚丰。中国的中证广发百度百发100指数基金,上线四个多月以来已上涨68%。由于大数据模型对成本要求极高,业内人士认为,大数据将成为共享平台化的服务,数据和技术相当于食材和锅,基金经理和分析师可以通过平台制作自己的策略。<br>
3、市场物价预测<br>
CPI表征已经发生的物价浮动情况,但统计局数据并不权威。但大数据则可能帮助人们了解未来物价走向,提前预知通货膨胀或经济危机。最典型的案例莫过于马云通过阿里B2B大数据提前知晓亚洲金融危机,当然这是阿里数据团队的功劳。<br>
总之,很多方面的数据都需要预测,预测是大数据的核心。大数据脱离不了预测。<br><br><br><br><br><br><br>
第二章 大数据怎样影响着我们的生活<br>
2.1、这些年带来的影响<br>
尤其是近些年大数据给了人们方便,比如各种应用APP方,娱乐制作方,个人等,都深深渗透了大数据这些概念,以及运用大数据思维来实现自己的利益最大化等等,每个人都可以运用大数据来实现自己的目的。我就用大数据来举一个简单的例子:1、<br>
A、小小是个漂亮脾气又好的姑娘;<br>
B、小议今年22岁,中等身高,小圆脸,短头发,做文职工作,月薪5000元,考试通过英语六级,现正在读研<br>
A的描述是直接给出结论,如果直接用A来介绍给别人,想必别人脑中难形成一个印象,而且且对小小的具体情况根本就不了解。而B的描述是用数据来解释事实的,单从年龄和身高就可以直接明了的了解小议的基本情况,小圆脸脸和短头发说明了“可爱”,月薪5000元说明已经学会养自己,六级已过说明她的英语很好,如果是别人这样给你介绍女朋友,你更中意谁呢?不用说肯定是小议了。所以说这就是数据的意义,让事情更具体形象生动,给人形成基础印象。那么大数据时代给我们的生活带来了哪些便利与好处呢?首先是了节约时间,提高效率<br>
比如说,我们经常用到的外卖,快递还有共享单车,这些APP的后台都有一个“大数据”。快递后台就会根据数百亿的历史地址去做预测,用大数据的算法来做分单从而取代了原来的人工分单,这样可以最大程度的降低人工配单时间,减少了错误操作,节省人力成本,不必要的开支。其实快递也只是整个物流领域里的一毛,现在的大数据技术就可以帮助全部环节的物流供给与需求匹配,另外,还会根据消费者习惯偏好,当消费者搜索时,大数据就可预测消费者的需求,将商品物流环境和客户的需求统一,缓解物流压力,提高用户满意度。<br>
需求匹配这点也非常重要,就近取件,就近送餐,就近扫描二维码解锁共享单车,就节省了我们大量的时间去寻找一个又一个,让出行等更加有效率。<br>
当然,这对企业而言,也意味更少的意外和更低的人力成本。<br>
2、大数据可以让人们容易借钱,同时也让老赖上名单。<br>
对于大多数人来讲,开通信用卡需要提供收入学历等证明;在农村,你需要向信用社借钱,也需要提供可抵押的不动产等。现阶段的信用卡是容易办到了,可是呢额度远满足不了某些人的需求。对于办理信用卡和贷款来说,银行需要的都是“指定数据”,指定的收入证明,指定的不动产证明等。而蚂蚁花呗、蚂蚁借呗等它们需要的数据更多,而这些数据不用完全由借钱的人来提供,它们就会根据借贷人在电子商务的消费数据、绑定的银行卡数据、行为数据等等方面来做评分授信。你的芝麻分多少?支付宝的花呗和借呗就是根据芝麻分数来进行授信的。依靠了这些大数据,由以前的借钱流程复杂等都已经改善了很多,借钱变容易了,对于老赖,大数据有着十分重要的作用。最高人民法院执行局2013年11月14日与中国人民银行征信中心签署合作备忘录,共同明确失信被执行人名单信息纳入征信系统相关工作操作规程。现在,只要你去《中国执行信息公开网》 就可以查询失信被执行人的信息。<br>
3、大数据让人知识丰富了,人的智慧是无穷的,但人的计算能力和记忆力是有限。就拿我们最爱玩的《王者荣耀》来说,你知道哪个英雄的胜率最高吗?有人会回答是武亚瑟,也有人回答是武则天,但是通过大数据统计分析广大玩家的千亿次记录,2018年6月的最新数据,《王者荣耀》胜率最高的前3英雄分别为猴子、蔡文姬和武则天。人们就可以根据这些数据,来选择什么英雄来玩,确保自己的胜率高些。<br>
还有,大数据一个很大的功能是“预测”,而预测的基础是历史、现在以及相关的数据等等,让事务可提前预测,从而可以做出最优方案,这就是大数据的智慧之处。<br>
4、用大数据的思维还可以帮省钱,<br>
会大数据思维的人,最开始学会的应该是怎样省钱。同样的商品,在互联网的各种电商平台有着不同的价格;同样从新疆飞往北京的机票,不同的航空公司,不同的乘坐方案,所花费的钱也有所不同。我们常常能够看到的比价网页,背后运用的就是大数据原理。会省钱过日子的大妈大娘都爱记账,我们就可以把记账的过程叫做“数据收集”。每个月统计上个月的家庭开支,就会发现自己的每笔钱是如何花出去的,同时也能知道哪个方面的钱花太多来制定自己的改变方略。分析了每个月的支出情况,可以让我们积累了花钱经验,最后可以为我们省下很多钱,下个月的时候就知道该在哪方面省钱,哪方面多花钱了,这就是数据分析与辅助决策了。同样的,在互联网公司,每一笔广告费用花出去都是要计算投资回报率。拿《穿越火线》来讲,同样是200万的广告费用,投入不同种的渠道,所带来的效益是不近相同的。那如何选择哪个会有更低的获客成本,让推广更有效率?<br>
这就用大数据分析了,能计算出每个用户的价值,也能计算出哪些渠道有水分。用最少的市场费用拉来最多的用户,利益最大化,RMB越多,说明钱花的地方就越准确,省下来的广告费用还可以继续投,实现了全赢,这不是初衷吗。<br>
5、大数据思维可以助你发现隐形需求的,2016年双十一的时候,淘宝网数据盛典公布最终交易额1207亿元,通过对网购人群的消费进行收集,预测2017年的下一个交易额趋势,然后以地图的形式展现中国不同地区的消费金额,其中广东消费最高,并且对全国消费者的购买产品进行了整合,分析得出了购买化妆品是最多的,那么能不能说明2017年的时候化妆品还是主流呢?这时候是离不开数据的分析的,让数据来说话。
6、大数据带来的改变也在教育行业:如因材施教与精准扶贫,2018年的高考刚刚过去,对于那些没有考上大学的孩子又该怎么办呢?事实上,人与人是不同的,有的孩子天生智商就很高,也爱读书。但是有些孩子,他们更爱打篮球、音乐。对于不同兴趣爱好的学生,有着不同智商的学生,因材施教很重要了。都说三十六行,行行出状元,对于成绩好的学生,当然是多教他们文化课;对于有着其他兴趣爱好的学生,我们就可以教他们的兴趣特长,因材施教在现阶段的教育还不能完全做到,但是在不远的将来,肯定能成为现实。那么如何甄别每个学生的不同呢?还是用大数据,在2016年3月21日,南京理工大学的301位同学的饭卡上“莫名”多出了钱来。原来这是南京理工大学最新启动的“暖心饭卡”项目,旨在解决学校贫困生的吃饭问题。那么,301名贫困生名单以及补助金额是如何确定的?据了解,南理工教育基金会对全校所有在校本科生的饭卡刷卡记录进行了数据分析,分析区间为2015年9月中旬到11月中旬。其中,每个月在食堂吃饭超过60顿、一个月总消费不足420元的,被列为受资助对象,所以这301为同学的饭卡就莫名多出了钱。<br>
大数据也改变着娱乐行业:比如优酷爱奇艺等APP,用户手机里常年装着这样一个APP,这个APP可以实时看到每天电影的实时浏览量。通过实时浏览量数据,平台就可以了解到最近最受大众喜欢的电影是什么?可以看到每一个电影的排片量和上座率。这对娱乐行业来说是非常有价值的,它既可以帮助院线方及时调整排片策略,又能帮助电影公司及时了解旗下电影的最新数据。最重要的是,它让票房数据透明化,对于那些整天炒票房的烂片来说,这就是一个“大杀器”。对于影视剧制作的公司来说,选择哪位明星也起着至关重要的作用。大数据在这方面可以提供预测和决策帮助。通过分析明星过往参演的片子数据,分析不同明星的号召力和商业价值、分析不同的IP题材等,这些都可以帮助电影电视剧公司来做选择,规避风险。除此之外,大数据在广告,制照,设计,有这很大的效益,就不一一举例了。
第三章:大数据面临的问题与解决
3.1、大数据面临的困境危害<br>
大数据给我们带来很大影响的同时,也当然会让有些不法分子有机可乘,带来较深的影响,给社会带来经济损失,个人带来损失等。 <br>
1、黑客犯罪的滋生
提到"黑客",我们对这个词语可以说褒贬不一。如果是用在网络安全方面,我们认为黑客这一职业起着不可估量的作用。毕竟这一方面的人才还是非常的短缺。但是,也有很多的黑客走上了犯罪的道路,它们恶意的攻取企业或者是单位个人的电脑。从中获取有用的信息。进行违法犯罪活动。导致被攻克的企业或者是个人造成严重的损失。就比如去年一直传着勒索病毒新闻,是黑客用编程来制照出来的,它是一种新型电脑病毒,主要以邮件、程序木马、网页挂马的形式进行传播。该病毒性质恶劣、危害极大,一旦感染将给用户带来无法估量的损失。这种病毒利用各种加密算法对文件进行加密,被感染者一般无法解密,必须拿到解密的私钥才有可能破解。从2018年初到9月中旬,勒索病毒总计对超过200万台终端发起过攻击,攻击次数高达1700万余次,且整体呈上升趋势,为了电脑的正常使用,很多的人被敲了许多钱过去,而有些人的重要数据被永久的锁了起来,给个人和企业带来了不可估量的损失,而黑客却从中捞了不少钱,这就是大数据运用不正确的一个方面。
因此,在大数据时代,黑客犯罪的滋生。也是我们不得不防的,在我们日常的运用网络时,除了要提高自己的安全意识之外,有关部门还要加强网络的监管。让黑客成为一个为人民服务为国家信息安全服务的神圣职业。
2、热点事件迅速发酵
在这个大数据的时代当中,每当社会上有一些热点的事件后,就会很快的得到报道转载到每一个角落,让事件迅速的发酵。当然,这些事件如果是一些正能量,这种大数据下的传播手段还是非常值得称赞。但是,如果传播的是一些社会方面的负能量,那么,它对我们公民的思想或者是行动上的影响可谓是非常巨大的。
3、数据隐私的泄露<br>
回顾去年Facebook用户隐私事件不难发现,泄露用户信息的是Kogan和第三方数据分析机构“剑桥分析”公司,而Facebook并没有参与其中,但造成用户隐私数据也泄露了出来,所幸没造成什么影响。近几年,大大小小的网上个人信息泄露事件频发,信息安全问题比以往任何一个时代都更为突出。越来越多的公民个人信息成为不法分子争抢的“香饽饽”,要么被直接出卖非法获利,要么被犯罪分子利用,从事电信诈骗、非法讨债甚至绑架勒索等犯罪活动。犯罪分子通过各种途径收集到人们被泄露出去的隐私,经过筛选分析用户特征,进行精准犯罪。例如在中国安全防范产品行业协会发布的一例案例中,上海某上市公司的总账会计陈某,被不法分子收集到的信息克隆出公司微信群骗取169万元人民币,这就是典型的隐私泄露造成的网络诈骗案件,还有前两年的徐玉玉诈骗案等等。个人数据隐私除了要保护好,平台也应制定出应对方案,要个更严惩罚措施,利用大数据技术来全方位的进行检测和防控,相信后面的大数据个人隐私会保护的更好。
3.2、我们应该如何处理这些困难<br>
在个人方面,不给不法分子有机可乘,保护好自己的数据,不乱点什么链接,不轻易的相信网络上的语言,自己提高辨别能力,自己也应遵守相关法律,不理用大数据来做些违法的事情。目前,我国在数据安全保护方面已经出台或正在研究制定多项法律规章标准。包括:在2017年6月1日实施的《网络安全法》中提出了网络运营者“维护网络数据的完整性、保密性和可用性”、“防止网络数据泄露或者被窃取、篡改”等责任义务,以及个人信息和重要数据出境安全评估、网络信息安全保护等方面要求。2017年12月,网络安全国家标准《信息安全技术 个人信息安全规范》获批发布,明确了个人信息保护中诸多技术细节和实操层面的要求。尽管这是一部推荐性国家标准,不具有强制力,但对收集使用个人信息等具有很强的指引作用。2017年7月,中央网信办等四部门组织评审京东商城、航旅纵横、滴滴出行、携程网、淘宝网、高德地图、新浪微博、支付宝、腾讯微信、百度地图等十款常用网络产品和服务的隐私条款,有力推动了企业加强对用户个人信息的保护。全社会的人都做好了,那现如今所面临的困境不就最小化了。<br>
3.3、结语
《大数据时代》是国外大数据研究的先河之作,本书作者维克托·迈尔·舍恩伯格是最具有权威性的发言人之一,拥有在哈佛大学、耶鲁大学和新加坡国立大学等多个互联网研究重镇任教的经历。 本书具有非常有瞻仰性的指出了大数据目前为我们生活、思维、工作所带来的改变,大数据时代的开启是一个时代的重要的转型,这本书是个很好的样例。<br>
参考文献<br>
维克托·迈尔—舍恩伯格.大数据取舍之道[M].杭州:浙江人民出版社,2013. <br>

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群