2022年互联网-大数据应用方案.pptx

Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,11/7/2009,#,互联网,+,大数据应用方案,这是最好的时代，这是最坏的时代；,这是智慧的时代，这是愚蠢的时代；,这是疯狂的时代，这是理性的时代。,这更是猪也能飞上天的时代，,据说只要选对风口,2,引子,“互联网+”,的提出,”,互联网,+,“,提出,2012年11月于扬在易观第五届移动互联,网博览会的发言。,全国人大代表马化腾2015年在两会,上提交的建议指出；,2015年3月5日十二届全国人大三次会议,上，李克强总理在政府工作报告中首次,提出“互联网+”行动计划。,制定“互联网,+”,行动计划，推动移动互联网、云,计算、大数据、物联网等与现代制造业结合，促进,电子商务、工业互联网和互联网金融健康发展,E,2015年6月24日，国务院常委会通,过,互联网,+,行动指导意见,在具,体行动安排上，提出了包括“互联,网+”促进,创业创新、协同制造、,现代农业、智慧能源、普惠金融、,公共服务、高效物流、电子商务、,便捷交通、绿色生态、人工智能,等,11个重点领域发展目标任务，并确,定了相关支持措施。,从,3,月初到,6,月底，有哪些推进？,涉及领域由制造业向第一、二、三产业全面拓展,发力方向涵盖政府和市场两端,政府深化体制机制改革；积极利用互联网提升公共服务水平,市场从存量经济和增量经济两方面入手，促进经济实质增长,首提清理阻碍互联网,+发展的不合理制度政策，这与简政放权、转变政府职能的工,作思路一脉相承。,产业实践丰富了对互联网+的认识，拓宽了顶层设计的思路,“互联网+”的由来,2014济工作会议已年中央经,李克强总理为什么在2015年两会时刻提出“互联网+”？,有相关要求,这是新常态经济条件下国家发展转型的,必然结果,；,“新常态”可总结为“中高速、优结构、新动力、多挑战”四大特征,大数据、云计算等与互联网密切相关的领域的价值越来越凸显；互联网正,在成为水、电、煤一般的基础设施，能够有力地推动实体经济的发展；,新常态下地方经,济发展的方向,这是推动行业跨界融合，进行产业升级换代，促进,组织和技术双重创新，释放新的增长点，破解经济,下行压力的,必然要求,；,结合审批权的下,放和撤销，审批,互联网与传统行业的融合，能够促进传统行业的转型与升级,流程精简,这是推动政府职能转变，促进政府简政放权、创新,公共服务供给模式、提高政府运转效率的,必然选择,；,7,1“互联网+”,1.1“互联网”的前世今生,速、方向、刹车和动力性能等方面的,互联网是指将两台计算机,22：00，晚上睡觉的时候，你家的孩子哭闹起来。,信息只有流动才能产生价值,配警力，预防打击犯罪，也能帮助市民了解情况，提高警惕。,这是新常态经济条件下国家发展转型的必然结果；,2012年11月于扬在易观第五届移动互联,流计算（twitter的storm和yahoo！,这是智慧的时代，这是愚蠢的时代；,的深交所的“大数据”监测系,“互联网+”是连接器，加速器，数据管道，信息能源，帮助传统产业建立最大效率的连接,互联网走入中国,一个改变历史的时刻,1994年4月20日，中科院一条64K国际专线，连接国际互联网,22,什么是互联网,互联网,是指将,两台计算机,或者是两台以上,的计算机终端、,客户端、服务端通过计算机信息,技术的手段,互相联系,起来的结果，,人们可以与远在千里之外的朋友,相互发送邮件、共同完成一项工,作、共同娱乐。,互联网的三大本质,互,互动,联,联接,网,网络,互联网的三大本质,“互”即“互动”,搜狐，百度、微信分别代表互联网信息获取的三个阶段,被动接收信息,精准获得信息,彼此交流信息,信息只有流动才能产生价值,互联网的三大本质,“联”即“联接”,今天，因为wifi、2G、3G、4G、CDMA等无线通,讯网络的发展，通过手机就可以让我们随时随,地联接起来。我们已经全面进入了移动互联网,时代。,未来，电脑和手机将不再是唯一的上网终端。,将到处都是”网器“。任何人、任何物、在任,何时间、任何地点，都可以自由联接。我们将,进入,无限互联网时代,。,人与人联接，人与物的联接，物与物的联接,互联网的三大本质,“网”即“网络”,第二次工业革命的早期，工厂用电都是自建,发电站。后来才有集中的电厂，通过电网将,电力传输到千家万户。,信息存储到“云端”，并在“云端”对信息,进行处理，这就叫“云计算”。,我们使用的不是终端，而是网络，网络存贮，,网络计算、网络交互。,公有云、私有云、专业云，无数张无边无际,的网络，组成一个相互交织的网络体。更加,高效率,！,互联网的发展历程,智能综,合网络,高速移,动网络,互联网,的发展,未来,互联网,的起源,20,世纪,90,年代至今,20,世纪,80,年代,1991年，科学家提,姆伯纳斯李开发出,了,万维网,及简单的浏览器,，互联网开,始向社会大众普及；,1983年，,ARPANET宣布将,“NCP”协议向,“,TCP/IP,”协议,过渡，Internet取,代阿帕网；,20,世纪,70,年代后期,1969年，美国国防部,起动计算机网络开发,计划,ARPANET(阿帕,网),互联网的始,祖；,中国互联网时代的演进,中国互联网时代开启,中国正式加入国际互联网，成为第77个拥有全功能Internet的国,家,马云创办了阿里巴巴，,奠定了中国电商的基础,博客，QQ诞生，开,启了UGC&IM,百度成立，新浪/网易/搜,狐在纳斯达克上市,世界范围互联网泡沫,无数企业死去,时代,1994年,1998年,1999年,2000年,2004年,Web 1.0,淘宝诞生，成为国,内最大电商平台,支付宝诞生，奠定第,三方础&移动支付的基,第一款iphone发布，Google,开始改良android系统,3Giphone拍照发放在全球热销；移动支付，/全民微博时代开启；,移动电商，移动IM开启全民热潮,2003年,2004年,2007年,2009年,Web 2.0,移动互联网百家争鸣,团购网站呈现极火爆热潮,微信发布,余额宝发布移动4G拍照发布/中国,互联网,正以不可逆转之势改变未来&移动互联网行业已爆发，,2010年,2011年,2013年,2014年,未来,Web 3.0,中国互联网的规模,2003年,2016年,英法德意四国,中国网购人群,网民数：,网民数,6.88亿,总人口,0.79亿,2.7亿,3.61亿,1.2“互联网+”的本质,互联网,+的本质就是用先进的信息技术，对传统,行业进行改造优化,语言,文字,印刷术,电话与无线电,计算机与互联网,语言的起源于何时,已无从考究，按圣,经说，语言起源于,后巴别塔时代,甲骨文是中国已发,现的时代最早、体,系较为完整的文字,（商代后期，公元,前,14,世纪）,印刷术是中国古代四,大发明之一。它开始,于隋朝的雕版印刷，,经宋仁宗时代的毕升,发展、完善，产生了,活字印刷,贝尔,1876,年发明电,话,，1895,年意大利,的马可尼和俄国的,波波夫几乎同时发,明了无线电,第一台电子计算机,ENIAC(埃尼阿克,),在,1946,年,2,月,14,日问世,；,1969,年首个互联网诞,生,信息技术推动着人类社会及文明的进步,19,“互联网,+,”？,难道就是传统行,业戴上“互联网,+”的“高帽子”,互联网,+,传统广告,=,传统集市,=,传统卖场,=,传统银行,=,“互联网,+,”应该酱紫,传统行业,云计算、大,数据、物联,网等互联网,技术,+,互联网+,互联网,这是化学公式！+代表融合与创新,“互联网+”是两方面融合的升级版，将互联网作为当前,信息化发展的,核心特征,，提取出来，并与工业，商业，,金融业等服务业的,全面融合,。这其中最关键的就是创新只有,创新,才能让这个“+”更有意义更有价值。,“互联网+”的最大价值,“互联网+”去中心化，最大价值是帮助全社会建立最大效率的连接,“互联网+”是连接器，加速器，数据管道，信息能源，帮助传统产业建立最大效率的连接,“互联网+”不是要颠覆和替代传统行业，商业机会更多属于传统行业,“+”，或为叠加，或为倍增，或为几何级数,加号之后的无限可能：+产业、+政务、+民生,传统行业,叠加,倍增,级数,22,传统行业,互联网,互联网,传统行业,传统行业,互联网+的,微观,本质,互联网+的本质：,从,微观,上看，就是传统业务的,数据化、在,线化,。,人,上下游,迁移至互联网,被调用和挖掘,商品,在线化,数据化,交易,行为,协作体,内部,互联网+的,宏观,本质,互联网+的本质：,从,宏观,上看，就是打破旧体制对“,信息,”的束缚，促,进了第三次工业革命的产生。,奴隶社会里奴隶（“,人,”）获得解放，促进了社会向封建社会的转型；,十七世纪，银行的创立、公债的发行等金融业的变革，“,财,”通天下，促,进了第一次工业革命的产生；打破旧体制对,“人”、“财”和“信息”,等,关键生产力要素的束缚，都能极大促进生产力的发展，形成新的生产模式。,1.3“互联网+”对传统行业,的渗透与颠覆,一、“互联网,+“改造行业的每一个环节,微博、微信,纯线上营销,众筹,THREE,产品,营销,C2B,用户参与,按需订制众包,协同生,产,去中心化,跨境电商崛起,O2O极致服务,FOUR,产品,投入,案例：,kickstarter、,京东众筹,规模：,京东众,筹成为国内首,个亿级平台，,筹资成功率近,90%、总金,额过亿,案例：,带客通、,黄太吉、西少,爷,规模：,带客通，,150天帮助万,科与万达节约,营销成本11,亿,FIVE,SIX,ONE,产品,服务,产品,设计,TWO,产品,流通,产品,生产,案例：,雕爷牛,腩、何狸家,规模：,雕爷牛,腩通过互联网,将服务做到极,致，获得VC投,资6000万、估,值4亿元人民币,案例：,洋码头、,考拉海购,规模：,以海淘为,例，国内市场规,模从10年的120,亿发展到13年,的744亿元，迫,使海外物流厂商,直邮中国,案例：爱定客、,尚品宅配,规模：,尚品宅,配每年保持了,60%的增长，,2014年销售,额已经超过,25亿元,案例：,戴尔、,海尔、小米,规模：,小米,3年时间，,市值估值就,达到了100,多亿美元,二、已率先被互联网撬动的行业,中国餐饮,O2O,在线商务用户规模,2012年为0.98亿，相比2011年增长58.1；,2013年这一数字上升到,1.39,亿,，,预计到,2015年这一规模将超,2,亿,中国打车软件用户规模,以滴滴打车为例，补贴之前，其用户数约,2200万，日均订单数为35万单；3月27日，,用户数突破,1,亿,，此后日均订单数维持在,530,万,左右。,三、最猛烈的冲击来自互联网金融,李克强总理1月4日在深圳前海微众银行敲下电脑回车键，卡车司机徐军就拿到了3.5万元贷款。互联网银行既无营业网点，,也无营业柜台，更无需财产担保，而是通过人脸识别技术和大数据信用评级发放贷款。,互联网银行一小步，金融改革一大步,三、最猛烈的冲击来自互联网金融,互联网金融和传统金融的碰撞以及争,论持续了一年，但前者的规模并未因此停,止碰撞的速度。目前的互联网金融模式仍,在探索发展中，主要包括第三方支付，金,融产品线上销售，P2P理财以及众筹模式。,1、第三方支付,这是最早出现也是最具代表性的互,联网金融业务，目前规模巨大,2、线上销售,2014,年,1,季度,互联网产品销售渠道业务，以余额宝、,理财通等为典型代表,6.6,亿笔,3.9,万亿元,大众,理财,3、互联网信贷,移动,支付,以P2P贷款为代表，如宜信，有利,2014,年年初,P2P,理财,网等,4,、众筹模式,8100,万户,1853,亿元,2014,年估值,即通过在互联网展示募集公众资金，,如京东众筹等,1433,亿元,线上交易占,29%,四、传统教育领域也在经受冲击,MOOC新模式在高等教育领域蔓延,2014,传,2014,在,统教育,规模,线,教育规,模,清华、北大等国内名校纷纷加入,MOOC,队伍，成为全球,MOOC,浪潮中最有价值的看点,尤其是清华大学三项改革助力校长陈吉宁履新环保部，三年内从正厅级升至正部，,MOOC,模式即是改革之一,四、传统教育领域也在经受冲击,因为受到在线教育的冲击，执传统培训机构牛耳长达十年的俞敏洪也不得不疾呼：,新东方商业模式再不改变就会落后！,2014,2017,互,联,网,公,司,渗,入,行,业,，,动,作,频,频,投资,案例,25,笔,1734,1000,亿元,亿元,资金,涌入,数十,互联网巨,亿,传统教育,头,在线,教育,机构,近千,学大教育,阿里巴巴,家,好未来,腾讯,在线,教育,公司,倒闭,复星集团,百度,近,50,家,网易,五、在线旅游模式正在悄然演进,年轻人的选择更加,多变,他们正在逐步,告别传统,旅行社,五、在线旅游模式正在悄然演进,模式融合,模式演进,移动端成为,OTA,搜索平台,重要的交易平台,携程与去哪里移动营收,占比均超30%,携程加快平,去哪儿力推TTS,台业务发展，平台和团购、直,从单一产品预订,到出行服务,和旅行相关的产品组合,以及游记、门票、社区,盛行,引入产品搜,销业务,索模式,休闲旅游成为,市场竞争热点,以途牛上市为标志，,2016年规模或达750亿,六、广电行业的角力、整合与洗牌,2014,年,2014,年,传统制片发行,互联网视频规模,广电视频规模,方,光线、华谊、博纳、中影,1200,亿元,3700,亿元,央视、湖南、浙江、,江苏,传统电视台,互联网视频,广电视频,消费增速,消费增速,视频网站,优酷、爱奇艺、腾讯视频,59.2%,2%,相关方,牌照商、电视厂商、有线,电视运营商、盒子厂商,六、广电行业的角力、整合与洗牌,巨头,并购,四大,冲突,广电视频行业未来发展趋势,部分网站移动端视频播,放量达50%，移动端成,各大网站核心阵地,视频网站对独播权的争夺加剧,移动趋势,阿里入股文化中国和,华数传媒，12.2亿美,各大网站纷纷以过亿高,价购买独播内容，腾讯,视频数亿元买下中国,好声音,元投资优酷土豆,电视台和网站对渠道和,主导权的争夺加剧,独播趋势,百度以37亿美元收购,PPS视频业务,互联网电视利益方的冲,突加剧,自制成为视频网站打造,竞争力的重要筹码腾讯,视频推出你正常吗,自制视频,自制趋势,苏宁联合弘毅资本4.2,亿美元收购PPTV,正版内容拥有商与盗版,商的冲突加剧,各家发布新的互联网电,视或互联网电视盒子，,乐视发布超4K超级电视,客厅战略,七、传统制造业变天在即,中国制造业的纠结：,互联网公司虎视眈眈：,谷歌、苹果、Fackbook等全球巨头，百度、腾讯、,360、小米等国内互联网公司等已经进入这一市场，,他们拥有“硬件+云端数据+APP应用”优势,等死：,不向线上转型就可能坐以待毙,找死：,往线上转型可能遭遇水土不服,3.4%,传统制造业,市场,线下,增速3.4%,汽车之家、天猫商城,已逐步开始汽车线上销售的新时代，创新,汽车网购体验的模式，而更多拟借助互联网渠道销售高端汽车的品牌也必将从销售+服务的范例中受到启发,特斯拉,让世人看到了电动汽车和智能汽车原来还能这么玩,谷歌,来了，Android Auto亮相,苹果,来了，被誉为车载IOS的Car-play发布,传统车厂,来了，纷纷将智能化作为旗下产品的最新概念,现状,传统制造业,市场,线上,增速200%,200%,虚拟现实设备（眼镜）公司,：成立不足两年却让扎克伯格追,求数月，掏出20亿美元收下,七、传统制造业变天在即,制造业在整合重塑,中转型,制造,并购浪潮推动行业洗牌,三股势力参与传统制造业角逐,美国家电巨头惠而,浦,34,亿元控股合肥,机器设备，自动化技术将代替人工,LG、SUMSANG、SONY、,Panasonic、SIEMENS,三洋,平台公司,渠道,格力、美的、海尔、海信、,TCL、创维、康佳,美国私募巨头KKR,提升电商消费比例，新设线上子品牌,转型公司,收购青岛海尔,10%,股份,用户思维,乐视、小米、爱奇艺、优酷土,豆,通过大数据掌握用户需求并反向用于生,跨界公司,阿里巴巴斥资,28,亿,港元投资海尔电器,产,产品,全面转向智能，在软件与内容上与互联,网公司合作,八、通信运营商也无法避免改变发生,传,中国移动,统,运,营,商,虚拟运营商市场规模,中国电信,2014,年,2018,年,运,营,商,中国联通,（预测）年增,长率高达,50200亿,虚拟运营商,终端渠道商,42,家,已经获得电信运,营拍照的虚拟运营商正,在各显神通，结合自身,业务特点做出有差异性,和灵活性的增值服务,虚,解决方案商,700,拟,运,营,商,12467,亿,互联网企业,亿,传统运营商,游戏企业,其他企业,“170”,九、黎明前的黑暗：互联网餐饮起步,热点事件：,2014年1月，百度宣布收购糯米网41%的股份，从而完成全资收购,2014年5月，大众点评网8000万美金投资外卖订餐网“饿了么”,2014年5月，大众点评网5000万美金战略投资国内点餐平台“大嘴巴”,分析：,以大众点评为例，习惯了多年慢节奏发展却在2014年突然登上高速列车，,助推器正是互联网的快速发展，尤其是地图和移动支付的完善，让餐饮的O2O彻,底进化，互联网餐饮即将走过黎明前的黑暗全面起步,九、黎明前的黑暗：互联网餐饮起步,餐饮,O2O,平台对接,用户,和,商家,的需求”,主要玩家,用户需求,餐饮,O2O,整体,规模潜力巨大,省,省,时,间,服,务,好,口,钱,味,好,美团大众点评,糯米,饿了么,美团,3.7,团购,外卖,餐饮,O2O,平台,2.5,亿元万,万,亿元,扩,大,销,售,增,加,曝,光,线,上,引,流,2013销售规模年O2O,2015售规模年O2O销,点,餐,订座,大嘴巴,番茄快点,大众点评,1,0,商家需求,连续三年,规模维持,这一增速,%,十、政府也在改变,政府通过互联网、大数据分析、物联网等技术，整合城市运行核心系统的各,项关键信息，从而改变对包括民生、环保、公共安全、城市服务、工商业活动在,内的各种需求的响应方式与服务感知。,十、政府，也在改变,政务微信,政务微博,：是指中国政府部门推出的官,方微博账户，力行“织博为民”。政务微,博在,社会管理创新、政府信息公开、,新闻舆论引导、倾听民众呼声、,树立政府形象、群众政治参与,等,方面起到了积极的作用。,政务微博方兴未艾，政务微信已崭露头角，微博,“前浪”还未降温，“后浪”微信又紧随而来。作为移,动互联网时代一种全新的沟通交流方式，继“官微”之,后，政务微信也成为官民沟通的全新平台。,政务微博,十一、医疗健康，也可如此智慧,智能穿戴设备,智能穿戴设备数据上传,医疗云平台分析诊疗,手机,/PC,通过互联网访问云平台,以智能穿戴设备为载体，互联网为渠道的新型医疗模式：运动健康手环、眼镜、甚至智能袜子、鞋子，将个人,运动数据统计并上报，依托医疗云平台大数据分析，实现健康诊断。,BAT,布局医疗健康行业,1.4“互联网+”所带来的积,极影响及挑战,1.“互联网+”时代带来的积极影响,便捷性,即时性,交互性,功能齐全性,服务灵活性,信息传播广泛性,1.“互联网+”时代带来的积极影响,1),个人层面：为每一个个体提供学习、生活方方面面的个性化服务,互联网,+这一新技术形态的建立，使得人人、人物、物物的广泛连接、交互,成为可能。借助网络技术，学习、科研、生活已不再受到校园这一物理边,界的制约，依托于互联网的信息技术也延伸至校园之外，与学习、科研、,生活紧密叠加，为每个个体提供了个性化服务。,图：数据交互形态变化,1.“互联网+”时代带来的积极影响,案例：基于云服务的“慕课”学习平台,1.“互联网+”时代带来的积极影响,案例：智能穿戴设备,图：智能手环,1.“互联网+”时代带来的积极影响,2),社会层面：发展了人的社会关系,以网结缘的社会关系扩大了社会关系的,范围，使人们从地域性个人变成了世界,性个人.,图：以网络为载体的社会关系,豆瓣,哔哩哔哩弹幕网,知乎,网易云音乐,1.“互联网+”时代带来的积极影响,2),社会层面：丰富了社会生活形态,移动互联网塑造了全新的社会生活形态，潜移,默化的改变着移动网民的日常生活。,1.“互联网+”时代带来的积极影响,案例：,“互联网+”正由第三产业向第,二产业进而向第一产业渗透。,2014年中国一大批服务类O2O,公司的崛起就是例证。,1.“互联网+”时代带来的积极影响,3),国家层面：提升综合国力和国际竞争力,国家从战略角度考虑“互联网+”，借助,以互联网为代表的新技术力量，把“互联,网+”纳入国家行动计划，是经济新常态,下的理性选择。,2.“互联网+”时代面临的风险与挑战,信息庞杂性,信息可靠性,信息碎片性,人际隔离性,缺乏规范性,安全风险性,2.“互联网+”时代面临的风险与挑战,1),个人层面：网络强化了部分人群的人际隔离,2.“互联网+”时代面临的风险与挑战,数据链接：,截至2015年12月，我国网民规模达6.88亿，,全年共计新增网民3951万人。互联网普及,率为50.3%。,调查结果显示，2015年新网民最主要的上,网设备是手机，使用率为71.5%。2015年,新增加的网民群体中，低龄(19岁以下)、,学,生群体的占比分别为46.1%、46.4%。,2.“互联网+”时代面临的风险与挑战,2),社会层面：网络失范现象危害社会稳定,2.“互联网+”时代面临的风险与挑战,3),国家层面：网络安全问题存在隐患,我国已成为网络大国，但还不是网络强国，在网络安全方面面,临着严峻挑战。,2.“互联网+”时代面临的风险与挑战,网络安全问题来源：,一是电脑病毒,。病毒平时潜伏固化在计算机系统或武器系统中，到预定时间便会突,然爆发，毁掉所有数据，使重要信息系统瘫痪。,二是电磁脉冲,。通过发射带有病毒的电磁波，使重要信息系统发生数据错乱，如代,码出错、被删除、软件无法启动等，严重的还可以使重要信息系统自我爆炸、自行,毁灭。,三是电脑黑客,。就是通过网络入侵他人计算机或信息系统，植入木马、篡改页面、,窃取信息等，这也是和平时期网络攻击的一种重要的形式，也是最常见的一种形式，,有专家把它称为“第亐维战场”。,2.“互联网时代面临的风险与挑战,互联网“震网”病毒,斯诺登事件,2.“互联网+”时代面临的风险与挑战,观念陈旧问题。,一方面，一些传统企业受经营方式、经营理念、思维惯性等因素的,影响，对互联网仍然有怀疑和抵触的心态，主观上还不能够积极主动的去拥抱互联,网。另一方面，互联网企业对传统行业的认知、了解还不够深。,行业壁垒问题,。在准入方面，部分行业还存在着市场开放程度比较低、准入门槛比,较高的问题，在监管方面也存在过程比较复杂、协同机制不健全、效率比较低等问,题。,技术支撑问题。,存在网速相对较慢、网费还偏、标准规范不完善、跨界服务型人才,匮乏、数据资源开放不足、安全性仍有待提升等问题。,分布式文件系统Distributed File System）是指文件,中国正式加入国际互联网，成为第77个拥有全功能Internet的国,A/B测试是可用性测试的一个方法，其核心为：同时,Machine/Sensor,2)社会层面：网络失范现象危害社会稳定,机票价格在未来一段时间内会Farecast预测当前的,个预警点时监控系统会自动报,2)社会层面：网络失范现象危害社会稳定,2014年中国一大批服务类O2O,网设备是手机，使用率为71.,这是智慧的时代，这是愚蠢的时代；,模型对其进行分析后发现，这些分析结果与传统流感监测系统监测结,然而后来证实，他的女儿果真怀孕了。,哈雷维森同时还使用软件，还寻找制约公司戴,匮乏、数据资源开放不足、安全性仍有待提升等问题。,2.“互联网+”时代面临的风险与挑战,警惕“互联网+”泡沫，正确认识“互联网+”的作用,“互联网+”泡沫聚集越来越明显,百度一下，“互联网+”的搜索结果高达上亿条；某些人将互联网+视为万能的神丹，仿佛任何行业，,任何难做的事情，有了互联网+，都能迎刃而解；,2015年拿到A轮融资的互联网公司有90%以上已经死掉；,正确认识“互联网+”,互联网所做的是对某些传统行业的改造进行了加速和升级，并没有从根本上改变传统的内涵。比如,电商只是干掉了中间环节，但并没改变零售的本质；互联网思维经营的饭店，菜不好吃，也得关门；,当互联网越来越成为各个行业的标配时，互联网已经难以成为差异化的竞争优势，反而传统的东西,才能成为竞争的优势；,“互联网+”的核心不在于“互联网”，而在于“+”。互联网与传统行业的融合，能否成功，关键,在于融合。只有结合互联网和传统行业的各自优势，才能迸发出新的业态和新的创新；,“互联网+”的跨界,邮政不努力，顺丰就替它努力,银行不努力，支付宝就替它努力,运营商不努力，微信就替它努力,出租车不努力，快滴就替它努力,百度干了广告的事，淘宝干了超市的事,阿里巴巴干了批发市场的事,微博干了媒体的事，微信干了通信的事,不是外行干掉内行，是趋势干掉规模,你不敢跨界，就有人跨过来打劫,2,大数据应用,2.1,认识大数据,未来大数据生活,2XXX年的一个周末,7：00，你被手机闹钟叫醒。昨晚你带着一款小型可穿戴设备睡觉的。这个设,备连接着你手机里的一款,大数据的APP,，你打开它就可以看到你昨晚睡觉时翻,身次数、心跳和血压状况。根据测量结果，它建议你今天出门之前多喝点橙汁,类的饮品来补充维生素。,9：00，今天你要带朋友到海口的望海商城逛逛，你打开某互联网公司的大数,据产品,“XX预测”，,看看该商圈今天预计会有多少人，再看看海口今天的交,通预测。“XX预测”根据以往用户定位请求信息建议你乘公交前往。,12：00，逛了一圈，你和朋友都累了，想找个地方吃饭。你打开,大数据软件,，,寻找附近的餐馆。通过该软件，你可以提前看到餐馆的视频环境，看看是否,人多。,64,未来大数据生活,14:00,吃过午饭，你想去附近的公园玩玩，但你不知道应该去万绿园还是去金,牛岭公园。你又打开,“XX预测”，,希望它帮你分析一下，哪个公园相对不太拥,挤。根据结果，你去了万绿园。,16：00，你正在公园里休息，收到了催缴电话费的短信。你很好奇自己过去三年,每个月的消费记录。但过去运营商只能让你查到六个月以内的消费信息。因为中,国移动至少有5亿用户，每天至少能产生10次计费记录。每天50亿的计费记录，,一年下来就是1800亿条记录。这是一个,大数据的存储和归纳技术,难题。但在大数,据时代，过去几年的电话通讯信息都可以查到了。,18：00，你回到了家，你的可穿戴设备告诉你，今天你在室内和室外的时间分别,都是多少，你一天内吸入了多少雾霾，消耗了多少卡路里。,22：00，晚上睡觉的时候，你家的孩子哭闹起来。你把孩子的哭声录入一个大,数据软件中。软件能告诉你孩子为什么哭。是饿了，还是哪里不舒服，还是说,只是想撒撒娇,65,什么是数据？,半结构化/非结构化数据,Web,DOC/Media,Social Media,Machine/Sensor,Clickstream,Call Log,Apps,Log,66,数据本质是生产资料和资,数据不再是社会生产的“副产物”，而是可被二次乃至多次加,产,工的原料，从中可以探索更大价值，它变成了生产资料不可再生资源VS数据,仅供开采,仅供开采,仅供开采,数据管理技术发展历史,数据管理技术历经人工管理、文件管理、数据库管理等时代，大数据技术的出现使该领域进入了一个新的发展阶段,-68-,大数据与传统数据的区别？,进化阶段,商业问题,支持技术,产品特点,数据搜集,(60年代),“过去五年中我的总收,入是多少？”,计算机、磁带和磁盘,提供历史性的、,静态的数据信息,“在新英格兰的分部去,年三月的销售额是多少,？”,关系数据库（RDBMS），结构,化查询语言（SQL），ODBC,Oracle、Sybase、Informix,、IBM、Microsoft,在记录级提供历,史性的、动态数,据信息,数据访问,(80年代),数据仓库；,“在新英格兰的分部去,年三月的销售额是多少,？波士顿据此可得出什,么结论？”,在各种层次上提,供回溯的、动态,的数据信息,决策支持,(90年代),联机分析处理（OLAP）、多,维数据库、数据仓库,大数据,“下个月波士顿的销售,会怎么样？为什么？”,云计算、分布式存储、NOSQL,数据库,提供预测性的信,息,大数据的概念,大数据(Big Data),是指,无法在一定时间内用常规软件,工具提取、存储、搜索、共享、分析和处理的海量的、,复杂的数据集合,简单一点的说，就是用现有一般技术难以管理的数据。,大数据的,4V,特征,非结构化数据,的超大规模和增长,体量Volume,大数据的,异构和多样性,占总数据量的8090%,比结构化数据增长快10倍到50倍,是传统数据仓库的10倍到50倍,很多不同形式（文本、图像、视频、机器,数据）,无模式或者模式不明显,不连贯的语法或句义,多样性Variety,大量的不相关信息,价值密度Value,对未来趋势与模式的可预测分析,深度复杂分析（机器学习、人工智能Vs传,统商务智能(咨询、报告等）,实时分析,而非批量式分析,速度Velocity,数据输入、处理与丢弃,立竿见影而非事后见效,“大量化(Volume)、多样化(Variety)、快速化(Velocity)、价值密度低（,Value,）”就是“大,数据”的显著特征，或者说，只有具备这些特点的数据，才是大数据。,2.2,大数据相关技术,大数据技术要解决的问题,Streams,Velocity,快速的数据流转,Real time,Near time,Batch,Structured,Value,Unstructured,TB,PB,EB,structuredSemi-,All the above,Variety,Volume,多样的数据类型,海量的数据规模,发现数据价值,技术领域的挑战,技术架构的挑战：,1、对现有数据库管理技术的挑战,传统的数据库部署不能处理数TB级别的数据，,也不能很好的支持高级别的数据分析。急速膨,胀的数据体量即将超越传统数据库的管理能力。如何构建全球级的分布式数据库(Globally-,Distributed Database)，可以扩展到数百,万的机器，数已百计的数据中心，上万亿的行,数据。,2、经典数据库技术并没有考虑数据的多类别,（variety），SQL（结构化数据查询语言）,在设计的一开始是没有考虑非结构化数据的。,3、实时性的技术挑战：,一般而言，像数据仓库系统、,BI应用，对处理,时间的要求并不高。因此这类应用往往运行1、,2天获得结果依然可行的。但实时处理的要求，,是区别大数据应用和传统数据仓库技术、,BI技,术的关键差别之一。,4、网络架构、数据中心、运维的挑战：,人们每天创建的数据量正呈爆炸式,增长，但就数据保存来说，我们的,技术改进不大，而数据丢失的可能,性却不断增加。,如此庞大的数据量首先在存储上就,会是一个非常严重的问题，硬件的,更新速度将是大数据发展的基石。,一些相关技术,分析技术：,存储,数据处理：自然语言处理技术,统计和分析：A/B test;top N排行榜；地域占比；海量数据的查询、统计、更新等操作效率低,文本情感分析,数据挖掘：关联规则分析；分类；聚类,模型预测：预测模型；机器学习；建模仿真,结构化数据：,图片、视频、word、pdf、ppt等文件存储,不利于检索、查询和存储,转换为结构化存储,按照非结构化存储,解决方案：,非结构化数据,大数据技术：,半结构化数据,数据采集：ETL工具,数据存取：关系数据库；NoSQL；SQL等,基础架构支持：云存储；分布式文件系统等,计算结果展现：云计算；标签云；关系图等,Hadoop（MapReduce技术）,流计算（twitter的storm和yahoo！的S4）,数据采集,数据管理,数据储存,数据分析与,挖掘,大数据的相关技术,数据采集,数据分析与挖掘,数据储存与管理,计算结果,展示,（CrowdSouring）,ETL,数据众包,数据众包,数据众包是一种新的数据采集方式，由企业方通过平台,把数据采集任务外包给非特定的大众网络。,大数据的相关技术,数据采集,数据分析与挖掘,数据储存与管理,计算结果展示,（CrowdSouring）,ETL,数据众包,结构化、非结构化,和半结构化数据,分布式文件系统,关系数据库,非关系数据库,（NoSQL）,数据仓库,云计算和云存储,实时流处理,分布式文件系统,分布式文件系统（,Distributed File System）是指文件,系统管理的物理存储资源不一定直接连接在本地节点上，,而是通过计算机网络与节点相连。,非关系型数据库,NoSQL,关系型数据库的局限性,难以满足高并发读写的需求,难以满足对海量数据高效率存储和访问的需求,难以满足对数据库高可扩展性和高可用性的需求,NoSQL,数据存储不需要固定的表结构，通常也不存,在连接操作。在大数据存取上具备关系型数据库无法,比拟的性能优势。,NoSQL,非关系型数据库,NoSQL,云计算和云存储,云计算（,cloud computing），是分布式计算技术的一种，其最基本,的概念，是透过网络将庞大的计算处理程序自动分拆成无数个较小的,子任务，再交由多部服务器所组成的庞大系统经搜寻、计算分析之后,将处理结果回传给用户。透过这项技术，网络服务提供者可以在数秒,之内，达成处理数以千万计甚至亿计的信息，达到和“超级计算机”,同样强大效能的网络服务。,云计算是一种资源交付和,使用模式，指通过网络获,得应用所需的资源（硬件、,平台、软件）。提供资源,的网络被称为“云”。,云计算和云存储,蓝蓝的天上白云飘,白云下面数据跑,如果数据是财富，那么大数据就是宝藏，而云计算就是挖掘和,利用宝藏的利器。没有强大的计算能力，数据宝藏终究是镜中,花；没有大数据的积淀，云计算也只能是杀鸡用的宰牛刀。,实时流处理,传统的分布式计算往往是先积累大量的数据，再进行数据,拆分和聚合。而实时流处理则是让数据流动起来，数据从,内存中流过，截取需要的数据，进行实时分析计算。,大数据的相关技术,数据采集,数据分析与挖掘,数据储存与管理,计算结果展示,（CrowdSouring）,ETL,数据众包,结构化、非结构化,和半结构化数据,分布式文件系统,关系数据库,非关系数据库,A/B Testing,关联规则分,析,分类,聚类,遗传算法,神经网络,预测模型模式识别,时间序列分,析,回归分析,系统仿真,机器学习,优化,空间分析,社会网络分,析,自然语言分,析,MapReduce,R语言,（NoSQL）,数据仓库,云计算和云存储,实时流处理,A/B Testing,A/B,测试是可用性测试的一个方法，其核心为：同时,实验两个元素或版本（,A,和,B），确定哪个更好。,注册按钮由绿色改成红色提高转化率,34%,人性化的表格提高11%,的转化率。,MapReduce,MapReduce,是,Google,提出的一个软件架构，用于大规模数据,集（大于,1TB）的并行运算。它使编程人员在不了解分布式并,行编程的情况下，能将自己的程序运行在分布式系统上,大数据的相关技术,数据采集,数据分析与挖掘,数据储存与管理,计算结果展示,（CrowdSouring）,ETL,数据众包,结构化、非结构化,和半结构化数据,分布式文件系统,关系数据库,非关系数据库,A/B Testing,关联规则分,析,分类,聚类,遗传算法,神经网络,预测模型,模式识别,时间序列分,析,回归分析,系统仿真,机器学习,优化,空间分析,社会网络分,析,自然语言分,析,MapReduce,R语言,（Tag Cloud）,（Clustergram）,（Spatial,information flow）,（Heatmap）,标签云,聚类图,空间信息流,（NoSQL）,数据仓库,云计算和云