当前位置     首页 > 滚动 > 正文
中经搜索

大数据时代,别忽视了小数据

2015年04月01日 10:18   来源:解放日报   姜炜

  大数据时代,人人都在谈论大数据。从概念认知到场景应用,人们似乎正试图掀起一股数据狂潮,这其中就包括了大家熟知的智慧城市、防止犯罪,以及类似于Google对流感趋势的预测等等。诸如此类的大数据应用有些已经在发挥其应有的作用,但更多的只是一个梦想。在这些成功的和将要成功的案例背后,到底什么才是大数据的本质呢?

  随着过去20年中数据挖掘和人工智能的发展,预测技术在2011年已经相对成熟,甚至走向广泛的应用,而大数据这个概念才刚刚提出。在过去的三到五年中,基于大数据的案例比比皆是,其结果却喜忧参半。这些失败的大数据项目背后是对大数据这一概念过高的预期,反而让大家忽视了对问题场景的重视。除此之外,关联数据往往也是缺失的,尽管说大数据到处都有,但是,真正对你有价值、对决策有意义的数据往往并不容易得到,而我们所知的绝大多数数据都是噪音多过价值。

  大数据作为一个技术为我们提供了许多人与人之间交互的数据和信息,但是真正的大数据并不是一些排名和信息的发布,而是从数据中理性找出内在的逻辑关系,并将这些逻辑关系应用于实践。如果不找到事物发展的规律而永远“闻数据起舞”的话,我们的决策往往会与期望相距甚远。Google曾通过用户搜索与感冒相关的关键词来预测流感趋势,这一基于相关关系进行的趋势预测一直到2012年前都应用得非常完美。但是到了2012年的圣诞节,Google的预测比真实数值高出了整整一倍。

  是什么原因导致了Google的预测失误?2013年的《科学》上面有一篇文章,几位教授对这个现象进行了分析,他们的归纳是大数据有这样一些天生的弱点:首当其冲的就是“骄傲的大数据”——认为大数据什么都能做,小数据没有用。事实上,大数据的采集远远不如小数据那样“干净”。同时,所有大数据的应用都离不开算法——“唯一不变的就是永远在变化的算法”。更重要的是,在Google的案例中,人的行为本身也会随着大数据及其技术的发展而改变,仅仅基于数据之间的相关关系,而忽视内在的逻辑关系,对预测来讲是远远不够的。当意识到预测中存在这样的问题,就需要人们用大数据去获得规律,用小数据去匹配场景,从而实现精准的预测和智能的决策。无论是企业还是个人,先要存积并了解透彻硕大的大数据表格中属于你的那行数据,唯有如此,我们才有可能从一滴水里看世界。

  《大数据时代》作者认为:“由大数据带来对人的重新认识,不是在阿波罗神庙,而是在小世界网络中,认识你自己。”我们从昨天的数据作用中认识自然、认识宇宙到今天通过大数据更多地认识网络和社会,我们的认识更加全面、更加深刻、也更加广泛。但是成就大数据的是无数努力造就小数据的人,他们探索大数据技术,认知大数据文化,并怀揣着对数据的敬畏和对规律的尊重。

  (作者为上海交通大学安泰经管学院运营管理系主任、特聘教授)

(责任编辑:年巍)

闂佸憡甯掑Λ鏃堟閳哄懎绀嗛悽顖e枤缁愶拷
延伸阅读
  • ·当前物价走势分析与预测    2016年02月19日
  • ·2016年中国经济预测    2016年01月22日
  • ·当前中国经济形势分析与预测    2016年01月21日
  • 濞戞搩鍘煎ù妤冪磼韫囨梻銈圭紓鍐╁灩婢ф寮堕崘銊ユ尋闁稿繐绉烽惌妤佺珶閻楀牊顫栭柨娑虫嫹
    1闁靛棔绀侀崵鎺楀嫉椤掑倻绉规繛澶堝妽濡叉垿鍨惧⿰鍕檷婵犙勫姧缁辩増绋夐鐐寸缂備礁绻戠粊鍦磾閹存柡鍋撻敓锟� 闁瑰瓨鐗戦埀顒佺矋濞奸潧鈹冮幇鍓佺獥缂備礁绻戠粊褰掑籍閵夛箑袚-濞戞搩鍘煎ù妤冪磼韫囨梻銈圭紓鍐╁灍閳ь剚绻勫▓鎴﹀箥閳ь剟寮垫径澶岀▕闁告繀绶ょ槐婵嬫偋閸喐缍€闁秆冩搐閻ɑ绂嶉敓锟�
    闁靛棌鍋� 濞戞搩鍘煎ù妤冪磼韫囨梻銈圭紓鍐╁煀缁辨瑩寮甸鍌滅Ч闁告瑱闄勫﹢浣圭珶閻楀牊顫栭柣銊ュ濞呭孩寰勯弽鐢电闁挎稒绋掑﹢顓犵磼韫囨梹鎷辩紓鍐╁灦瀹稿潡寮堕崘璺ㄧ濞寸姾顔婄紞宥夊础閺囨氨绉撮柛娆忥梗闁叉粍绂嶆潪鎵憹鐎电増顨夊ù鍡樻姜婵劏鍋撴担瑙勫枀缂傚倹鐗楅崹銊︾閵夈儱寰撻悗鐧告嫹
    闁靛棌鍋� 闁哄倻鎳撶槐鈩冩媴鐠恒劍鏆忓☉鎾筹龚閸亝鎷呭⿰鍐╂儌闁挎稒绋戦崙锛勭磼韫囧海鐟㈤柡鍫墰缂嶅绮甸崜褑顔夐柣鈺兦归崣褔骞掗崼鐔哥秬濞达綀娉曢弫銈夊础韫囨凹鍞撮柣銊ュ瀹曠喐鎷呭鍛尋濞戞搩浜欏Ч澶愭晬鐏炵晫瀹夋繛澶堝妽閸撴壆鎷犻妷褏鎼煎ù锝嗙矊閹佳勭▔椤撶喐笑闁告熬闄勫﹢锟�
    闁靛棌鍋� 闁烩晝枪缁ㄦ煡鎯冮崟顒€鎴块柡澶婂暕婵炲洭鎮介妸鈺傤€欓柛鎺曟硾閿涙劙寮版惔顖滅濞戞挸绉寸欢杈ㄦ交濠靛棗鍐€閻犲洢鍎抽悺鎴︽⒔閹邦剙鐓戝鍦濡叉垿鏁嶇仦鑲╃懍闁革负鍔嶅鍧楀级閸愵厼鐦遍柛銉︽綑閸炲瓨鎷呯捄銊︽殢闁哄啳娉涚花鎻掆枖閵婏附顫栭柍銉︾矋濞奸潧鈹冮幇鍓佺獥濞戞搩鍘煎ù锟�
    闁靛棌鍋� 缂備礁绻戠粊鍦磾閹存柡鍋撳┑鍥х仐闁炽儲绮嶅ḿ闈涒攦閹板墎绐楃紓浣哥箲缁佸綊寮妷锕€袚-濞戞搩鍘煎ù妤冪磼韫囨梻銈圭紓鍐╁灍閳ь剚绺块埀顒€鍊界换姘跺矗瀹ュ懎顤呴弶鈺傛緲閿涙劙寮版惔銈傚亾閸滃啰绀夐柡鍫墰缂嶅浜搁崱姘缂佸矁娉涢崣楣冩儎缁嬪灝褰犳繛澶嬫礀缁躲儳鎷归敐鍕床闁靛棴鎷�
    2闁靛棔鐒﹀﹢鎵磾閹寸偛顣查柡鍫濐槺濞堟垿宕堕崜褍顣诲ù锝嗙矊閹佳勭▔椤撱劎绀夐柛妤€鍘栨繛鍥р枖閵婏附顫栭柍銉︾矋濞奸潧鈹冮幇鍓佺獥濞戞搩鍘煎ù妤冪磼韫囨梻銈圭紓鍐╁灍閳ь剚绻傚锟�/闁瑰瓨鐗楅悥锝夊嫉婢跺棌鍋撳⿰鈧懙鎴﹀炊閻e瞼鐥呮繛鏉戞捣缂嶏拷(www.ce.cn)闁炽儻鎷�
    闁靛棌鍋� 婵ɑ娼欏畵鍐晬鐏炶偐绋绘鐐存构缁楀绂掗敐鍫涒偓鍐嫉椤掑倻绉归悗鐢殿攰椤曟氨绮垫径濠冪闁绘娲g紞鏃堝传娴g兘鐓╅柡鍫濐槼椤斿繘宕i娆戦搨濞存粏妗ㄦ繛鍥偨閵娧勭暠闁哄鍟崺鍕晬濞戞ê鍤掔紓浣哥箣缁楀矂寮甸鍌滅Ч缂佹稑澧界拋鏌ユ儎缁嬪灝褰犻柟鍝勭墛濞煎牊鎷呯捄銊︽殢
    闁靛棌鍋� 闁告绻楅鍛存儍閸曨偄绀嬪ù锝呯Т瀵攱绋夐鍐╃溄闁挎稑濂旂划搴ㄥ嫉婢跺缍€闁革负鍔嶅鍧楀级閸愵厼鐦遍柛銉︽綑閸炲瓨鎷呯捄銊︽殢閻犲洢鍎抽悺鎴﹀炊閸撗冾暬濞戞搩鍘藉Σ鎴犳兜椤旇姤鏆堥柡鍕岸閳ь剚绮堥懙鎴﹀炊閻e瞼鐥呮繛鏉戞捣缂嶅鎷嬮幏灞稿亾閸栫えX闁硅棄瀚ч埀顒佺箖閸拷
    闁靛棌鍋� 闁炽儲绮庣划鈥趁规惔銏★級闁硅翰鍎抽妵锟�-濞戞搩鍘煎ù妤冪磼韫囨梻銈圭紓鍐╁灱椤斿洭鎳撻崠绀╔闁硅棄瀚ч埀顒佺箘濞堟垿宕堕崜褍顣诲ù锝嗙矊閹佳囨晬鐏炶姤鍎婇柛鎺撶懕缁辨繃绋夐埀顒勫礆閸ワ妇鐟濋柛鎺嗘櫅閹寮稿⿰鍡楁閻炴稑鏈竟娆撳箯閸涱偀鍋撻敓锟�
    3闁靛棔绀侀崵鎺楀嫉椤掑倻绉规繛澶堝妽濡诧拷 闁炽儲绮嶅ḿ闈涒攦閹板墎绐梄XX闁挎稑鐗撳ḿ顏呯▔椤撶偞绂囩紓浣哥箲缁佸湱绱旈幋顖滅闁炽儻鎷� 闁汇劌瀚紞鏃堝传娓氬﹦绀夐柛褍娲╁ù鍡樻姜閸婄喎娈伴柛蹇氭硾閻g姵鍒婇幒宥囩Ъ闁挎稑鐭佸ù鍡樻姜閻e本绐楅柣銊ュ濠€顏呯鎼存繄鐐婇梺顐e笚濞诧拷
    闁靛棌鍋� 濠㈣埖鐭穱濠囧箒椤栥倗绀夋鐐存构缁楀绂掗敐鍫涒偓鍐嫉椤掑倻绉归悹褏鍋涢幃鎾诲礂閹偊娼庨柣鎰嚀閹锋壆鈧數鎳撻崣楣冩儑閻旈鏉介柟顑棛顦伴悹鎰剁祷閳ь剨鎷�
    4闁靛棔绀侀々褔宕堕悩杈╃▕闁告繀绀侀崬瀵糕偓鐟扮畭閳ь兛鑳舵晶妤呭级閸愩劍瀚查柛蹇氭硾閻g娀姊婚鈧。浠嬫閳ь剛鎲版担鍛婂€遍柡鍫墰缂嶅鎳曢弮鍌炲厙闁汇劌瀚哥槐婵堟嫚瀹勭増韬�30闁哄啨鍎遍崬瀛樻交濞戞粠鏀介柕鍡嫹

    闁炽儻鎷� 缂傚啯鍨归悵顖炲箑缂佹ɑ绨氶柨娑虫嫹010-81025111 闁哄牆顦崣褎鎷呭⿰鍐╂儌闁绘鐗婂ḿ鍫熺鐎n亞鏉归悹鍥╂焿娴犲牏鍖栨导娆戠獥010-81025135 闂侇収鍠氶鍫ユ晬閿燂拷

    精彩图片
    闁稿繐鍘栫花顒傜磼韫囨梻銈归柡鍐﹀劜婵倗绮堥敓锟� 闁挎冻鎷� 闁稿繐鍘栫花顒佺▔椤撶偞绂囩紓浣哥箲缁佸湱绱旈敓锟� 闁挎冻鎷� 缂傚啯鍨归悵顖涘緞瑜岀花銊ф媼閿燂拷 闁挎冻鎷� 缂傚啯鍨归悵顖滄嫚濮樺厖绮� 闁挎冻鎷� 闁绘鐗婂ḿ鍫熺珶閻楀牊顫� 闁挎冻鎷� 濞存粍甯熸禒鍫㈢磾閹达綆娼掗柛姘煎墲婵☆參鎯勯鑺ョ疀闁告枀銈呮鐎垫澘顑呴崣鏇犵棯閿燂拷 闁挎冻鎷� 妤犵偛鐏濋幉锟犲嫉瀹ュ懎顫� 闁挎冻鎷� 闁告瑥顑嗛崕蹇涙煣閻愵剙澶� 闁挎冻鎷� 缂佸墽濞€閺佸﹪鏌囬缁㈠敻
    缂備礁绻戠粊褰掑籍閵夛箑袚闁硅翰鍎扮粭鐔兼⒖閸℃绀嬫繛澶嬫礀缁躲儲銇勬ィ鍐╋紪闁挎冻鎷�闁告牗銇為崥顐ゆ暜閸岀偞鍣烽悹鍥ф惈缁躲儳鏁崼婊呯殤闁告柡鍓濇晶锟�    濞戞搩鍘煎ù妤冪磼韫囨梻銈圭紓鍐╁灦绾泛顕ョ€n喓鈧劙姊婚鍡欑獥闁告牗銇為崥顐﹀礆濮橆剟鎸€垫澘顑呯粭鈧ù婊冾儏婵喖骞嶉埀锟�
    濞戞搩鍘煎ù妤冪磼韫囨梻銈圭紓鍐挎嫹 闁绘鐗婂ḿ鍫ュ箥閳ь剟寮甸敓锟�  濞存粍甯熸禒鍫㈢磾閹寸偞鐓€闂傚倽顔婃穱濠囧箒椤栨稒绠涢柛鏂呫値鍟呴柛娆樺灥閻︼拷(10120170008)   缂傚啯鍨圭划鑸靛閻樿櫕灏¢悷娆忔閹鎳為崒婊勭獥閻犱胶枪瑜拌尙鎷犻敓锟�(0107190)  濞存粎鎮侰P濠㈣鎷�18036557闁告瑱鎷�

    濞存粠鍓欓崣鏇犵磾閹存繄鏆斿璁规嫹 11010202009785闁告瑱鎷�