『壹』 大數據攻略案例分析及結論
大數據攻略案例分析及結論
我們將迎來一個「大數據時代」。與變化相始終的中國企業,距離這場革命還有多遠?而追上領先者又需要多快的步伐?
{研究結論}
怎樣才能用起來大數據?障礙如何解決?中國企業家研究院對10多家在大數據應用方面的領先企業進行了采訪調研,更多家企業進行了書面資料調研,我們發現:
■ 當前中國企業的大數據應用可以歸類為:大數據運營、大數據產品、大數據平台三大=領域,前兩者更多是企業內部的應用,後者則在於用大數據來繁榮整個平台企業群落的生態。
■ 大數據營銷的本質是一個影響消費者購物前心理路徑的問題,而這在大數據時代前很難做到。
■ 對於傳統企業而言,要打通線上與線下營銷,實現新的商業模式,如O2O等,離不開大數據。
■ 雖然大數據應用往往集中於大數據營銷,但對於一些企業,大數據的應用早已超越了營銷范疇,全面進入了企業供應鏈、生產、物流、庫存、網站和店內運營等各個環節。
■ 對於大部分企業,由於數據分析人員與業務人員之間的彼此視角與思考方向不同,大數據分析和運營之間存在脫節情況,這是大數據無法用於企業運營最大的阻力
■ 對於大多數互聯網公司來說,大數據量、大用戶量是一個相互促進,強者越強的循環過程。
■ 對於大型互聯網平台,大數據已經成為其生態循環中的血液,對於這些企業,最重要
的不是如何利用大數據改進自身運營,而是利用大數據更好地繁榮平台生態。
■ 對於平台企業,它們的大數據策略正逐漸從大數據運營,向運營大數據轉變,前者和
後者的差別在於,前者只是運營改進的動力,而後者則成為企業實現未來戰略的核心資源。
我們都已被反復告知:我們將迎來一個「大數據時代」。
大數據應用,將和雲計算、3D列印這些技術變革一樣,顛覆既有規則,並成為先行企業的制勝關鍵。
與變化相始終的中國企業,距離這場革命還有多遠?而追上領先者又需要多快的步伐?
來自於互聯網、移動互聯網、物聯網感測器、視頻採集系統的數據正海量增長,匯成大數據的海洋,相伴的是海量數據存儲、分析技術的突破性發展,所有這一切都給企業的應用帶來了無限可能性。
許多企業希望將大數據用起來,帶動企業的經營,但不知從哪裡著手。它們不惜重金投資大數據信息系統、分析系統,聘請更多的人才,希望能從這個新趨勢中獲益,不過卻無奈地發現,大數據仍然停留在雲端,沒有帶來多少實際收益。它們找不到大數據與業務結合的突破口。而一些真正將大數據應用於實戰的企業,卻在應用過程中困難重重:大數據無法與業務結合;沒有收集、分析海量數據的能力;經營人員缺少應用大數據的動力;數據來源魚龍混雜難以使用……
中國企業家研究院對當前中國企業大數據應用的狀況進行了歸納分類,以幫助企業了解實際應用大數據時的困局難點,並提供領先企業的典型案例以資借鑒。
表1
表2
大數據運營—企業提升效率的助推力
對於大多數企業而言,運營領域的應用是大數據最核心的應用,之前企業主要使用來自生產經營中的各種報表數據,但隨著大數據時代的到來,來自於互聯網、物聯網、各種感測器的海量數據撲面而至。於是,一些企業開始挖掘和利用這些數據,來推動運營效率的提升。大數據運營應用中,大數據的應用分為三類:用於企業外部營銷、用於內部運營,以及用於領導層決策。
一、大數據營銷
大數據營銷的本質是影響目標消費者購物前的心理路徑,它主要應用在三個方面:1、大數據渠道優化,2、精準營銷信息推送,3、線上與線下營銷的連接。在消費者購物前,通過各種方式,直接介入其信息收集和決策過程。而這種介入,是建立在對於線上與線下海量用戶數據分析的基礎之上。相比傳統狂轟濫炸或等客上門的營銷,大數據營銷無論在主動性和精準性方面,都有非常大的優勢。它是目前主要的大數據應用領域。
大數據營銷不僅僅是用大數據找出目標顧客,向其發布促銷信息,它還可以做到:
實現渠道優化。根據用戶的互聯網痕跡進行渠道營銷效果優化,就是根據互聯網上顧客的行為軌跡來找出哪個營銷渠道的顧客來源最多,哪個來源顧客實際購買量最多,是否是目標顧客等等,從而調整營銷資源在各個渠道的投放。例如東風日產,它利用對顧客來源的追蹤,來改進營銷資源在各個網路渠道如門戶網站、搜索和微博的投放。
精準營銷信息推送。精準建立在對海量消費者的行為分析基礎之上,消費者網路瀏覽、搜索行為被網路留下,線下的購買和查看等行為可以被門店的POS機和視頻監控記錄,再加上他們在購買和注冊過程中留下的身份信息,在商家面前,正逐漸呈現出消費者信息的海洋。
一些企業通過收集海量的消費者信息,然後利用大數據建模技術,按消費者屬性(如所在地區、性別)和興趣、購買行為等維度,挖掘目標消費者,然後進行分類,再根據這些,對個體消費者進行營銷信息推送。比如孕婦裝品牌十月媽咪通過對自己微博上粉絲評論的大數據分析,找出評論有「喜愛」相關關鍵詞的粉絲,然後打上標簽,對其進行營銷信息推送。京東商城副總經理李曦表示:「用大數據找出不同細分的顧客需求群,然後進行相應的營銷,是京東目前在做的事情。」小也化妝品將自身網站作為收集消費者信息的雷達,對不同消費者推薦相應的肌膚解決方案,創始人肖尚略希望在未來,大數據營銷能替代網站的作用,真正成為面向顧客的前端。
打通線上線下營銷。一些企業將互聯網上海量消費者的行為痕跡數據與線下購買數據打通,實現了線上與線下營銷的協同。比如東風日產,線上與線下的協同營銷方式為:其門戶網站帶來訂單線索,而通過這些線索,服務人員進行電話回訪,從而推動顧客在線下交易。在此過程中,東風日產記錄了消費者進入、瀏覽、點擊、注冊、電話回訪和購買各個環節的數據,實現了一個橫跨線上線下,以大數據分析為支持的,營銷效果不斷優化的閉環營銷通路。而國雙科技,衡量某一地區線下促銷活動的效果,就是看互聯網上,來自這個地區對於促銷內容的搜索量。一些企業,通過鼓勵線下顧客使用微信和Wi-Fi等可追蹤消費者行為和喜好的設備,來打通線上與線下數據流,銀泰百貨計劃鋪設Wi-Fi,鼓勵顧客在商場內使用,然後根據Wi-Fi賬號,找出這個顧客,再通過與其它大數據挖掘公司合作,以大數據的手段,發掘這個顧客在互聯網的歷史痕跡,來了解這個顧客的需求類型。
二、大數據用於內部運營
相比大數據營銷,大數據在內部運營中的應用更深入,對於企業內部的信息化水平,以及數據採集和分析能力的要求更高。本質上,是將企業外部海量消費者數據與企業內部海量運營數據聯系起來,在分析中得到新的洞察,提升運營效率。(詳見P96表5:大數據在內部運營中的應用)
表5
三、大數據用於決策
在大數據時代,企業面對眾多新的數據源和海量數據,能否基於對這些數據的洞察,進行決策,進而將其變成一項企業競爭優勢的來源?同大數據營銷和大數據內部運營相比,運用大數據決策難度最高,因為它需要一種依賴數據的思維習慣。
已有少數企業開始嘗試。比如國內一些金融機構在推出一個金融產品時,會廣泛分析該金融產品的應用情況和效果、目標顧客群數據、各種交易數據和定價數據等,然後決定是否推出某個金融產品。
但是,中國企業家研究院在調研中發現,目前中國企業當中,大數據決策的應用非常之少,許多企業領導者進行決策時,仍習慣於憑借歷史經驗和直覺。
大數據產品——企業利潤滋長的新源泉
大數據除了用於運營外,還能夠與企業產品結合,成為企業產品背後競爭力的核心支持或者直接成為產品。提供大數據產品的企業分為兩類,直接提供大數據產品的企業,以及將大數據作為產品和服務核心支撐的企業。前者主要為大數據產業鏈中提供數據服務的參與者,包括數據擁有者、存儲企業,挖掘企業、分析企業等,後者則主要是那些以大數據為產品核心支撐的企業,它們大多是互聯網企業,其產品和服務先天就有大數據基因,這些企業包括搜索引擎、在線殺毒、互聯網廣告交易平台以及眾多植根於移動互聯網之上,為用戶提供生活和資訊服務的APP等。
表3
表4
一、大數據作為產品核心支持
它們主要在以下幾方面使用大數據:
1、提供信息服務。很多互聯網企業通過對海量互聯網信息和線下信息的整合和分析,為個人和企業提供信息服務,典型的如網路、去哪兒、一淘、高德地圖、春雨醫生等等。在美國,一些互聯網企業甚至根據大數據提供更深度的預測信息服務,美國科技創新公司farecast,通過分析特定航線機票的價格,幫助消費者預測機票價格走勢。
2、分析用戶的個性化需求,藉此提供個性化產品和服務,或者實現更精準的廣告。典型的有移動社交工具陌陌、網路、騰訊、廣告交易平台品友互動以及一些互聯網游戲商。這種應用往往先是收集海量用戶的互聯網行為數據,將用戶分類,根據不同類型的用戶,提供個性化的產品,或者提供個性化的促銷信息。比如網易等門戶網站推出了訂閱模式,讓使用者按照個人喜好方便地定製和整合不同來源的信息。
3、增強產品功能。對於很多互聯網產品,如殺毒軟體、搜索引擎等等,海量數據的處理能夠讓產品變得更聰明更強大,如果沒有大數據,產品的功能就大大減弱。比如奇虎360公司的360殺毒軟體,憑借每天海量的殺毒處理,建立了龐大的病毒庫,這使它能夠更快地發現病毒,而一些小的殺毒軟體公司則無法做到這一點。
4、掌控信用狀況,提供信貸服務。阿里巴巴上匯集了海量中小企業的日常資金與貨品往來,通過對這些往來數據的匯總與分析,阿里巴巴能發現單個企業的資金流與收入情況,分析其信用,找出異常情況與可能發生的欺詐行為,控制信貸風險。
5、實現智能匹配。婚戀網站、交易平台等,利用大數據可以進行精準而高效的配對服務。網易花田會挖掘用戶行為數據,比如點擊哪些異性的頁面,發表什麼樣的評論,建立用戶興趣模型,從而挖掘到用戶所期待另一半的類型,然後主動推薦與對方匹配度比較高的人選。2010年,阿里巴巴嘗試性地推出「輕騎兵」服務,由阿里巴巴將中國各產業集群地的供應商與海外買家的個性采購需求進行快速匹配,所憑借的,就是對供應商的海量交易數據信息的整合與挖掘。
大數據作為產品核心支撐的關鍵在於用戶量。對於大多數互聯網公司來說,用戶量越多,收集的數據越多,憑借更多的數據,其產品與商業模式會不斷改進,進而帶來更多的用戶。
二、大數據直接作為產品
對一些企業,大數據直接成為了產品,這些產品包括海量數據、分析、存儲與挖掘的服務等,目前大數據產業鏈正在形成過程中,出現了一批開放、出售、授權大數據和提供大數據分析、挖掘的公司和機構,前者主要是一些擁有海量數據的公司,將數據服務作為新的盈利來源。如大型的互聯網平台、民航、電信運營商、一些擁有大數據的政府機構等等,後者主要包括一些能夠存儲海量數據或者將海量數據與業務場景結合,進行分析和挖掘,或者提供相關產品的公司,如IBM、SAP、拓而思、天睿公司。它們為大數據應用者們提供海量數據存儲、數據挖掘、圖像視頻、智能分析等服務以及相關系統產品。
大數據平台——企業群落繁榮的滋養劑
相對企業本身對大數據的應用,大數據平台更多是利用大數據來搭建企業生態。一些擁有龐大數據資源的大型互聯網平台,已變為包含海量寄生者的生態系統。在這個生態系統中,它們將海量用戶互聯網行為痕跡和分析提供給平台上的企業,用於它們改善經營,推動整個平台生態繁榮,在這一過程中,它們也收取數據服務費。阿里巴巴就是一個典型的例子,從數據魔方、黃金策到聚石塔,阿里巴巴不斷地為平台上中小電商提供數據產品和服務。
而網路已建成了包括網路指數、司南、風雲榜、數據研究中心和網路統計在內的五大數據體系平台,幫助其營銷平台上的企業了解消費者行為、興趣變化,以及行業發展狀況、市場動態和趨勢、競爭對手動向等信息。
而當大數據從企業內部運營的動力,變成平台企業的產品和服務時,平台企業也在經歷著一個從大數據運營到運營大數據的階段。數據從運營的支持工具,變成了生產資料。此前平台們的關注點,更多的是如何用好現有的大數據。而未來,它們的關注點則更多是如何將大數據這個生產資料管理好、經營好,如何更好地為平台上的企業服務。這就涉及到收集的數據質量怎樣?格式標準是否統一?數據作為一種原材料,其精細化程度如何?是否符合平台上企業應用的具體場景?是平台上企業拿來就能用的,還是還需要平台上的企業再加工?
為解決這些問題,各個平台在積極地努力。比如阿里巴巴建立了數據委員會,在統一數據格式標准、從源頭上保證數據的質量,採集和加工出精細化的數據,確保其能符合平台企業的應用場景等方面,不遺餘力地嘗試。尤其在大數據精細化方面,阿里巴巴更是作為其大數據戰略的重點。這方面,騰訊目前也在加快步伐。比如新版騰訊網出現了「一鍵登錄」的提示,用戶可以在上面通過一些細分標簽,訂閱自己關注的內容。實際上,這也是騰訊收集更精細化的用戶興趣數據的一個有效手段。
Tips
大數據實戰手冊
將大數據應用於內部運營中時,企業會遇到一些常見問題
1企業如何獲取與分析數據?
互聯網是大數據的一個主要來源,一些線下的傳統企業很難獲得。但它們可以:
a 和擁有或能抓取海量數據的平台、企業以及政府機構合作。比如淘寶上的電商就購買淘寶收集的海量數據中與自身運營相關的部分,用於自身業務。再如卡夫通過與IBM合作,在博客、論壇和討論版的內容中抓取了47.9萬條關於自己產品的討論信息,通過大數據分析出消費者對卡夫食品的喜愛程度和消費方式。
b 建立自己在互聯網上的平台,比如朝陽大悅城利用自己的微信、微博等平台收集消費者評論數據。
c 許多傳統企業沒有分析海量數據的能力,此時它們可以和大數據分析和挖掘公司合作,目前市場上已經有天睿公司、IBM、百分點、華勝天成等一批提供大數據分析和挖掘服務的公司,它們是傳統企業進行大數據分析可以藉助的力量。
2 如何避免大數據應用時的部門分割?
對於許多企業,其信息流被各部門彼此分割,數據難以互通,對於這種情況下,大數據的共享和匯集就只是一個泡影,更難以實現大數據的深度應用。
要打通部門之間信息分割的局面,首先要建立統一的、集中的數據系統。就像立白信息與知識總監王永紅所說的,「要真正用好大數據,企業要採用大集中的信息系統。」從更深入的角度來談,企業信息流的部門分割,更在於企業部門之間的分割,比如有一些企業的營銷按照渠道分割,導致對於顧客的大數據收集和分析效果大打折扣。
IBM智慧商務技術總監楊旭青認為,「很多時候由於組織結構問題,大數據分析有效性大大降低了。」這就需要組織與流程層面的重新設計,在這方面,阿里巴巴的部門負責人輪崗制度,對於打破部門壁壘無疑是一劑好葯。而一些企業為了打破部門分割,建立了矩陣型的組織結構,強化部門間的橫向合作,這些無疑為大數據的匯集、共享與應用創造了良好條件。
3 如何讓業務人員重視大數據的應用?
解決這個問題,一方面在於一把手對整個企業數據文化的倡導,比如1號店董事長於剛就要求業務人員無論在開會,還是匯報工作時,都以數據說話,而馬雲更是將大數據提升到了戰略高度。
另一方面,也在於數據部門的帶動,阿里巴巴數據委員會負責人車品覺分享了經驗,「因為運營部門的業務人員很難看到大數據的潛力,可以首先從一些對業務見效快,見效顯著的數據項目出發,通過一兩個項目的成功,調動對方的積極性,然後再逐步一個個地引導。」
4 為何大數據工作與運營需求脫節?
這往往是由於數據人員與業務人員視角、專業知識不同而導致的。大數據人員做了很多努力,但是業務人員卻認為這些努力無關痛癢。如何解決這個問題?
有的企業從組織設計上發力,將大數據納入業務分析部門的管理之下,用業務統馭數據。對於朝陽大悅城,由主要負責戰略和經營分析的部門來管理大數據工作,其中的大數據分析人員則作為支持人員。在負責人張岩看來,大數據要靠商業法則指導,關鍵是找到業務需求的點,然後由數據分析和挖掘人員實現。在具體操作中,大悅城對微信的數據挖掘,挖掘什麼樣的關鍵詞,由業務分析人員確定,而具體挖掘則由數據部門做;有的企業從流程設計上著手,推動業務部門與數據部門人員之間的溝通,建立數據人員工作與效果掛鉤的考核機制。
例如阿里巴巴根據數據挖掘的成效(比如帶來的商品轉化率的提升)來考核數據挖掘師,考核數據分析師則看其分析結果能否出現在經營負責人的報告中。從數據部門自身角度則需要降低運營部門使用數據的障礙和門檻,比如立白集團的數據人員會努力嘗試向運營部門提供更易懂、更生動的圖形化數據分析界面,在立白老闆辦公室上,就有一份「客戶運營健康體檢表」,讓老闆對全國經銷商的當月銷售情況一目瞭然。再如阿里巴巴開發的無線Bi,讓經營人員在手機上也可以看到大數據分析結果,拿車品覺的話說,「以數據之氧氣包圍經營人員。」
以上是小編為大家分享的關於大數據攻略案例分析及結論的相關內容,更多信息可以關注環球青藤分享更多干貨
『貳』 有誰知道江蘇大數據聯盟是什麼單位
聯盟全稱:江蘇大數據聯盟(以下簡稱大數據聯盟),英文名稱為Jiangsu Big Data Alliance,縮寫為 jsBDA。
聯盟指導單位:江蘇省經濟和信息化委員會
聯盟官網地址:www.jsbigdata.net.cn
聯盟性質:聯盟是在江蘇省經濟和信息化委員會的指導下,由省內從事大數據技術研究與產品研發、生產、推廣、應用的企事業單位及社會團體按照「自願、平等、合作」的原則發起成立的行業性、非營利性的聯合體。
聯盟宗旨:圍繞大數據技術鏈、產業創新鏈,運用市場機制集聚創新資源,實現產學研用等機構在戰略層面的有效結合,通過資源共享、協同行動和集成發展,形成產業核心競爭力,有效提升江蘇大數據關鍵技術創新水平,推動大數據應用和產業發展,促進數據驅動的產業變革和模式創新,服務國家和地方創新體系建設,促進經濟社會發展。
聯盟任務及工作內容:
為了充分發揮聯盟的橋梁和紐帶作用,承擔政府各類委託任務,為政府決策提供參考依據;組織開展行業熱點問題調研,形成行業大數據重點應用調研報告,向政府反映行業訴求,提出促進本省大數據技術創新和產業發展的政策建議。開展大數據相關標準的研究,探索數據採集、處理、使用等過程中隱私保護、數據安全保護等相關方面的規范,推動相關標准和規范的制定與應用。
組織大數據產業鏈上的相關企業,開展供需對接活動,促進大數據的技術服務、產品推廣、項目協同創新等產學研用合作,推動聯盟會員間大數據項目的建設,並逐步探索聯盟內部會員之間數據共享機制。
定期編輯大數據技術創新和產業發展簡報、組織開展優秀案例匯編、重點項目展示等宣傳推廣工作。積極探索構建政策資源、產品資源和公共數據資源等公共資料庫。
依託高校科研院所、培訓機構等聯盟會員,開展大數據相關人才培訓,特別是多層次人才的知識更新和培訓。
發揮聯盟作用,圍繞大數據產業生態鏈,對接多層次資本市場,結合政府政策支持,推動大數據應用和產業發展,促進數據驅動的產業變革和模式創新。
歡迎貴公司加入江蘇大數據聯盟~
『叄』 做調查報告需要幾個步驟
1、基本要求
(1)立場、觀點要正確
搞調查研究首先必須要有正確的立場、觀點,才能實事求是地進行調查研究,認識事物的本來面貌,得出合乎客觀實際的結論。
(2)調查態度要端正
要想獲得豐富的材料,就要有飽滿的熱情、艱苦深入的作風和實事求是的態度。
(3)調查目的要明確
我們進行調查研究,從根本上來說,就是為了掌握實際情況,有助於制定和執行正確的方針政策,樹立先進典型,批判錯誤的傾向,使我們各項工作沿著正確的方向前進。
(4)調查方法要講究
為了獲得豐富的材料,還要講究調查的方法。按照工作的步驟來說,應注意下面幾個問題:
2、調查准備
(1)思想武裝。
(2)選定調查研究題目。
(3)擬定調查提綱。
3、調查方法
(1)開會調查
(2)個別訪問
(3)現場觀察
(4)蹲點調查
(5)閱讀有關書面資料
4、報告撰寫
對所得的材料進行整理、分類、核實,發現遺漏疑問的地方,再作調查補充。分析、思考,提示材料的內部聯系,發現事物的本質。
調查報告的特點
1、寫實性。調查報告是在佔有大量現實和歷史資料的基礎上,用敘述性的語言實事求是地反映某一客觀事物。充分了解實情和全面掌握真實可靠的素材是寫好調查報告的基礎。
2、針對性。調查報告一般有比較明確的意向,相關的調查取證都是針對和圍繞某一綜合性或是專題性問題展開的。所以,調查報告反映的問題集中而有深度。
3、邏輯性。調查報告離不開確鑿的事實,但又不是材料的機械堆砌,而是對核實無誤的數據和事實進行嚴密的邏輯論證,探明事物發展變化的原因,預測事物發展變化的趨勢,提示本質性和規律性的東西,得出科學的結論。
『肆』 大數據在社會治理中的創新應用實踐
大數據在社會治理中的創新應用實踐
交通擁堵一直是令城市管理者十分頭疼的難題。為緩解交通擁堵,利用信息技術是其中的新方向之一。2012年IBM的研究者與法國里昂市合作開發了一套緩解道路擁堵的系統——「決策支持系統優化器」,通過整合、分析市政網路現有交通數據以及來自社交媒體的新數據來醫治交通頑疾。這只是運用大數據來解決社會治理難題的一個初級案例,不遠的將來,利用大數據技術進行社會決策與治理,有可能成為政府行使職能的常態。大數據技術為社會治理帶來新機遇社會治理是對社會的經濟、政治和文化等事務進行的組織、協調、指導、規范、監督的過程。它涉及合理有效配置社會資源,比如提供教育、文化、衛生、體育、社會保障等社會公共服務和公共產品,保障社會公平與公正;涉及通過行政及司法手段保障社會安全和社會穩定。而社會治理目標的實現,是以掌握治理對象的狀況及其外部環境的信息為前提的。現階段,我國正處在社會轉型期,急劇發展變化的社會,對於包括人、財、物、事等在內的龐大而復雜的社會管理信息需求,與當前大數據技術的發展不期而遇。創新社會治理,是我國應對社會轉型、化解社會矛盾、協調利益關系、維護社會秩序所面臨的一項重大戰略任務。針對目前社會治理領域普遍存在的服務理念滯後、決策機制不夠科學、部門協作亟須加強、工作方式待改進與工作效率求提升等問題,大數據技術從認識、理論、方法、實踐和效果評估等方面都能給人以啟發。大數據技術通過對海量數據的快速收集與挖掘、及時研判與共享,成為支持社會治理科學決策和准確預判的有力手段,為社會轉型期的社會治理創新帶來了機遇。大數據在社會治理中的創新應用實踐建立大數據中心,及時搜集、實時處理數據信息,為科學決策提供堅實基礎。政府部門是社會治理的主導者,在出台社會規范和政策時,依賴大數據進行分析,可以減少因缺少數據支撐而帶來的偏差,提高公共服務的效率。實踐中,浙江法院系統通過建立全國法院案件信息資料庫,及時、全面、准確地採集反映案件及其審理過程情況的各類信息,為加強對辦案的全流程監管,實現科學分類、多元檢索和海量數據的分析比對奠定了基礎。打造大數據電子政務平台,暢通利益訴求與溝通渠道,建立主動應對的社會治理模式。大數據分析注重用戶行為的分析和反饋,通過網上辦事、區域聯動、資源共享的電子政務平台和網格化社會管理體系,促進政府和公眾互動,獲取公眾行為的大數據並加以分析,可以更加及時地發現社會矛盾和問題,將過去政府被動應對問題轉變為主動發現問題和解決問題的治理模式。對社會大數據進行歷時性和實時性分析,加強社會風險控制,提高政府預測預警能力和應急響應能力。無論是對現實社會各行業的運行監控,還是對網路虛擬社會的治理,都可以基於歷時和實時的大數據分析,密切掌握市場調節失靈、社會秩序與穩定受到威脅等需要社會治理介入的節點或情況,這對於進一步加強和完善社會公共安全體系,完善社會應急管理體制等具有重要作用。積極發展大數據技術創新社會治理制定大數據國家戰略,加強頂層規劃和設計,打造「數據中國」。大數據將成為引領未來科技和社會進步的重要載體。麥肯錫的大數據研究報告稱,大數據是國家和地區發展的主要指標,已經滲透到金融、健康、住房、交通、教育等重大民生領域,正在影響著企業的決策和國家發展的戰略部署。國際上,美國、英國、法國等發達國家先後出台大力發展大數據技術的相關政策,日本和韓國也積極付諸大數據技術的實踐。我國廣東、上海、山東、浙江等部分經濟發達地區也已先後啟動大數據行動計劃或成立大數據聯盟,以促進大數據技術的發展和應用。大數據技術發展既是創新社會治理的需要,也是信息社會發展的必由之路。建議我國從國家層面設計大數據發展戰略,做好頂層設計,引導和推動各領域、各行業對大數據的研究和利用。完善大數據基礎設施建設,擴大社會應用,促進數據驅動的社會決策和治理常態化。信息技術基礎設施是大數據技術應用的載體,大數據本身也將成為社會基礎設施的一部分。大數據中心和數據應用平台建設的水平,決定了大數據時代的數據能否被有效收集、分析、挖掘和應用。這些大數據基礎設施的建設可以與國家信息化建設相融合,以政府為主導、技術型企業為主力、公眾參與為紐帶,形成覆蓋有線與無線互聯網、各種社交網路、各種使用終端在內的社會化統一數據平台,通過大數據挖掘和分析技術,有針對性地解決社會治理難題;針對不同社會細分人群,提供精細化的服務和管理。同時建立資料庫資源的共享和開放利用機制,不僅打破政府部門間的「信息孤島」現象,也加強政府與社會公眾間的互動反饋,不斷擴大在教育、醫療等領域的應用,使數據驅動的社會決策與科學治理常態化。建立數據使用規范,規避大數據的使用風險。技術往往是一把雙刃劍。大數據的收集和使用可能涉及國家信息安全和公民隱私等,需要在立法層面明確大數據採集和使用的原則。大數據平台本身的安全性也應引起重視,需要國家相關部門制定大數據技術標准和運營規范,重視大數據及信息安全體系建設,加強對重點領域敏感數據的監管。應當採取必要措施,構建大數據良性生態環境,調動全社會積極、有序地運用大數據技術來創新社會管理。
『伍』 求《2020年大數據調查報告白皮書全套》全文免費下載百度網盤資源,謝謝~
《2020年大數據調查報告白皮書全套》網路網盤pdf最新全集下載:
鏈接: https://pan..com/s/1iooVKp_OivVxF-7GhTVuYQ
『陸』 大數據的產生與發展現狀研究
摘 要:大數據的產生給未來信息技術帶來新的機遇與挑戰。大數據對數據處理的有效性、實時性提出了更高要求,需要根據大數據的特點對當前數據處理技術實施變革,從而形成更有益於大數據採集、存儲、處理、管理、分析、共享的新興技術。本文從大數據的產生與發展、特徵、主要應用以及大數據所帶來的挑戰等方面進行闡述與分析。
關鍵詞 :大數據 物聯網 信息處理 海量計算
一、大數據的產生與發展現狀
隨著物聯網、雲計算等信息技術的飛速發展,大數據技術(Big Data)也越發進入人們的視線。大數據是用傳統方法或工具很難處理或分析的數據信息。目前,人們對大數據的理解還不夠全面和深入,關於大數據的含義也沒有一個統一的定義。亞馬遜大數據科學家John Rauser認為:大數據是超過任何一台計算機處理能力的龐大數據量。Informatica 的中國區首席顧問但彬指出:大數據是海量數據與復雜類型的數據的結合。而維基網路則把大數據定義成諸多大而復雜的、難以用當前資料庫處理的數據集合。
大數據研究受到國內外學術界和工業界的廣泛關注,已成為當今信息時代全世界討論的熱點。2008年,Nature雜志就推出大數據專刊,計算社區聯盟也在同一年發表了報告《Big data computing; Creating revolutionary breakthroughs in commerce, science and society》,報告闡述了解決大數據問題所需的關鍵技術以及所面臨的挑戰。美國奧x政府於2012年3月在白宮網站發布了《大數據研究和發展倡議》,提出了通過收集、處理海量、復雜的數據信息,從而提升能力,加快科學和工程領域的創新步伐,轉變學習教育模式,強化美國本土的安全」。2011年1月,微軟公司同惠普公司合作開發了一系列能夠提升生產力,同時提高決策速度的設備。此外,歐盟委員會也提出駕駁大數據浪潮的戰略思路,日本發布的《面向 2020 的 ICT綜合戰略》也提出需要構造大量豐富的數據基礎。
近年來,我國也積極開展對大數據的研究。2011年10月,工信部確認京滬深杭等 5 城市為「雲計算中心」試點城市。2012年6月,中國計算機學會青年計算機科技論壇也舉辦了「大數據時代,智謀未來」學術報告研討會。大數據及其科學研究方法涉及應用領域很廣,並將與國計民生密切相關的科學決策、金融工程以及知識經濟領域緊緊接合。
二、大數據的特點
目前,企業界和學術界都一致認為,大數據具有4個「V」特徵,即:容量(Volume)、種類(Variety)、速度(Velocity)和至關重要的`價值(Value)。
(1) 容量(Volume)巨大。海量的數據集從TB 級別提升到PB 級別。
(2) 種類(Variety)繁多。大數據數據源有多種,數據格式和種類不同於以前所規定的結構化數據范疇。
(3)價值(Value)密度低。如視頻的例子,在不間斷連續監控的過程中,可能有意義的數據僅有一兩秒。
(4)速度(Velocity)快。包含大量實時、在線數據處理分析的需求1秒鍾定律。
三、大數據應用的領域
大數據產業的發展將推動全球經濟由粗放型向集約型轉變,這將對提升企業整體競爭力和政府監管能力具有意義深遠的影響。
商業作為大數據的重要應用領域。沃爾瑪公司通過對消費者購物行為等一系列非結構化數據的分析,了解不同顧客的購物習慣,公司從所銷售的數據進行分析,從而選出適合在一起搭配出售的商品;淘寶也針對買家開設了大數據平台,為客戶量身打造了一整套完善的網購體驗產品。
大數據在金融業也起到了至關重要的作用。美國Equifax公司利用大數據技術,通過對其的資料庫中與財務有關的記錄海量信息進行索引處理和交叉分享,從而得到客戶的個人信用等級,以推斷出客戶的支付需求與能力。
隨著大數據在醫療與生命科學研究過程中的廣泛應用和不斷擴展。2010年,中國公布的《十二五規劃》指出:要重點建設國家級、省級和地市級三級醫療衛生信息平台,建設電子病歷和電子檔案兩個最為基礎的資料庫。各級醫院也將在醫療信息倉庫、數據中心等領域加大投入,醫療數據信息的存儲將愈加被關注,醫療信息中心的關注焦點也將由傳統的計算領域轉為存儲領域。
除此之外,大數據在製造業領域也有著廣闊的應用。製造業企業積累了廣泛的數據信息,在開展對業務數據進行技術管理的同時,企業需要通過大數據處理技術來幫助決策者從資料庫儲存的海量信息中找到有價值的信息,並且對其進行分析處理,從而增強決策的正確性、規避風險。
四、大數據所面臨的挑戰
大數據技術使人們能夠更好地利用之前不能使用的各個數據類型,找出被忽略的信息,促進企業組織更加高效、智能。但隨著對大數據研究的不斷深入,人們也更加意識到當大數據技術向人們敞開「方便之門」的同時,也帶來了眾多的挑戰:
(1)大數據需要更為專業化的管理技術人才。
(2) 大數據的合理利用需要解決容量大、類別多和時效性高的數據處理問題。
(3)大數據的利用對信息安全提出了更高要求。
(4)大數據的集成與管理問題。
這些挑戰已成為關繫到未來大數據發展的重要因素,同時也成為未來引領大數據發展的推動力。
五、結束語
大數據已經逐步滲透到人們工作生活的諸多領域中,對於大數據的研究也在不斷的深化。本文針對大數據的產生與發展、特徵、主要應用以及大數據所帶來的挑戰等方面進行闡述與分析。大數據的發展還處於初級階段,還有更為廣闊的空間需要人們不斷開拓,如何合理地利用大數據、更加高效地處理大數據來為人們服務仍需要廣大研究者不斷地研究和探索。
參考文獻:
[1]劉智慧,張泉靈.大數據技術研究綜述[J].浙江大學學報,2014,46(6):957- 972.
[2]嚴霄鳳,張德馨.大數據研究[J].計算機技術與發展,2013,23(4):168-172.
[3]劉俊.基於大數據流的Multi-Agent系統模型研究[J].計算機技術與發展, 2007,17(5):166-169.
『柒』 結合大數據時代的特點,談談數據時代社會治理遇到了哪些挑戰
社會治理大數據意識低。隨著大數據時代的到來,大數據分析為服務型社會治理模式的實現提供了重要支撐。然而,以大數據分析為重要支撐的服務型社會治理模式的實現,必須以社會治理大數據意識的形成為前提。從我國目前的情況來看,社會治理大數據意識仍然比較低,主要體現在以下三個方面:一是「重管理、輕服務」的管控思維在我國仍然大有市場,導致社會治理大數據意識的形成缺乏強有力的平台支撐。二是「重局部、輕全局」的部門利益導向導致我國社會治理體制的碎片化,從而使社會治理大數據意識的形成失去了重要的動力來源。三是「重政府、輕社會」的偏見導致包括企事業單位、社會組織、社區和公民個人在內的其他社會主體在社會治理中的參與性嚴重不足,從而使社會治理大數據意識的形成失去了廣泛的社會基礎。
社會治理大數據共享障礙多。目前,我國社會治理相關數據實現完全共享仍然面臨諸多障礙,主要體現在以下五個方面:一是缺乏數據共享的理念,對社會治理現代化的認識不足,不同部門的數據之間缺乏互聯互通,社會治理相關數據的綜合利用效益低下。二是缺乏數據共享機制的責任主體,從而導致許多政府部門因擔心犯下泄露國家機密的錯誤而寧可不作為。三是缺乏數據共享的法規和制度,無法可依或者法律法規之間相互沖突。四是目前我國尚未形成社會治理數據共享的統一標准和規范,尚未出台在全國具有普遍指導意義的與社會治理機制相關的頂層設計,因此社會治理大數據共享缺乏明確的操作規則和目標指向。五是缺乏合理的財政預算,導致政府部門在社會治理數據和信息資源再利用中收費機制不合理,利益分配不均衡。更有甚者,一些政府部門將其掌握的社會治理數據和信息資源產權部門化,設置利用壁壘,嚴重阻礙社會治理相關數據的共享。
社會治理大數據相關能力弱。在大數據時代,提升對社會治理大數據的分析能力以及對分析結果的應用能力,是實現社會治理創新的關鍵性因素。然而,目前我國社會治理大數據相關能力仍然比較弱,主要體現在以下三個方面:一是缺乏對社會治理大數據進行分析的能力,而這種分析能力又與相關人才的培養和支撐密切相關。目前,除了騰訊、網路、阿里巴巴等技術型互聯網公司掌握和應用大數據分析技術,並網羅一批大數據分析人才之外,我國對社會治理大數據的分析和應用仍然處於探索階段,相關人才十分缺乏。二是目前我國各社會治理主體嚴重缺乏根據社會治理大數據形成社會治理需求的意識和能力,而將這種社會治理需求轉化為有效社會治理和社會服務的能力就更加缺乏。三是長期以來我國各社會治理主體對社會治理特徵和發展趨勢的預測更多的是感性的判斷預測,或者是理論的邏輯推演預測,缺乏以對社會治理大數據的深度挖掘和系統分析為基礎的合理預測。
『捌』 大數據行業發展現狀與未來前景分析
近年來,全球正大步邁向大數據新時代,數據的高效存儲、處理和分析等需求也越來越旺盛。在此背景下,行業大數據得以高速發展,應用於各個領域,根據IDC發布的有關數據預測,2025年市場規模將達到19508億元的高點。
全球大數據儲量呈爆發式增長
隨著信息通信技術的發展,各行各業信息系統採集、處理和積累的數據量越來越多,全球大數據儲量呈爆炸式增長。根據國際數據公司(IDC)的監測數據顯示,2013年全球大數據儲量為4.3ZB(相當於47.24億個1TB容量的移動硬碟),2014年和2015年全球大數據儲量分別為6.6ZB和8.6ZB。近幾年全球大數據儲量的增速每年都保持在40%,2016年甚至達到了87.21%的增長率。2016年和2017年全球大數據儲量分別為16.1ZB和21.6ZB,2018年全球大數據儲量達到33.0ZB,2019年全球大數據儲量達到41ZB。
—— 以上數據及分析均來自於前瞻產業研究院《中國行業大數據市場發展前景預測與投資戰略規劃分析報告》。
『玖』 在互聯網+及大數據時代,組織及管理者面臨著哪些新的挑戰和機遇
大數據泛指巨量的數據集,因可從中挖掘出有價值的信息而受到重視。《華爾街日報》將大數據時代、智能化生產和無線網路革命稱為引領未來繁榮的三大技術變革。有報告指出數據是一種生產資料,大數據是下一個創新、競爭、生產力提高的前沿。世界經濟論壇的報告認定大數據為新財富,價值堪比石油。因此,發達國家紛紛將開發利用大數據作為奪取新一輪競爭制高點的重要抓手。
大數據時代的來臨
互聯網特別是移動互聯網的發展,加快了信息化向社會經濟各方面、大眾日常生活的滲透。有資料顯示,1998年全球網民平均每月使用流量是1MB(兆位元組),2000年是10MB,2003年是100MB,2008年是1GB(1GB等於1024MB),2014年將是10GB。全網流量累計達到1EB(即10億GB或1000PB)的時間在2001年是一年,在2004年是一個月,在2007年是一周,而2013年僅需一天,即一天產生的信息量可刻滿1.88億張DVD光碟。我國網民數居世界之首,每天產生的數據量也位於世界前列。淘寶網站每天有超過數千萬筆交易,單日數據產生量超過50TB(1TB等於1000GB),存儲量40PB(1PB等於1000TB)。網路公司目前數據總量接近1000PB,存儲網頁數量接近1萬億頁,每天大約要處理60億次搜索請求,幾十PB數據。一個8Mbps(兆比特每秒)的攝像頭一小時能產生3.6GB數據,一個城市若安裝幾十萬個交通和安防攝像頭,每月產生的數據量將達幾十PB。醫院也是數據產生集中的地方。現在,一個病人的CT影像數據量達幾十GB,而全國每年門診人數以數十億計,並且他們的信息需要長時間保存。總之,大數據存在於各行各業,一個大數據時代正在到來。
信息爆炸不自今日起,但近年來人們更加感受到大數據的來勢迅猛。一方面,網民數量不斷增加,另一方面,以物聯網和家電為代表的聯網設備數量增長更快。2007年全球有5億個設備聯網,人均0.1個;2013年全球將有500億個設備聯網,人均70個。隨著寬頻化的發展,人均網路接入帶寬和流量也迅速提升。全球新產生數據年增40%,即信息總量每兩年就可以翻番,這一趨勢還將持續。目前,單一數據集容量超過幾十TB甚至數PB已不罕見,其規模大到無法在容許的時間內用常規軟體工具對其內容進行抓取、管理和處理。
數據規模越大,處理的難度也越大,但對其進行挖掘可能得到的價值更大,這就是大數據熱的原因。首先,大數據反映輿情和民意。網民在網上產生的海量數據,記錄著他們的思想、行為乃至情感,這是信息時代現實社會與網路空間深度融合的產物,蘊含著豐富的內涵和很多規律性信息。根據中國互聯網路信息中心統計,2012年底我國網民數為5.64億,手機網民為4.2億,通過分析相關數據,可以了解大眾需求、訴求和意見。其次,企業和政府的信息系統每天源源不斷產生大量數據。根據一個公司的調研報告,全球企業的信息存儲總量已達2.2ZB(1ZB等於1000EB),年增67%。醫院、學校和銀行等也都會收集和存儲大量信息。政府可以部署感測器等感知單元,收集環境和社會管理所需的信息。2011年,英國《自然》雜志曾出版專刊指出,倘若能夠更有效地組織和使用大數據,人類將得到更多的機會發揮科學技術對社會發展的巨大推動作用。
大數據應用的領域
大數據技術可運用到各行各業。宏觀經濟方面,IBM日本公司建立經濟指標預測系統,從互聯網新聞中搜索影響製造業的480項經濟數據,計算采購經理人指數的預測值。印第安納大學利用谷歌公司提供的心情分析工具,從近千萬條網民留言中歸納出六種心情,進而對道瓊斯工業指數的變化進行預測,准確率達到87%。製造業方面,華爾街對沖基金依據購物網站的顧客評論,分析企業產品銷售狀況;一些企業利用大數據分析實現對采購和合理庫存量的管理,通過分析網上數據了解客戶需求、掌握市場動向。有資料顯示,全球零售商因盲目進貨導致的銷售損失每年達1000億美元,這方面的數據分析大有作為。
在農業領域,矽谷有個氣候公司,從美國氣象局等資料庫中獲得幾十年的天氣數據,將各地降雨、氣溫、土壤狀況與歷年農作物產量的相關度做成精密圖表,預測農場來年產量,向農戶出售個性化保險。在商業領域,沃爾瑪公司通過分析銷售數據,了解顧客購物習慣,得出適合搭配在一起出售的商品,還可從中細分顧客群體,提供個性化服務。在金融領域,華爾街「德溫特資本市場」公司分析3.4億微博賬戶留言,判斷民眾情緒,依據人們高興時買股票、焦慮時拋售股票的規律,決定公司股票的買入或賣出。阿里公司根據在淘寶網上中小企業的交易狀況篩選出財務健康和講究誠信的企業,對他們發放無需擔保的貸款。目前已放貸300多億元,壞賬率僅0.3%。
在醫療保健領域,「谷歌流感趨勢」項目依據網民搜索內容分析全球范圍內流感等病疫傳播狀況,與美國疾病控制和預防中心提供的報告對比,追蹤疾病的精確率達到97%。社交網路為許多慢性病患者提供臨床症狀交流和診治經驗分享平台,醫生藉此可獲得在醫院通常得不到的臨床效果統計數據。基於對人體基因的大數據分析,可以實現對症下葯的個性化治療。在社會安全管理領域,通過對手機數據的挖掘,可以分析實時動態的流動人口來源、出行,實時交通客流信息及擁堵情況。利用簡訊、微博、微信和搜索引擎,可以收集熱點事件,挖掘輿情,還可以追蹤造謠信息的源頭。美國麻省理工學院通過對十萬多人手機的通話、簡訊和空間位置等信息進行處理,提取人們行為的時空規律性,進行犯罪預測。在科學研究領域,基於密集數據分析的科學發現成為繼實驗科學、理論科學和計算科學之後的第四個範例,基於大數據分析的材料基因組學和合成生物學等正在興起。
報告推測,如果把大數據用於美國的醫療保健,一年產生潛在價值3000億美元,用於歐洲的公共管理可獲得年度潛在價值2500億歐元;服務提供商利用個人位置數據可獲得潛在的消費者年度盈餘6000億美元;利用大數據分析,零售商可增加運營利潤60%,製造業設備裝配成本會減少50%。
大數據技術的挑戰和啟示
目前,大數據技術的運用仍存在一些困難與挑戰,體現在大數據挖掘的四個環節中。首先在數據收集方面。要對來自網路包括物聯網和機構信息系統的數據附上時空標志,去偽存真,盡可能收集異源甚至是異構的數據,必要時還可與歷史數據對照,多角度驗證數據的全面性和可信性。其次是數據存儲。要達到低成本、低能耗、高可靠性目標,通常要用到冗餘配置、分布化和雲計算技術,在存儲時要按照一定規則對數據進行分類,通過過濾和去重,減少存儲量,同時加入便於日後檢索的標簽。第三是數據處理。有些行業的數據涉及上百個參數,其復雜性不僅體現在數據樣本本身,更體現在多源異構、多實體和多空間之間的交互動態性,難以用傳統的方法描述與度量,處理的復雜度很大,需要將高維圖像等多媒體數據降維後度量與處理,利用上下文關聯進行語義分析,從大量動態而且可能是模稜兩可的數據中綜合信息,並導出可理解的內容。第四是結果的可視化呈現,使結果更直觀以便於洞察。目前,盡管計算機智能化有了很大進步,但還只能針對小規模、有結構或類結構的數據進行分析,談不上深層次的數據挖掘,現有的數據挖掘演算法在不同行業中難以通用。
大數據技術的運用前景是十分光明的。當前,我國正處在全面建成小康社會征程中,工業化、信息化、城鎮化、農業現代化任務很重,建設下一代信息基礎設施,發展現代信息技術產業體系,健全信息安全保障體系,推進信息網路技術廣泛運用,是實現四化同步發展的保證。大數據分析對我們深刻領會世情和國情,把握規律,實現科學發展,做出科學決策具有重要意義,我們必須重新認識數據的重要價值。
為了開發大數據這一金礦,我們要做的工作還很多。首先,大數據分析需要有大數據的技術與產品支持。發達國家一些信息技術(IT)企業已提前發力,通過加大開發力度和兼並等多種手段,努力向成為大數據解決方案提供商轉型。國外一些企業打出免費承接大數據分析的招牌,既是為了練兵,也是為了獲取情報。過分依賴國外的大數據分析技術與平台,難以迴避信息泄密風險。有些日常生活信息看似無關緊要,其實從中也可摸到國家經濟和社會脈搏。因此,我們需要有自主可控的大數據技術與產品。美國政府2012年3月發布《大數據研究與發展倡議》,這是繼1993年宣布「信息高速公路」之後又一重大科技部署,聯邦政府和一些部委已安排資金用於大數據開發。我們與發達國家有不少差距,更需要國家政策支持。
中國人口居世界首位,將會成為產生數據量最多的國家,但我們對數據保存不夠重視,對存儲數據的利用率也不高。此外,我國一些部門和機構擁有大量數據卻不願與其他部門共享,導致信息不完整或重復投資。政府應通過體制機制改革打破數據割據與封鎖,應注重公開信息,應重視數據挖掘。美國聯邦政府建立統一數據開放門戶網站,為社會提供信息服務並鼓勵挖掘與利用。例如,提供各地天氣與航班延誤的關系,推動航空公司提升正點率。
大數據的挖掘與利用應當有法可依。去年底全國人大通過的加強網路信息保護的決定是一個好的開始,當前要盡快制定「信息公開法」以適應大數據時代的到來。現在很多機構和企業擁有大量客戶信息。應當既鼓勵面向群體、服務社會的數據挖掘,又要防止侵犯個體隱私;既提倡數據共享,又要防止數據被濫用。此外,還需要界定數據挖掘、利用的許可權和范圍。大數據系統本身的安全性也是值得特別關注的,要注意技術安全性和管理制度安全性並重,防止信息被損壞、篡改、泄露或被竊,保護公民和國家的信息安全。
大數據時代呼喚創新型人才。預測大數據將為全球帶來440萬個IT新崗位和上千萬個非IT崗位。預測美國到2018年需要深度數據分析人才44萬—49萬,缺口14萬—19萬人;需要既熟悉本單位需求又了解大數據技術與應用的管理者150萬,這方面的人才缺口更大。中國是人才大國,但能理解與應用大數據的創新人才更是稀缺資源。
大數據是新一代信息技術的集中反映,是一個應用驅動性很強的服務領域,是具有無窮潛力的新興產業領域;目前,其標准和產業格局尚未形成,這是我國實現跨越式發展的寶貴機會。我們要從戰略上重視大數據的開發利用,將它作為轉變經濟增長方式的有效抓手,但要注意科學規劃,切忌一哄而上。