統計大數據是做什麼得

Ⅰ 大數據是做什麼的

目前大數據已經在營銷、金融 、工業、醫療、教育、交通、保險、執法、體育、政府、旅遊、物流等領域廣泛應用。
一句話 大數據就是管理和利用大量數據的。
分開來講就是數據如何產生、數據如何搬運、數據如何存儲、數據有效的整理起來方便使用、數據如何進行加工提高價值、數據怎麼使用，管理這整個生命周期。
數據的產生：就是數據的源頭，我們怎麼來生產數據。有業務上用的數據比如MySQL中的用戶表，有前端埋點(監控用戶的每個操作)，有程序輸出的日誌數據，有爬蟲爬來的數據。這么多數據的源頭，我們需要一個數據該怎麼產生數據。
數據接入：數據怎麼從這么多源頭搬運到數據中心進行統一處理。用什麼方法搬運，搭建個管道讓它一直進來，還是隔段時間搬運一次，這都是要考慮的。
數據存儲：大量數據如何存，才能不會丟，而且讀取快。
數據倉庫：數據怎麼進行有效的管理就是數據倉庫該考慮的事情了。
數據計算：大量的數據要進行加工，才能產生價值，那麼加工工具的效率就影響著你的效率。
數據應用：數據能用來做什麼。

Ⅱ 大數據具體是做什麼有哪些應用

大數據即海量的數據，一般至少要達到TB級別才能算得上大數據，相比於傳統的企業內數據，大數據的內容和結構要更加多樣化，數值、文本、視頻、語音、圖像、文檔、XML、HTML等都可以作為大數據的內容。

提到大數據，最常見的應用就是大數據分析，大數據分析的數據來源不僅是局限於企業內部的信息化系統，還包括各種外部系統、機器設備、感測器、資料庫的逗吵渣數據，如：政府、銀行、國計民生、行業產業、社交網站等數據，通過大數據分析技術及工具將海量數據進行統計匯總後，以圖形圖表的方式進行數據展現，實現數據的可視化，在此基礎上結合機器學習演算法，對數據進行深度挖掘，發掘數據的潛在價值。

應用部分，大數據不僅包括企業內部應用系統的數據分析，還包括與行業、產業的深度融合，大數據分析的應用場景具有行業性，不同行業所呈現碰肢的內容與分析維度各不相同，具體場景包括：互聯網行業、政府行業、金融行業、傳統企業中的地產、醫療、能源、製造、電信行業等等。

1.互聯網行業大數據的應用代表為電商、社交、網路檢索領域，可以根據銷售數據、客戶行為（活躍度、商品偏好、購買率等）數據、交易數據、商品收藏數據、售後數據等、搜索數據刻畫用戶畫像，根據客戶的喜好為其推薦對應的產品。

2.政府行業在大數據分析部分包括質檢部門、公安部門、氣象部門、醫療部門等，質檢部門包括對商品生產、加工、物流、貿易、消費全過程的信息進行採集、驗證、檢查，保證食品物品安全；氣象部門通過構建大氣運動規律評估模型、氣象變化關聯性分析等路徑，精準地預測氣象變化，尋找最佳的解決方案，規劃應急、救災工作。

3.金融行業的大數據分析多應用於銀行、證券、保險等細分領域，在大山悄數據分析方面結合多種渠道數據進行分析，客戶在社交媒體上的行為數據、在網站上消費的交易數據、客戶辦理業務的預留數據，結合客戶年齡、資產規模、消費偏好等對客戶群進行精準定位，分析其在金融業的需求等。

4.傳統行業包括：能源、電信、地產、零售、製造等。電信行業藉助大數據應用分析感測器數據異常情況，預測設備故障，提高用戶滿意度；能源行業利用大數據分析挖掘客戶行為特徵、消費規律，提高能源需求准確性；地產行業通過內外部數據的挖掘分析，使管理者掌握和了解房地產行業潛在的市場需求，掌握商情和動態，針對細分市場實施動態定價和差別定價等；製造行業通過大數據分析實現設備預測維護、優化生產流程、能源消耗管控、發現潛在問題並及時預警等。

伴隨著信息化的快速發展、數據量加大，已經進入數據時代，相信各行業間日後對於大數據的應用會更多、更深入。

Ⅲ 大數據是干什麼的啊，好學嗎

大數據是指無法在一定時間內用常規軟體工具對其內容進行抓取、管理和處理的數據集合。大數據技術，是指從各種各樣類型的數據中，快速獲得有價值信息的能力。適用於大數據的技術，包括大規模並行處理（MPP）資料庫，數據挖掘電網，分布式文件系統，分布式資料庫，雲計算平台，互聯網，和可擴展的存儲系統。

大數據必須藉由計算機對數據進行統計。在大數據時代，可通過實時監測、跟蹤研究對象在互聯網上產生的海量行為數據，進行挖掘分析，揭示出規律性的東西，提出研究結論和對策。

各行各業的決策正在從"業務驅動" 轉變"數據驅動"。對大數據的分析可以使 零售商 實時掌握市場動態並迅速做出應對；可以為商家制定更加精準有效的 營銷策略 提供決策支持；可以幫助 企業 為 消費者 提供更加及時和個性化的服務；在醫療領域，可提高診斷准確性和葯物有效性；在公共事業領域，大數據也開始發揮促進 經濟發展 、維護社會穩定等方面的重要作用。

大數據學習需要有java和scala基礎，你的統計學，邏輯思維，還有英語不太差的話，學習就不太艱難。

Ⅳ 大數據是干什麼的 有什麼用

關於復大數據，麥肯錫全球研究制所給出的定義是：

一種規模大到在獲取、存儲、管理、分析方面大大超出了傳統資料庫軟體工具能力范圍的數據集合，具有海量的數據規模、快速的數據流轉、多樣的數據類型和價值密度低四大特徵。

簡單理解為：

"大數據"是一個體量特別大，數據類別特別大的數據集，並且這樣的數據集無法用傳統資料庫工具對其內容進行抓取、管理和處理。

大數據的核心作用是數據價值化，簡單說就是大數據讓數據產生各種「價值」，這個數據價值化的過程就是大數據要做的主要事情。

Ⅳ 大數據到底是什麼行業啊，具體是干什麼的啊

大數據是眼下非常時髦的技術名詞，與此同時自然也催生出了一些與大數據處理相關的職業，通過對數據的挖掘分析來影響企業的商業決策。

在國內，大數據的應用才剛剛萌芽，人才市場還不那麼成熟，於是每家公司對大數據工作的要求不盡相同：有的強調資料庫編程、有的突出應用數學和統計學知識、有的則要求有咨詢公司或投行相關的經驗、有些是希望能找到懂得產品和市場的應用型人才。正因為如此，很多公司會針對自己的業務類型和團隊分工，給這群與大數據打交道的人一些新的頭銜和定義：數據挖掘工程師、大數據專家、數據研究員、用戶分析專家等都是經常在國內公司里出現的Title，我們將其統稱為「大數據工程師」。

一、大數據工程師做什麼？

用阿里巴巴集團研究員薛貴榮的話來說，大數據工程師就是一群「玩數據」的人，玩出數據的商業價值，讓數據變成生產力。大數據和傳統數據的最大區別在於，它是在線的、實時的，規模海量且形式不規整，無章法可循，因此「會玩」這些數據的人就很重要。

因此分析歷史、預測未來、優化選擇，這是大數據工程師在「玩數據」時最重要的三大任務。通過這三個工作方向，他們幫助企業做出更好的商業決策。

• 找出過去事件的特徵

  大數據工程師一個很重要的工作，就是通過分析數據來找出過去事件的特徵。

• 預測未來可能發生的事情

  通過引入關鍵因素，大數據工程師可以預測未來的消費趨勢。

• 找出最優化的結果

  根據不同企業的業務性質，大數據工程師可以通過數據分析來達到不同的目的。

二、需要具備的能力


• 數學及統計學相關的背景

• 計算機編碼能力

  實際開發能力和大規模的數據處理能力是作為大數據工程師的一些必備要素。

• 對特定應用領域或行業的知識

  在某個或多個垂直行業的經歷能為應聘者積累對行業的認知，對於之後成為大數據工程師有很大幫助，因此這也是應聘這個崗位時較有說服力的加分項。

Ⅵ 大數據是干什麼的！

1 寫 SQL （很多入職一兩年的大數據工程師主要的工作就是寫 SQL ）

2 為集群搭大數據環境（一般公司招大數據工程師環境都已經搭好了，公司內部會有現成的大數據平台，但我這邊會私下搞一套測試環境，畢竟公司內部的大數據系統許可權限制很多，嚴重影響開發效率）

3 維護大數據平台（這個應該是每個大數據工程師都做過的工作，或多或少會承擔「運維」的工作）

4 數據遷移（有部分公司需要把數據從傳統的資料庫 Oracle、MySQL 等數據遷移到大數據集群中，這個是比較繁瑣的工作，吃力不討好）

5 應用遷移（有部分公司需要把應用從傳統的資料庫 Oracle、MySQL 等資料庫的存儲過程程序或者SQL腳本遷移到大數據平台上，這個過程也是非常繁瑣的工作，無聊，高度重復且麻煩，吃力不討好）

6 數據採集（採集日誌數據、文件數據、介面數據，這個涉及到各種格式的轉換，一般用得比較多的是 Flume 和 Logstash）

7 數據處理
7.1 離線數據處理（這個一般就是寫寫 SQL 然後扔到 Hive 中跑，其實和第一點有點重復了）
7.2 實時數據處理（這個涉及到消息隊列，Kafka，Spark，Flink 這些，組件，一般就是 Flume 採集到數據發給 Kafka 然後 Spark 消費 Kafka 的數據進行處理）

8 數據可視化（這個我司是用 Spring Boot 連接後台數據與前端，前端用自己魔改的 echarts）

9 大數據平台開發（偏Java方向的，大概就是把開源的組件整合起來整成一個可用的大數據平台這樣，常見的是各種難用的 PaaS 平台）

10 數據中台開發（中台需要支持接入各種數據源，把各種數據源清洗轉換為可用的數據，然後再基於原始數據搭建起寬表層，一般為了節省開發成本和伺服器資源，都是基於寬表層查詢出業務數據）

11 搭建數據倉庫（這里的數據倉庫的搭建不是指 Hive ，Hive 是搭建數倉的工具，數倉搭建一般會分為三層 ODS、DW、DM 層，其中DW是最重要的，它又可以分為DWD,DWM,DWS，這個層級只是邏輯上的概念，類似於把表名按照層級區分開來的操作，分層的目的是防止開發數據應用的時候直接訪問底層數據，可以減少資源，注意，減少資源開銷是減少 內存 和 CPU 的開銷，分層後磁碟佔用會大大增加，磁碟不值錢所以沒什麼關系，分層可以使數據表的邏輯更加清晰，方便進一步的開發操作，如果分層沒有做好會導致邏輯混亂，新來的員工難以接手業務，提高公司的運營成本，還有這個建數倉也分為建離線和實時的）

總之就是離不開寫 SQL ...

Ⅶ 大數據是幹嘛的

大數據一種在獲取、存儲、管理、分析等方面大大超出了傳統資料庫軟體工具能力范圍的數據集合。大數據主要是用於對數據進行收集、存儲、分析和應用