大(dà)數(shù)據行(xíng)業(y₹ è)概況與發展特征（附報(bào)告目錄）

1、行(xíng)業(yè)概況

（1）大(dà)數(shù)據的(de)定義

大(dà)數(shù)據是(shì)一(yδ ī)個(gè)伴随社會(huì)信息化(huà)↔♥↑Ω而誕生(shēng)，以海(hǎi)量數(shù)據積累為(wèi)基 § ♣礎，囊括無數(shù)條“數(shù)據産生(s"×λhēng)-數(shù)據處理(lǐ)-信息提取-數(shù)據消費(✔Ω σfèi)-新數(shù)據生(shēng)産”的(de)環狀鏈，以降低(dī)↓♣ ☆信息不(bù)對(duì)稱、提高(gāo)決策有(∑✘✔×yǒu)效性、推進智慧和(hé)知(zhβ✔ī)識演進為(wèi)目标，可(kě)廣泛作(zuò)用(yòng)于幾↕§×★乎所有(yǒu)實體(tǐ)的(de)跨界σΩ生(shēng)态系統和(hé)發展趨勢。

相(xiàng)關報(bào)告：北京天•✘南星咨詢有限公司《2020-2025年(nián)全球及中國(guó)大(dà)數(shù)據全α™景調查與投資機(jī)會(huì)前瞻報(bào)告》

（2）大(dà)數(shù)據的(de)關鍵特征

從(cóng)上(shàng)述對(duì)大(dà)數(shù)據的(de)₹↑"£定義，提取出大(dà)數(shù)據的(de)四個(gè)關鍵特征，分(fēn ")别是(shì)：海(hǎi)量化(huà)（Vo l ume）、多(duō<•)樣化(huà)（Variety）、快(k"γ≤uài)速化(huà)（Velocity）和∏‍÷(hé)價值化(huà)（Value）。

1）海(hǎi)量化(huà)

大(dà)數(shù)據首先是(shì)數(shù)據量大(♠∞←dà)。全球數(shù)據量正以前所未有(yǒu)的(de)速度增長(ch‌β 'áng)，遍布世界各個(gè)角落的(de)傳感器λ✔(qì)、移動設備、在線交易和(hé)社交網絡每天都(dōu)要(yào♣₩)生(shēng)成上(shàng)百萬•✔α↑兆字節的(de)數(shù)據，數(shù)據容量增長ε¶₹(cháng)的(de)速度大(dà)大(dà)超過了(le)硬 >φ≠件(jiàn)技(jì)術(shù)的(d÷< e)發展速度，以至于引發了(le)數(shù)據存儲和(hé)處理(✔‌λlǐ)的(de)危機(jī)。

2）多(duō)樣化(huà)

大(dà)數(shù)據的(de)數(shù)據類×$'型非常多(duō)。海(hǎi)量數(shù)據的(€←de)危機(jī)并不(bù)單純是(shì)數 ₽¶™(shù)據量的(de)爆炸性增長(cháng)，它還¶<&(hái)牽涉到(dào)數(shù)據類型的(de)不(bù)斷增加。原來δ÷≈(lái)的(de)數(shù)據都(dōu)可(kě®γ&₽)以用(yòng)二維表結構存儲在數(shù)據庫中，如(rú)常用(yòγ≤→♠ng)的(de) Excel 軟件(jiàn)所處理★✔≈✔(lǐ)的(de)數(shù)據，稱之為(wèi)結構化(huà)數(sh ←>→ù)據。但(dàn)是(shì)現(xià§δn)在更多(duō)互聯網多(duō)媒體(tǐ)應用(yòng)Ωπ♥σ的(de)出現(xiàn)，使諸如(rú)圖片、聲音(yīn)和(h"←←é)視(shì)頻(pín)等非結構化(huà)數(shù)據占到(dà≥↕o)了(le)很(hěn)大(dà)比重。統計(jì)顯示，結構₽​€化(huà)數(shù)據增長(cháng)±≤率大(dà)概是(shì) 32%，而非結構化(huà)數(shù)據增長​δπ≈(cháng)則是(shì) 63%，目前全世界非結構化(huà​©&♣)數(shù)據已占數(shù)據總量的(de) 80%以上(sh♣≈™₽àng)。随著(zhe)非結構化(huà)數(shù)據的(de)比重越‍<↕α來(lái)越大(dà)，并顯示出其中蘊含著(zhe)不(bù)可(kě)小©↔<(xiǎo)觑的(de)商業(yè)價值和(hé)經濟社會(huì)價值∞€¥，對(duì)傳統的(de)數(shù)據分(fēn)析處理(lǐ)算(s∑♣uàn)法和(hé)軟件(jiàn)提出了(le)挑戰。

3）快(kuài)速化(huà)

随著(zhe)經濟全球化(huà)趨勢形成，生(shēng)産要(yào)素∞♥≥β成本不(bù)斷上(shàng)升，企業(yè)面臨的(de)競争環境越來(l×δ βái)越嚴酷。在此情況下(xià)，能(néng)夠 ✔<及時(shí)把握市(shì)場(chǎng)動态，迅速對(d₽₩♥↕uì)産業(yè)、市(shì)場(chǎng)、經濟、×→$消費(fèi)者需求等各方面情況做(zuò)出深入洞察，并能(néng)快(♠¶β​kuài)速制(zhì)定出合理(lǐ)準确的(de)生(shēng)産、運營÷β¶、營銷策略，就(jiù)成為(wèi)企業(yè₩ ‍)提高(gāo)競争力的(de)關鍵。而對(duì)大(dà)數 π©<(shù)據的(de)快(kuài)速處理(lǐ§‍¶♥)分(fēn)析，将為(wèi)企業(yè)實≈©時(shí)洞察市(shì)場(chǎngλγπ>)變化(huà)、迅速做(zuò)出響應、把握市(shì)場(chǎng)先機∑Ω(jī)提供決策支持。

4）價值化(huà)

價值是(shì)大(dà)數(shù)據的(de)終極意&&δ義所在。随著(zhe)社會(huì)信息化(huà)程度∞ σ 的(de)不(bù)斷提高(gāo)、數(shù)據存儲量的(de)不(b♠<×ù)斷增加、數(shù)據來(lái)源和( £ 'hé)數(shù)據類型的(de)不(bù)←÷÷∑斷多(duō)樣化(huà)，對(duì)于企業(yè)而言，數(shù)據  正成為(wèi)企業(yè)的(de)新型資産，形成競争力的(d∏≥​§e)重要(yào)基礎。與曾經廣為(wèi)提倡‍♣✔​的(de)“品牌價值化(huà)”一(yī)樣，“數(sh ✔<∞ù)據價值化(huà)”已經成為(wèi)企業(yè)提高(gāo)競争力的↔<'(de)下(xià)一(yī)個(gè)關鍵點。

（3）大(dà)數(shù)據相(xiàng)關技(jì)₩‍術(shù)

數(shù)據采集：ETL 工(gōng)具負責将&∏♦分(fēn)布的(de)、異構數(shù)據源中¥≠•的(de)數(shù)據如(rú)關系數(shù)據、平面數(shù)據文(w₽©​ én)件(jiàn)等抽取到(dào)臨時(shí)中間(jiān)層後進α 行(xíng)清洗、轉換、集成，最後加載到(dào)數(shù£​↓)據倉庫或數(shù)據集市(shì)中，成為(wèi)聯機(φ​"jī)分(fēn)析處理(lǐ)、數(shù)據挖掘的(de)基礎。

數(shù)據存取：關系數(shù)據庫、NOSQL、SQL 等。

基礎架構：雲存儲、分(fēn)布式文(wén)件(jiàn)存儲等。

數(shù)據處理(lǐ)：自(zì)然語言處理(lǐ)

統計(jì)分(fēn)析：假設檢驗、顯✔↕著性檢驗、差異分(fēn)析、相(xiàng)關分(fēn↕≤≥)析、T 檢驗、方差分(fēn)析、卡方分(fēn)析π ♠σ、偏相(xiàng)關分(fēn)析、距離(♦α'lí)分(fēn)析、回歸分(fēn)析、簡單回歸分(​γ☆±fēn)析、多(duō)元回歸分(fēn)析、逐步回歸、回歸預測©±• 與殘差分(fēn)析、嶺回歸、logistic 回歸分(fēn)析、曲線"♠€估計(jì)、因子(zǐ)分(fēn)析、聚類>≥'&分(fēn)析、主成分(fēn)分(fēn)析、因子(zǐ)分(fēn)析、快Ω$(kuài)速聚類法與聚類法、判别分(fēn)析、對(duì)應分®±(fēn)析、多(duō)元對(duì)Ω÷應分(fēn)析（最優尺度分(fēn)析）、boot™εstrap 技(jì)術(shù)等等。♠₽

數(shù)據挖掘：分(fēn)類 （Clβ♣assification）、估計(jì)（Estimation）、✔σ× 預測（Prediction）、相(xiàng)關性分(fēn)組或‍↕​關聯規則（Affinity grouping or as®♦sociation rules）、聚類（Clustering）、描述&• ♦和(hé)可(kě)視(shì)化(huà)✔ ₩δ、Description and Vis↔☆πualization）、複雜(zá)數(shù)據類型挖掘(T↓ε§‌ext, Web ,圖形圖像，視(shì)頻(pín)，音(yīn)頻(pín₹€•→)等)

模型預測：預測模型、機(jī)器(qì)學習(xí)、建模仿真。結♠< ±果呈現(xiàn)：可(kě)視(shì)≥♥化(huà)、BI 等。

（4）大(dà)數(shù)據技(jì)術(→>shù)的(de)價值

擁有(yǒu)海(hǎi)量數(shù)據本身(shēn)并不(→ε÷Ωbù)能(néng)創造出多(duō)大(dà ∏↕)價值，需要(yào)采取技(jì)術(π↓♣shù)手段進行(xíng)處理(lǐ)分(≤αfēn)析才能(néng)獲取其智能(néng)的(de)，深入的(de₹ )有(yǒu)價值的(de)信息。大(dà)數(shù)據技(jì)術(>★™↓shù)就(jiù)是(shì)從(cóng♠₹ε₩)各種各樣類型的(de)巨量數(shù)據中，快(kuài)速€φ≤÷獲得(de)有(yǒu)價值信息的(de)技(jì)術(shù)。解決大δ'↓(dà)數(shù)據問(wèn)題的(de)核心是(shì)大(d∑♦à)數(shù)據技(jì)術(shù)。目前所說(shuō)的(de)”大€←(dà)數(shù)據”不(bù)僅指數(shù)據本身(sh₩♣↕ēn)的(de)規模，也(yě)包括采集數(shù)據的(de)工(gō€∞ng)具、平台和(hé)數(shù)據分(fēn)析系統'♥。大(dà)數(shù)據研發目的(de₩‌)是(shì)發展大(dà)數(shù)據技(jì)術(shù)并将其 ¥ γ應用(yòng)到(dào)相(xiàng)關領域，通(t™$∏∑ōng)過解決巨量數(shù)據處理(lǐ)問(wèn)題促進其突←←破性發展。因此，大(dà)數(shù)據時(shí)代帶來(lái)的Ω¶(de)挑戰不(bù)僅體(tǐ)現(xiàn)在如(rú)何處理(lǐ)> §巨量數(shù)據從(cóng)中獲取有(yǒu)δ&價值的(de)信息，也(yě)體(tǐ)現(xiàn)在如(rú)'•α¶何加強大(dà)數(shù)據技(jì)術(shù)研發 ₩，搶占時(shí)代發展的(de)前沿。

2、行(xíng)業(yè)周期性、季節性與區(qū)域性特點

大(dà)數(shù)據行(xíng)業(yè)≈αε作(zuò)為(wèi)一(yī)個(gè)成長(cháng)性行(xín₽÷g)業(yè)，在發展過程中面臨著(zhe)多(₩ ₩™duō)個(gè)良好(hǎo)發展機(jī)遇，如(rú)互聯 ♣≥β網金(jīn)融對(duì)金(jīn)融行(xíng)業(yè)的←≈₹(de)滲透引發金(jīn)融機(jī)構新一(yī)輪的(de)市(shì) ÷場(chǎng)競争。随著(zhe)金(jīn)融機(jī)> ↕'構使用(yòng)數(shù)據挖掘來(lái)支撐精細化(££♥huà)管理(lǐ)和(hé)精細化(huà)營銷的÷Ω↕(de)理(lǐ)念深入，大(dà)數(shù)據需求将呈現(xiàn)出高<δ(gāo)速發展的(de)态勢。

總體(tǐ)上(shàng)，大(dà)‍ ÷數(shù)據行(xíng)業(yè)的(d ₹♠¶e)發展主要(yào)與下(xià)遊多(duō↕')個(gè)産業(yè)的(de) IT 投資規模保持α"®₽相(xiàng)關，并不(bù)存在明(míng)顯的(de)行(xíng∑£ )業(yè)周期性。

不(bù)同地(dì)區(qū)的(de)信息化(huà)程度和(hé×↔>±)對(duì)數(shù)據分(fēn)析、數(s¥δ<hù)據挖掘的(de)接受程度決定了(le)該地↓¥♥±(dì)區(qū)的(de)大(dà)數(shù)據的(de)市(shì≥ε)場(chǎng)需求，由于當前國(guó)家(jiā)各級政府的(d♠∏e)高(gāo)度關注和(hé)大(dà)力支持，各個(gè)地(dì)區(qε•Ωū)各個(gè)行(xíng)業(yè)對(duì)于大(dà)數( ™™₹shù)據的(de)關注度普遍較高(gāo)，因此大(dà)數(shù)據行™λ(xíng)業(yè)不(bù)存在明(míng)顯的(de)區(qβ←ū)域性。但(dàn)由于開(kāi)展大(dà)數(shù)據業(yè)務對©×'(duì)于行(xíng)業(yè)客戶本身(shēn)的(de)信息化(ε huà)基礎要(yào)求較高(gāo)。因此發達地(dì)區(q♥≈ū)還(hái)是(shì)一(yī)定程度上(shàng)"λ優于信息化(huà)基礎薄弱的(de)區(qū)域。

電(diàn)力、金(jīn)融、能(néng)源等" ♥行(xíng)業(yè)內(nèi)的(de)大(dà)中型企業(yè)♥>¶往往在年(nián)末相(xiàng)對(duì)集中支付合同款項λ∑"，大(dà)數(shù)據領域內(nèi)企業(yè)的(de)現(®✘ αxiàn)金(jīn)流量呈現(xiàn)出一(yī☆∏∑★)定的(de)季節性。然而，電(diàn)力、± '&金(jīn)融、能(néng)源等領域內(nèi ≥ε≤)客戶的(de)大(dà)數(shù)據系統需要©σ&®(yào)持續的(de)運營和(hé)升級，相(xiàng)應的(de)大(↓☆δ≤dà)數(shù)據業(yè)務本身(shēn)并不(bù)存在季節性特征。