逐漸忽略了數(shù)據(jù)質(zhì)量的關注度，數(shù)據(jù)模型設計角色逐漸被弱化）。用戶面對是數(shù)據(jù)源多樣化，比如日志、生產(chǎn)數(shù)據(jù)庫的數(shù)據(jù)、視頻、音頻等非結(jié)構化數(shù)據(jù)。原有ETL中部分數(shù)據(jù)轉(zhuǎn)換功能逐漸前置化，放到業(yè)務系統(tǒng)端進行（備注：部分原有在ETL階段需要數(shù)據(jù)標準化一些過程前置在業(yè)務系統(tǒng)數(shù)據(jù)產(chǎn)生階段進行，比如Log日志。移動互聯(lián)網(wǎng)的日志標準化?；ヂ?lián)網(wǎng)企業(yè)隨著數(shù)據(jù)更加逐漸被重視，分析師、數(shù)據(jù)開發(fā)在面對大量的數(shù)據(jù)需求、海量的臨時需求疲憊不堪，變成了資源的瓶頸，在當時的狀態(tài)傳統(tǒng)的各類的Report、Olap工具都無法滿足互聯(lián)網(wǎng)行業(yè)個性化的數(shù)據(jù)需求。開始考慮把需求固定化變?yōu)橐粋€面向終用戶自助式、半自助的產(chǎn)品來滿足快速獲取數(shù)據(jù)&分析的結(jié)果，當總結(jié)出的指標、分析方法（模型）、使用流程與工具有機的結(jié)合在一起時數(shù)據(jù)產(chǎn)品就誕生了（備注：當時為了設計一個數(shù)據(jù)產(chǎn)品曾經(jīng)閱讀了某個部門的2000多個臨時需求與相關SQL）。數(shù)據(jù)產(chǎn)品按照面向的功能與業(yè)務可以劃分為面向平臺級別的工具型產(chǎn)品、面向用戶端的業(yè)務級數(shù)據(jù)產(chǎn)品。按照用戶分類可以分為面向內(nèi)部用戶數(shù)據(jù)產(chǎn)品，面向外部用戶個人數(shù)據(jù)產(chǎn)品、商戶（企業(yè)）數(shù)據(jù)產(chǎn)品。數(shù)據(jù)是符號，是物理性的，信息是對數(shù)據(jù)進行加工處理之后所得到的并對決策產(chǎn)生影響的數(shù)據(jù)。溫江區(qū)商業(yè)街數(shù)據(jù)
比如日志、生產(chǎn)數(shù)據(jù)庫的數(shù)據(jù)、視頻、音頻等非結(jié)構化數(shù)據(jù)。從這用戶群體角度來說這非互聯(lián)網(wǎng)、互聯(lián)網(wǎng)的數(shù)據(jù)平臺用戶差異性是非常明顯，互聯(lián)網(wǎng)數(shù)據(jù)平臺中很多理論與名詞都是從傳統(tǒng)數(shù)據(jù)平臺傳遞過來的，本文將會分別闡述非互聯(lián)網(wǎng)、互聯(lián)網(wǎng)數(shù)據(jù)平臺區(qū)別。非互聯(lián)網(wǎng)時代自從數(shù)據(jù)倉庫發(fā)展起來到現(xiàn)在，基本上可以分為五個時代、四種架構約在1991年前的全企業(yè)集成1991年后的企業(yè)數(shù)據(jù)集成EDW時代1994年-1996年的數(shù)據(jù)集市1996-1997年左右的兩個架構吵架1998年-2001年左右的合并年代數(shù)據(jù)倉庫代架構（開發(fā)時間2001-2002年）海爾集團的一個BI項目，架構的ETL使用的是微軟的數(shù)據(jù)抽取加工工具DTS，老人使用過微軟的DTS知道有哪些弊端，后便給出了幾個DTS的截圖。功能：進銷存分析、閉環(huán)控制分析、工貿(mào)分析等硬件環(huán)境：業(yè)務系統(tǒng)數(shù)據(jù)庫：DB2forWindows,SQLSERVER2000,ORACLE8I數(shù)據(jù)庫服務器：4*EXON,2G,4*80GSCSIOLAP服務器：2*PIV1GHZ,2G,2*40GSCSI開發(fā)環(huán)境：VISUALBASIC,ASP,SQLSERVER2000這是上海通用汽車的一個數(shù)據(jù)平臺，別看復雜，嚴格意義上來講這是一套EDW的架構、在EDS數(shù)據(jù)倉庫中采用的是準三范式的建模方式去構建的、大約涉及到十幾種數(shù)據(jù)源，建模中按照某一條主線把數(shù)據(jù)都集成起來。溫江區(qū)商業(yè)街數(shù)據(jù)數(shù)據(jù)是關于事件之一組離散且客觀的事實描述，是構成消息和知識的原始材料。
數(shù)據(jù)采集是指通過RFID射頻數(shù)據(jù)、傳感器數(shù)據(jù)、社交網(wǎng)絡交互數(shù)據(jù)及移動互聯(lián)網(wǎng)數(shù)據(jù)等方式獲得的各種類型的結(jié)構化、半結(jié)構化（或稱之為弱結(jié)構化）及非結(jié)構化的海量數(shù)據(jù)，是大數(shù)據(jù)知識服務模型的根本。重點要突破分布式高速高可靠數(shù)據(jù)爬取或采集、高速數(shù)據(jù)全映像等大數(shù)據(jù)收集技術；突破高速數(shù)據(jù)解析、轉(zhuǎn)換與裝載等大數(shù)據(jù)整合技術；設計質(zhì)量評估模型，開發(fā)數(shù)據(jù)質(zhì)量技術。大數(shù)據(jù)技術能夠?qū)㈦[藏于海量數(shù)據(jù)中的信息和知識挖掘出來，為人類的社會經(jīng)濟活動提供依據(jù)，從而提高各個領域的運行效率，極大提高整個社會經(jīng)濟的集約化程度
大數(shù)據(jù)平臺該怎樣搭建呢？請看下面這幅圖，不管我之前在阿里還是在騰訊工作，還是到哪個企業(yè)工作，基本上我都是通過這幅圖進行一些簡單的適應企業(yè)的調(diào)整，就可以完全搬過來使用了。針對上面這幅圖，有幾點跟大家講解說明下：1）大數(shù)據(jù)平臺由三個平臺+一個服務組成：工具平臺，大數(shù)據(jù)倉庫基礎平臺、大數(shù)據(jù)門戶，其中，工具平臺又包含運維平臺和數(shù)據(jù)采集平臺，大數(shù)據(jù)門戶又包含大數(shù)據(jù)分析平臺和大數(shù)據(jù)產(chǎn)品應用平臺。2）講講每個平臺的作用。運維平臺主要負責整個大數(shù)據(jù)平臺的任務調(diào)度、任務監(jiān)控、元數(shù)據(jù)管理、權限管理等，分別由調(diào)度系統(tǒng)、任務監(jiān)控中心、元數(shù)據(jù)管理系統(tǒng)、權限管理系統(tǒng)等系統(tǒng)組成。大數(shù)據(jù)采集平臺主要負責把數(shù)據(jù)采集到大數(shù)據(jù)倉庫平臺中。企業(yè)的大數(shù)據(jù)來源從大的角度來說，主要是從三個方面獲取數(shù)據(jù)，業(yè)務系統(tǒng)、行為日志采集系統(tǒng)、外部數(shù)據(jù)來源。每一個方面來源又包含途徑，大家可以看上面的圖就了解。這里特別要強調(diào)的是外部數(shù)據(jù)來源，可以通過網(wǎng)絡爬蟲工具收集，通過和相應的合作方進行數(shù)據(jù)交換，通過從數(shù)據(jù)商那里采購過來，也有極少部分可以通過一些大公司的開放平臺接口獲取，比如阿里、騰訊等。大數(shù)據(jù)基礎平臺，在傳統(tǒng)的關系數(shù)據(jù)庫時代。一般而言，數(shù)據(jù)缺乏組織及分類，無法明確的表達事物的意義。
如今數(shù)據(jù)呈爆發(fā)式增長，已進入數(shù)據(jù)‘狂潮’時代，過去3年的數(shù)據(jù)量超過此前400年的數(shù)據(jù)總量。但是，高容量的數(shù)據(jù)要能夠具體應用在各個行業(yè)才能算是有價值。”國雙科技首席執(zhí)行官祁國晟認為，大數(shù)據(jù)具有高容量、多元化、持續(xù)性和高價值4個明顯特征。目前，各行各業(yè)的數(shù)據(jù)量正在迅速增長，使用傳統(tǒng)的數(shù)據(jù)庫工具已經(jīng)無法處理這些數(shù)據(jù)。在硬件發(fā)展有限的條件下，通過軟件技術的提升來處理不斷增長的數(shù)據(jù)量，對數(shù)據(jù)利用率的提升以及各行業(yè)的發(fā)展起著重要的推動作用。數(shù)據(jù)的表現(xiàn)形式還不能完全表達其內(nèi)容，需要經(jīng)過解釋，數(shù)據(jù)和關于數(shù)據(jù)的解釋是不可分的。新都區(qū)政商數(shù)據(jù)洞察
數(shù)據(jù)描述事物的符號記錄，是可定義為意義的實體，涉及事物的存在形式。溫江區(qū)商業(yè)街數(shù)據(jù)
也就是存在我們的數(shù)據(jù)庫表格中的數(shù)據(jù)。針對非結(jié)構化的數(shù)據(jù)，比如文本、語音、視頻、圖像等等，這是大數(shù)據(jù)要經(jīng)常面對的事情。，“價值密度低”，這個概念有點抽象，怎么去理解呢，大數(shù)據(jù)是一個海量的數(shù)據(jù)，在大海中撈針，這針就是我們的寶藏。但我們把這個針經(jīng)過一系列的分析處理確定是在某一平方米的水域，那么這個密度就會高很多了，在這一塊區(qū)域去撈針就容易獲得成功多了。以上，就是我對什么是大數(shù)據(jù)的通俗理解。第二部分：大數(shù)據(jù)平臺（注：本文根據(jù)小講“企業(yè)大數(shù)據(jù)戰(zhàn)略及價值變現(xiàn)”中的“大數(shù)據(jù)平臺”章節(jié)的分享整理而成）大數(shù)據(jù)有非常大的價值，不管是從幫助企業(yè)創(chuàng)造營收還是從提高效率、節(jié)省企業(yè)成本角度。大數(shù)據(jù)要是做好了，將會是一個企業(yè)增長的發(fā)動機，推動業(yè)務突飛猛進的發(fā)展。要實現(xiàn)大數(shù)據(jù)的價值，真正讓大數(shù)據(jù)為企業(yè)創(chuàng)造貢獻，首先必須要積累有大數(shù)據(jù)，把日常的業(yè)務和用戶行為數(shù)據(jù)收集起來。有些數(shù)據(jù)是可再生資源，但更多的數(shù)據(jù)是不可再生資源，這就需要我們搭建一個平臺負責數(shù)據(jù)的采集、規(guī)整、運算、存儲、應用、展現(xiàn)等，有了這樣一個大數(shù)據(jù)平臺，我們才能做好數(shù)據(jù)的積累，從小數(shù)據(jù)到大數(shù)據(jù)，數(shù)據(jù)是企業(yè)的資產(chǎn)，好的數(shù)據(jù)是企業(yè)的質(zhì)量資產(chǎn)。溫江區(qū)商業(yè)街數(shù)據(jù)
成都達智咨詢股份有限公司在同行業(yè)領域中，一直處在一個不斷銳意進取，不斷制造創(chuàng)新的市場高度，多年以來致力于發(fā)展富有創(chuàng)新價值理念的產(chǎn)品標準，在四川省等地區(qū)的商務服務中始終保持良好的商業(yè)口碑，成績讓我們喜悅，但不會讓我們止步，殘酷的市場磨煉了我們堅強不屈的意志，和諧溫馨的工作環(huán)境，富有營養(yǎng)的公司土壤滋養(yǎng)著我們不斷開拓創(chuàng)新，勇于進取的無限潛力，成都達智咨詢供應攜手大家一起走向共同輝煌的未來，回首過去，我們不會因為取得了一點點成績而沾沾自喜，相反的是面對競爭越來越激烈的市場氛圍，我們更要明確自己的不足，做好迎接新挑戰(zhàn)的準備，要不畏困難，激流勇進，以一個更嶄新的精神面貌迎接大家，共同走向輝煌回來！