大數據時代,如何理解“大數據”?

在花叢中打野


當前大數據技術體系已經趨於成熟,目前正處在落地應用的初期,相信未來大數據技術將有廣闊的發展空間,大數據相關領域也會釋放出大量的就業崗位。隨著產業互聯網的發展,大數據作為核心技術之一必然會為企業賦能做出重要的貢獻。

早期在談到大數據往往都是從大數據的四大特徵開始談起,比如數據量大、結構多樣性、速度快、價值密度低等等。隨著大數據的發展,大數據概念目前被賦予了更多的含義,一個以數據為核心的生態體系逐漸被建立了起來,其中包括數據的採集、整理、存儲、安全、分析、呈現和應用。

大數據不僅對於廣大的科技工作者來說具有重要的意義,非IT領域的職場人也應該對大數據有一個系統的認知,因為大數據未來將對整個傳統行業形成一定的影響。要想理解大數據,可以從以下幾個方面入手:

第一:大數據的來源。要想了解大數據,首先就要從數據的採集環節開始,也就是大數據是怎麼產生的。當前,大數據的採集渠道主要有三個,分別是物聯網、互聯網系統(Web系統、App等)和傳統信息系統(ERP等),其中物聯網是數據的主要來源,佔到了數據量的百分之九十。

第二:大數據的價值。瞭解大數據的價值是認知大數據技術體系的關鍵,而大數據的價值就是圍繞數據價值化展開的。當前,數據價值化主要以數據分析來完成,數據分析包括統計學分析方式和機器學習的分析方式。

第三:大數據的應用場景。大數據要想完成落地應用,一個核心在於要了解大數據的應用場景,大數據的應用場景非常廣泛,簡單的說,有數據的地方就有大數據的應用場景。大數據的應用通常以業務為基礎進行展開,通過大數據完成決策的制定是當前場景大數據分析的重要目的之一。

我從事互聯網行業多年,目前也在帶計算機專業的研究生,主要的研究方向集中在大數據和人工智能領域,我會陸續寫一些關於互聯網技術方面的文章,感興趣的朋友可以關注我,相信一定會有所收穫。

如果有互聯網方面的問題,或者考研方面的問題,都可以諮詢我,謝謝!


IT人劉俊明


目前我國國內的大數據技術體系已趨於成熟,目前有部分企業已經能開始盈利了。比如阿里大數據,目前是國內最大全球也是數一數二的大數據。


大數據 / 賦能商業 / 創造價值

全域數據資產,海量數據處理,秒級響應速度,統一的數據服務和應用產品。探索、發揮大數據的價值,以開放、分享的心態賦能阿里外部千萬用戶和內部業務,帶領行業發展!數據,是阿里巴巴集團的核心資產!數據已融入阿里的生態,正以最新的形式,最具創意的應用,迸發出強勁的生命力,為我們的生態系統注入全新動力!


目前的阿里數據不僅僅為站內商家提供,並且也有一定的外界輸出合作。下面來說一下他的發展歷程:


  • 2004 成立數據倉庫部門,搭建OLAP平臺在線分析處理業務數據,通過BIEE的報表分析工具提供業務數據、決策數據
  • 2007 搭建對內數據平臺,從DAC平臺到阿里數據平臺的不斷迭代升級,承載各業務線和行業的報表
  • 2009 淘寶rac集群,基於oracle產品構建的全球領先的RAC集群達到頂峰,成為國內每天處理量最大、最忙的數據倉庫
  • 2011 對外以生意參謀為載體,基於阿里巴巴集團數據公共層建設、數據產品整合契機推出統一的數據產品平臺——生意參謀,通過數據披露、分析、診斷、建議、優化、預測幫助商家推進數據化運營
  • 2012 Hadoop集群(2000節點)
  • 2013 ODPS(5000+節點),自主研發的ODPS已具備PB級別數據處理能力,為用戶在數據倉庫,數據分析、海量數據統計、數據挖掘、商業智能和模型訓練等領域提供解決方案,onedata體系建立:數據倉庫從無規範建設到建立統一數據公共層方法論onedata體系
  • 2014 基於onedata體系的集團電商數據公共層/服務體系建設完成
  • 2016 集團中臺事業群成立,啟動全域數據建設;公共層onedata產品升級,全方位支持全域數據建設,並陸續啟動優土、阿里媽媽等全域數據建設

\n

{!-- PGC_VIDEO:{"thumb_height": 360, "thumb_url": "1d8be0003972026cb65d1\

那木說運營


目前階段大數據技術及體系已經逐漸趨於成熟,不再是以概念貫穿的模式,大數據越來越多的被使用,伴隨互聯網化的發展更多的企業信息化已經由IT時代轉變為DT時代,以數據為核心,用數據進行決策,基於數據驅動企業的創新與發展,相信在將來大數據也會有更廣泛的應用空間,對於大數據的理解主要分為以下幾個層面。

1.數據來源:對於大數據時代而言更多強調基於業務數據的沉澱,在一定規模的數據上進行進一步的分析、處理、轉換,更大的挖掘數據本身的價值,發揮數據的意義,當然就企業自身沉澱發展的數據而言很難達到“大”的定義,“大數據”目前更多依然是政府、行業、產業互聯等形式獲取數據,通過企業內部數據與行業數據的標杆對比實現適合企業自身的發展定位,促進企業自身的發展及業務模式的創新。

2.數據價值:通過產業數據、行業數據的獲取、匯聚、處理、分析、歸納,通過一系列技術實現海量數據的快速計算、呈現,將結構化、半結構化的數據進行有效存儲,對大量、動態、能持續的數據,通過運用新技術、新模型、新工具進行處理,從而獲得具有洞察力和新的價值。更為科學、直觀、準確的發揮數據價值,實現以數據為中心的大運營、大整合、大管控的模式支撐。

3.應用方式:目前就大環境而言,大數據更多應用於產業互聯、行業分析、政務服務等環節,同時也在不同層面的進入人民的生活中,比如根據個人的興趣愛好為其推送相關的文檔鏈接,物品模式等。大數據擁有廣泛的應用空間,結合大數據的應用進一步為企業、政府、人民生活提供更有針對性、有特色的服務。以數據為支撐作為企業戰略的決策的支撐,提高數據彙總的及時性,從而進一步的提升企業的核心競爭力。


數通暢聯


大數據之所以能變大就是因為在傳統的結構性數據(如Excel數據庫)之外,又增添了大量的半結構性和非結構性數據,例如文字、圖片、語音、視頻等,這些數據在互聯網時代已遠遠超過結構性數據的規模。

當下,大數據處理工具已基本完善,從數據的收集、記錄、清洗、提取轉化和載入(ETL)、解析、挖掘和檢測報告等全流程的工具都可以實現商業化應用,解決具體行業問題。例如 銀行和電信網絡產生的大量交易和分析數據,若能充分利用,將對企業的日常決策帶來效用的提升;特別是一些基於物聯網的大數據平臺,它們可以實時對數據進行收集和解析,這極大地提升了企業運營的透明度,對風險管理和業績改善提供了有力支持。

山東思脈特奇企業管理諮詢有限公司(SMCTS)認為上述的大數據倉庫和基本工具,為高端新興科技 如人工智能的發展奠定了基礎。例如深度學習功能的實現,機器人需要接受大量“數據知識”的培養,這樣一個機器新生兒才能迅速成長起來、甚至在某一領域超過人類智慧。

更多實用新型短文,請關注頭條號【SMCTS戰略管理和技術】







SMCTS戰略管理和技術


大數據可以說是如何收集和使用數據的一種思維方式的變革。大數據是相對於傳統的結構化數據而言的。在結構化數據佔統治地位的時代,往往是為了用信息化的手段解決某個特定的問題而去收集和處理所需要的數據,在數據收集過程中還可以一起收集到的很多數據,但因為沒有明確的使用價值而被裁剪、丟棄掉。大數據思維則是儘可能全面地收集原始的信息,哪怕是當前系統無法識別和處理的“無用”信息——如音頻、視頻、圖片等等,再審視自己手中所掌握的數據資源,利用各種技術手段,挖掘數據資源的價值。例如,公安部門的人口檔案系統裡存儲人像的照片,最初的用途只是給人看的,系統無法處理。然後有了人臉識別技術就可以通過一張照片找出一個人的檔案信息,再然後就是我們所熟知的利用安防監控在音樂會上抓逃犯,以及逐漸普及的手機上的各種具有刷臉功能的應用。
因此大數據不僅僅是數據形式的多樣化,也不僅僅是數據的數量大,而是數據收集與處理相分離的一種思想的變化。數據的收集都在追求全面,仔細想想,今天手機上的APP哪一個不是過度採集數據?一個新聞APP都恨自己不能採集你的心跳數據。

人民數據peopledata


觀點一:大數據一直存在,只是在信息時代被記錄下來,並被商業公司所利用

人類的生產生活中無時無刻不再產生數據:

  • 運動時你的心率、步頻

  • 逛商場時的停留時長、試穿的衣服型號

  • 吃飯時你點的菜單、口味

  • 旅遊時你住的酒店星級、商圈、逛過的景區;

  • 還有很多很多

以前這些數據很難記錄下來,或記錄下來的成本高。而隨著互聯網和3G、4G等無線基礎設施的發展,人類進入信息時代,今天很多人上下班路上都在看手機,沉浸在信息世界裡,你的上網軌跡都會被收集起來。再加上很多電子設備都有各種傳感器,位置信息、步數,都很容易被收集起來。即今天我們所說的大數據:今天我們的衣食住行,都離不開網絡。電商領域淘寶、京東;社交領域:騰訊;旅遊領域:攜程;美食領域:美團。而這些公司,擁有著該領域的大數據。


觀點二:大數據,使得信息交流更流暢

之前數據量不夠的時候,我們叫數據分析。而今天數據量太大,我們叫數據挖掘。背後有很多專業的數據科學家,通過算法分析,來想辦法利用這些數據。比如個性化推薦領域:頭條利用大數據給你信息;淘寶給你推薦商品;攜程給你推薦酒店;美團給你推薦美食。海量的數據,通過算法的運作,你會更容易找到自己喜歡的商品。大數據的存在,加上人工智能算法的發展,使得我們獲得信息的效率更高。


觀點三:大數據亦有弊端

信息時代,流量為王。而今天的AI時代,必定是數據為王。國內目前的法律犯規不完善,國內流氓APP橫行,很多隱私數據會被收集。商業公司追逐利潤,有些會利用大數據合法“殺熟”、甚至有些人會販賣數據。


總之:信息時代,大數據得以記錄下來。人工智能算法,使得大數據被充分挖掘,但是把雙刃劍:無論好人壞人,都可以用之。


平凡科技


靜心科技,打造靜心科研。

大數據時代,人們越發越期待,可是在期待的同時,人們是不是真的理解這個“大數據”。小編將從以下幾個方面展開對“大數據”的理解。

“大數據”體現在數據量之大。

大數據,顧名思義,就是數據量很大。工信部總工程師峰表示,全球大數據進入加速發展時期,數據總量每年增長50%。數據的發展也呈現出數據形式多樣,數據內容多元、數據規模多體的特點。現如今,我們社會不僅有科學採集數據、音視頻數據、瀏覽訪問數據以及媒體文字數據等,讓我們切身感受到了數據量之大。

“大數據”體現在數據深度之廣。

可是面對體量如此之大的數據,人們是該高興,還是該擔心如何分析數據可利用的價值呢,也就是如何在如此多的數據中,提取有用的價值。數據本身是沒有多少意義,關鍵是數據本身蘊含的內部規律和信息價值是有利於人類生產生活的。因此,“大數據”目前更多蘊含著從海量數據中發現有利價值,體現出數據深度之廣。



“大數據”體現在數據提取、存儲、保護之難。

大數據會催生我們技術的變革,比如數據提取的方式(深度學習),比如數據存儲(雲存儲),以及數據壓縮、數據安全等等。大數據帶來的新生事物,必將推動人類社會朝著更加便捷、舒適的方向發展。


靜心科技


我們可以先看一下數據的歷史,為何現在“大數據”如此火爆?

1、上古時代,那時候人們之間的交流還是基於“口口相傳”,頂多就是結繩計數;數據很少。

2、“倉頡造字”,文字開始進行記錄下來。但是主要記錄到牆上,青銅器上,錦書,竹子上等,記錄數據很花費體力和時間,因此並不是太多;

3、而造紙術和活字印刷術,第一次實現了數據的質的飛越。一年產生的數據可能是以前所有的數據。

4、隨著互聯網的出現,很多文字,圖片和視頻都被信息化,這時候引起了數據的第二次爆發。更重要的是這些數據可以進行處理,但是數據是中心化的。

5、隨著BBS,天涯,博客,微信,自媒體,抖音等新興事物的出現,人人都成為數據的生產者,並被記錄。這也引起了數據的第三次爆發。(人與人的鏈接)

6、隨著“萬物互聯”概念的提出,物聯網而興起,他們可以每時每刻進行數據產生,直接引起了數據的第四次大爆發。包括設備採集數據,跑步數據,心跳數據,天氣數據等等。(人與物,物與物)

可以說每天數據的產生量是以前的2倍。如此多的數據如何處理,這就引起了大數據技術概念。

大數據就是講這些海量的數據進行有結構的處理,並能從中得到有價值的信息,影響我們的決策。


極數蝸牛


我是從業市場調查和數據資訊的,就從這兩個方面來說幾句吧。

大數據時代,“數據,已經滲透到當今每一個行業和業務職能領域,成為重要的生產因素,當數據的處理技術發生翻天覆地的變化時,我們的思維也在變革。數據能夠讓市場調研結果更加具體化,更加精確,使之場景營銷變得更加精準。

活動營銷是現今較受商家青睞的廣告營銷模式,但在移動大數據時代,沒有量化的效果體現,活動營銷可能會成為一時的熱度,究竟結合怎樣的科技手段,才能讓廣告的效果清晰可見?而賽立信推出的Databox可以提供活動營銷效果評估,它可以打通線下蒐集與線上人群屬性數據,集成Data Box的數據庫,通過大數據庫,精準的描繪用戶畫像,把受眾的所有情況都通過數據來顯化出來,這便是大數據的一大魅力。


賽立信媒介研究


理解大數據,不如說成理解大數據的構成和大數據用途。

大數據是由一個個數據對象構成的,數據對象的內容,是可以在具體場景中實現經濟價值或其它管理價值。使數據對象之間的關係智能化,就是大數據發展的目標。智能化數據對象關係以後,數據對象就可以智能匹配到相關聯的場景需求中,從而可以解決數據或信息需求,實現數據改變世界的作用。

大數據的用途,本人認為大數據主要的用途是在公共服務領域,可能有的人會疑惑,商務消費的大數據不更重要嗎?商業的大數據,是必須建立在公共服務發展的一定程度上!如果國家是封建主義,為封建皇權服務,那所有的公共服務便談不上為人民服務!沒有公共服務依託和人民主動信任,人民的數據怎麼會持續準確的提交給大數據系統,也就是說數據準確性和實用性便基本等於無。


分享到:


相關文章: