初識大數據(一)什麼是大數據

此篇文章主要介紹什麼是大數據、大數據有什麼用、大數據學習很難嗎、大數據發展的趨勢等幾個觀點來闡述,如果你是大數據行業的小白,建議看一下,如果您是大神,請略過,本人文筆不是很好,如有描述不清楚的地方,歡迎大家留言批評指正,謝謝

一、什麼是大數據

相信有很多小白跟我剛入行的時候一樣,雖然對大數據一詞並不陌生,但是你說具體到什麼是大數據,則變得啞口無言,我在剛開始學習的時候也在想,什麼是大數據,大數據是什麼,很多人說的都是概念上的,但是我們夠不到,摸不著,心裡總是沒譜。

從日常生活來講,現在我們生活在信息社會,就好比我們玩的app,每操作一步都會在app後臺被記錄下來,這就是我們個人的活動痕跡數據,我們單單一個人的數據只能叫做數據,有可能這部分數據存儲佔比才幾MB,這樣的數據我們稱不了大數據,那麼大數據既然是大和數據,那麼肯定是這個數據量達到一定的量級才能被稱為大數據,那麼十個人的數據,能被稱為大嗎?不能...那一百個、一千個、一萬個、十萬個、百萬個那,數據量的存儲只會增長而不會減少(除非刪數據),有可能我們做一百個人的分析的時候,使用傳統的業務數據庫還能滿足業務需求,但是當我們的數量級達到百萬、千萬甚至億的級別的時候,傳統數據的效率已經遠遠不能滿足我們的需求了,這時候,就提出了大數據這個概念,大數據就是為了處理達到一定量級的數據,但是這個大數據不僅僅去做數據的計算,還有存儲,正是因為現在的存儲介質廉價後,大數據才興起,大數據是一整套的體系,並不是單指做的某個功能或者計算。例如,我們後臺編程寫出的程序是以用戶為主體做的服務,但是大數據更偏向與是以數據為主體去做的服務。

谷歌大數據的三大論文是為現代大數據行業奠定了基礎,三大論文分別是

Big Table

http://blog.bizcloudsoft.com/wp-content/uploads/Google-Bigtable%E4%B8%AD%E6%96%87%E7%89%88_1.0.pdf

File System

http://blog.bizcloudsoft.com/wp-content/uploads/Google-File-System%E4%B8%AD%E6%96%87%E7%89%88_1.0.pdf

Map Reduce

http://blog.bizcloudsoft.com/wp-content/uploads/Google-MapReduce%E4%B8%AD%E6%96%87%E7%89%88_1.0.pdf

以上都是中文鏈接,如有興趣的小夥伴可以閱讀下

從專業的角度來說大數據是什麼吶,大數據是集數據挖掘、數據集成、數據清洗、數據統計、數據分析、數據預測等一系列的統稱,如果你從事以上的任何一個職位,都算從事大數據行業。

二、學習大數據有什麼用

在當今信息化社會,尤其是2020年是5G的元年,5G的到來,代表著網速的提升,傳播速率的提升,也代表這會生產出更多的數據,而大數據以以依託數據為主的行業,數據的大量增長,勢必會創造出更多的大數據崗位。

在15年的時候國務院印發《促進大數據發展行動綱要》,這為我國大數據發展進行了頂層設計和統籌部署,說明大數據的發展進入新的時代,尤其近幾年,大數據人才飛速發展,但僅管如此,還是滿足不了行業缺口。

那麼學習大數據到地有什麼用那?

第一、學習大數據,你至少可以收穫到一個不錯的工作,拿到一份不錯的薪資


初識大數據(一)什麼是大數據


初識大數據(一)什麼是大數據


第二、你算是高新技術型人才,在某些城市的人才引進的政策裡,你都是可以獲取額外的積分或者享受優惠政策的(國外的也有,不推薦定居國外,我們大中華不好嗎)

第三、俗話說的好,人生在世怎麼不會一技之長那,擁有一技之長走遍天下都不怕,如果你性格比較內向,其實編程對你來說還是比較合適的

第四、如果你在這方面有天賦的話,那麼人生逆襲迎娶白富美,也不再話下,更多的是,工資可以改善你的生活,你可以多些時間思考自己的問題,追尋一下人生的意義,沒有必要再為饅頭而活著。

三、大數據學習很難嗎

這個只是相對而言,例如某些人在這方面真的特別有天賦,那麼他不僅學習很快,而且能舉一反三,那麼對於這類人,咱麼你只有羨慕嫉妒恨而已,

對於普通人來說,學習大數據的前提,還是得會一門編程語言比較好,不一定有多牛,但是能讀懂代碼就OK,推薦語言:Java、PayThon,一般會這兩門語言就可以了,你在學習的過程中有可能還要學到Scala,如果有其他語言基礎的話,不難。

大數據目前來說更多的是利用框架去做數據計算,所以一般初入行的人員,要求不高,而且大數據整體發展的也才十幾年而已,還處於上升時期,

整體來說,結合本人的親身經歷,大數據學習不是很難,關鍵是學習的思維的轉變,只要你能夠堅持,至少學個半年左右,出來找一份基礎的工作還是可以的。

四、大數據發展趨勢

目前來說,大數據還是處於一個發展上升時期,為什麼這麼說那

第一、存儲和數據,在今後的發展中,數據的存儲會越來越廉價化,而5G數據的到來,會產生更多的數據量,從這兩點來看,大數據發展的趨勢還處於上升時期。


初識大數據(一)什麼是大數據


第二、大量的數據為機器學習提供數據樣例,促進科技發展,機器學習需要大量的數據做樣本測試學習,而人工智能是未來社會科技發展的主題之一,而現在人工智能還處於發展初期,那麼至少未來10年內,大數據的職位不會被人工智能所替代,反而為了人工智能的發展需要大量大大數據提供服務。


初識大數據(一)什麼是大數據


五、總結

大數據算是一份新型技術型職業,我是轉行跳到這個行業裡面的,雖然學習路上有很多的艱辛,但是為了更好地生活,一切都是值得,這篇文章不是鼓勵大家必須學習大數據,而是結合自己切身實際,量力而行,這個還是有一定門檻的,走出去,多看看外面的世界,我們的夢想就是改變世界

謝謝大家,下一篇會給大家介紹一些行業內的大數據應用


分享到:


相關文章: