1. 程式人生 > >大數據的本質

大數據的本質

編程 哪些 過濾 linu 來源 操作系統 操作 完整 時空

數據來源?

  購買(政府、阿裏巴巴、數據交易所)

  爬蟲

  數據采集(機器人、無人駕駛、人工智慧)

  獲得的是原始數據

什麽是數據清洗?

  按照需求分析,過濾出有效的完整的數據,放入數據倉庫

  etc 數據清洗轉換

有哪些應用?

  商品、 新聞推薦 信貸、個人信用 婚姻(珍愛網) 輿論檢測平臺 醫療(全民健康檔案) 交通(推薦路線,路況情況,) 氣象(彩雲天氣) 時空

  本質上是這些應用,都是去學習大數據模型,這就是所謂的機器學習

什麽是大數據模型?

   模型主要包括 業務 算法

   解決問題:使用數據幹什麽?

職位分為 大數據開發工程師 大數據算法 大數據科學家

機器學習的架構圖是什麽?

  文本數據 _接受數據_ >

大數據分析職業需要哪些技能?

  1. 一門語言基礎

  2. Linux

  3.

主要現在技術難點?

  1. 5G通信(數據傳輸機制)

  2. 物聯操作系統(大數據支撐平臺)

自由職業會成為將來趨勢?

  豬八戒網、項目大廳

網絡編程發展模式?

  c/s(遊戲)

  B/s

大數據的本質