【線上直播】Spark計算引擎深入剖析
分享講師:
講師簡介:
蘇寧大資料中心資料中臺指標平臺開發部技術負責人,歷任百度大資料部高階工程師、1號店搜尋與精準化部門架構師,一直從事大資料方向的研發工作,對大資料工具、機器學習有深刻的認知,在實時計算領域經驗豐富,對storm、spark streaming有深入瞭解。2013 年,基於公司實時處理平臺設計開發了 SQL on Stream解決方案。熱愛分享和技術傳播,目前關注方向為資料分析平臺建設,旨在打通資料建模到資料分析,基於druid、MPP等OLAP技術,提供一個平臺級別的資料指標服務,打造“資料即服務”的一站式解決方案。
分享內容:
面向有一定spark基礎,希望深入瞭解spark內部原理的受眾。本次分享將著重介紹spark內部原理,最後將結合spark引擎執行機制,講解一些相關的效能優化方法。
1. 核心概念
2. spark 引擎計算原理
3. spark shuffle剖析
4. spark效能調優
分享時間:2018年12月14日 20:00-21:30
報名連結:
(也可以識別圖中二維碼進行報名哈~)
相關推薦
【線上直播】Spark計算引擎深入剖析
分享講師: 講師簡介: 蘇寧大資料中心資料中臺指標平臺開發部技術負責人,歷任百度大資料部高階工程師、1號店搜尋與精準化部門架構師,一直從事大資料方向的研發工作,對大資料工具、機器學習有深刻的認知,在實時計算領域經驗豐富,對storm、spark streaming有深入瞭解。2013 年,基
【線上直播】spark streaming高階特性在ndcg計算實踐
【線上直播】spark streaming高階特性在ndcg計算實踐 ▼ 嘉賓:王富平 王富平 簡介 歷任百度大資料部高階工程師、1號店搜尋與精準化部門架構師,一直從事大資料方向的研發工作,對大資料工具、機器學習有深刻的認知,在實時計算領域經驗豐富,對stor
【線上直播】Spark對AI的支援及應用
講師:袁方 講師簡介: 目前就職於某大型知名智慧手機企業,對使用者畫像、推薦與廣告相關的大資料AI演算法方面有很深的研究。中山大學碩士畢業,曾在香港從事AI科研,主要研究方向為AI影象及音視訊處理。 分享內容: 1. 瞭解Spark基本架構
【線上直播】Spark Streaming架構及實踐
講師: 韓老師 講師簡介: 清華大學碩士畢業,擁有超過6年的大資料平臺研發經驗,目前就職於某知名電商大資料平臺團隊,負責異構資料交換及流式計算平臺的研發。熟悉hadoop及spark生態,對資料平臺整體技術架構及流式計算引擎有深入研究。 分享大綱: 流式計算應
【線上直播】Flink—新一代流式計算框架
分享講師:黃躍峰
【線上直播】巨量數據下的風控
數字 dba chat TP strip 人工 com for 數據分析師 嘉賓: 王頓 Wolfric 講師簡介: 極光數據部風控中心高級數據分析師、高級售前工程師。 王頓於美國史蒂文斯理工學院獲得碩士學位,本科畢業於上海財經大學,精通大數據技術
【線上直播】Chatbot應用簡介
type view card draft href image 搭建 box www. 嘉賓:孫晶 簡介: 獵聘大數據研究中心產品經理,主要產品方向為數據和AI類產品。 分享大綱: 1. 什麽是bot? 2. Bot的分類 3. FAQ機器人介紹 4. 多輪任務型
【線上直播】揭祕機器視覺中的深度學習
講師:曲曉峰 講師簡介: 曲曉峰,清華大學深圳研究生在站博士後。香港理工大學-電子計算學系-人體生物特徵識別研究中心哲學博士。碩士畢業於瀋陽工業大學-視覺檢測技術研究所(德州儀器TIDSP聯合實驗室)、檢測技術與自動化裝置專業。 研究方向:人體生物特徵識別、深度學習、機器視覺。從事影
【線上直播】流式處理新秀Flink原理與實踐
▼ FMI線上直播 分享主題:流式處理新秀Flink原理與實踐 內容大綱 隨著大資料技術的在各行各業的廣泛使用,要求能對海量資料進行實時處理的需求越來越多,同時資料處理的業務
【線上直播】人工智慧中的文字分類技術
講師:黃鴻波 講師簡介: 珠海金山辦公軟體有限公司(WPS)人工智慧領域專家,高階演算法工
【線上直播】轉型產品經理從何開始?
講師:楊三豐 講師簡介: 楊三豐,畢業於軍中北大的中國人民解放軍資訊工程大學,現任上海木木機器人技術有限公司產品總監。上海祥程資訊科技有限公司創始人CTO。曾開發和設計過的系統包括政府稅務、生活服務、社交、電商、金融、服務機器人等多個領域。獨立開發多個網站和App,曾
【線上直播】區塊鏈時代-360度認知未來科技核動力(二)
嘉賓:劉朋 劉朋簡介: - 諾基亞通訊成都研發中心研發經理,諾基亞成都研發中心ecosystem建設總監。10年+軟體行業開發、團隊教練和團隊管理經驗,在敏捷最佳實踐、軟體開發高效能團隊領域有豐富的理論和實戰經驗。 - 認證團隊教練,獲得ICF(Int
【線上直播】機器學習中的建模問題
2017,人工智慧喧囂的一年;2018,人工智慧落地的一年;2019-2022,人工智慧註定飛騰!作為IT人,如何乘著人工智慧的風潮,持續學習,本期講座將為你答疑解惑關於機器學習中的建模問題。 直播時間:2018年12月5日 19:40 報名連結:【線上直播】機器學習中的建模問題 講座嘉
【線上直播】決策樹與隨機森林
講師:段喜平 講師簡介: 研究生畢業於中山大學,曾就職於華為,百分點等公司,目前在魅族擔任NLP演算法工程師。 分享大綱: 1. 樹模型簡介 2. 常用決策樹演算法ID3, C4.5, CART,隨機森林等演算法介紹 3. 隨機森林程
【線上直播】谷歌雲上的機器學習/Machine Learning on GCP
分享講師:王順 講師簡介: 目前就職於谷歌,擔任雲客戶顧問,專長於雲端計算、大資料和機器學習,曾就職於曠視科技,其間在阿里淘咖啡專案中負責人臉識別系統開發和架構、參與了多個OCR、影象分類、缺陷檢測等計算機視覺專案落地工作。更早在Oracle做過系統工程師、AWS大資
【線上直播】《政務大資料治理》
分享講師:馬玉璽 講師簡介: 大資料業務專家。現任職深圳華傲資料高階專案負責人,高階技術經理,負責大資料專案管理及大資料業務架構。近8年大資料開發經驗,5年大資料專案管理經驗。對Spark、hadoop等有很深的研究以及豐富的實戰經驗。 分享大綱
【Java】Fel計算引擎學習
一、前言 最近的專案中,有一個這種需求,系統中配置很多的公式,每個公式中都會有因子。比如:本金*利息,計算的時候,把這兩個因子替換掉,如,100*0.01,然後通過java來計算出結果。
【轉載文章】拜占庭將軍問題深入探討
監聽 修改 最終 重寫 其中 聯系 默認 命題 不存在 原文地址:http://www.8btc.com/baizhantingjiangjun part1: 拜占庭將軍問題是什麽? 1.1 拜占庭將軍問題場景 1.2 與拜占庭將軍相關問題:兩軍問題 part
【問底】夏俊:深入站點服務端技術(一)——站點並發的問題
而是 思路 臨時 系統負載 表現 json article 不能 情況 摘要:本文來自擁有十年IT從業經驗、擅長站點架構設計、Web前端技術以及Java企業級開發的夏俊,此文也是《關於大型站點技術演進的思考》系列文章的最新出爐內容。首發於CSDN,各位技術人員不
【免費直播】3.12-3.15,8場公開課大“惠”聚——知識幹貨、專屬優惠,一晚搞定!
人工智能 網絡技術 軟考 數據庫 課程安排一覽: 3月12號晚20:00-21:30如何一次通過軟考【小任老師】(系統集成項目管理師/高級信息系統項目管理師) 3月13號晚20:00-21:00如何成為高端IT運維人才【韓立剛老師】 3月13號晚20:00-21:30【楊哥】權威解析紅帽