回到首頁
個人.家庭.數位化 - 數位之牆



產業動態 【資策會】網路爬蟲與Spark大數據流處理實務(9/15)
資策會 本新聞稿發佈於2018/07/15,由發布之企業承擔內容之立場與責任,與本站無關

本課程旨在教導學員能透過開源Library從網站、社群媒體、裝置獲取資訊,並能將非結構化資料轉換為結構化資料,交由Kafka訊息管理系統做統一管理,接著利用Spark Streaming進行大數據流的即時運算,並將結果予以應用。課程設計能使學員親身體驗資料串流的處理,並能從體驗中遭遇的問題,學習更多解決方案,加倍學習之效果。

 
■ 發布/輪播新聞稿 新聞稿直達14萬電子報訂戶刊登新聞稿:按此
 
 課程環境準備: 課程VM環境準備與設定
 資料流獲取
(1) 網頁爬蟲實戰技術
(2) 網頁結構化解析技術
(3) 社群媒體資料擷取技術:Facebook、Ptt、Mobile01等實作
(4) Socket 資料流獲取技術: 網路層基礎Socket Server實作
 Spark 技術回顧: Spark Batch處理技術
 Kafka與Spark Streaming技術實作
(1) Spark Streaming DStream 方法介紹與實作
(2) Kafka 訊息管理系統介紹與實作
(3) Spark Streaming資料流與Kafka介接技術
 綜合實戰練習
(1) 開源中文斷詞Library使用
(2) PTT八卦版即時關鍵字訊息流獲取系統實作
*課程執行單位保留調整課程內容、日程與講師之權利
【課程網址】http://www.iiiedu.org.tw/ites/NBS.htm
【相關課程】http://www.iiiedu.org.tw/ites/portal/MA.htm


- 新聞稿有效日期,至2018/08/15為止


聯絡人 :吳小姐
聯絡電話:(02)6631-6533
電子郵件:fionawu@iii.org.tw

上一篇:【資策會】Big Data之處理與分析進階班(9/15)
下一篇:【資策會】Python資料視覺化(9/15)



 
搜尋本站


最新科技評論

我在中國工作的日子(十四)阿里巴巴敢給股票 - 2023/07/02

我在中國工作的日子(十三)上億會員怎麼管理 - 2023/06/25

我在中國工作的日子(十二)最好的公司支付寶 - 2023/06/18

我在中國工作的日子(十一)兩個女人一個男人 - 2023/06/11

我在中國工作的日子(十)千團大戰影音帶貨 - 2023/06/04

我在中國工作的日子(九)電視購物轉型電商 - 2023/05/28

我在中國工作的日子(八)那些從台灣來的人 - 2023/05/21

我在中國工作的日子(七)嘉丰資本擦身而過 - 2023/05/14

我在中國工作的日子(六)跟阿福有關的人們 - 2023/05/07

■ 訂閱每日更新產業動態
RSS
RSS

當月產業動態

Information

 

 


個人.家庭.數位化 - 數位之牆

欲引用本站圖文,請先取得授權。本站保留一切權利 ©Copyright 2023, DigitalWall.COM. All Rights Reserved.
Question ? Please mail to service@digitalwall.com

歡迎與本站連結!