看板 Tech_Job
作者 visa9527 (高級伴讀士官長)
標題 Re: [討論] 大數據是在找什麼工作?
時間 Mon Nov 13 10:44:52 2017


大數據單位通常有三種缺

1.資料分析師
2.系統工程師
3.雜役

以常見應用的交通為例
悠遊卡的資料分析師會試圖從每天各鐵公路 Youbike 運輸的刷卡資料中
找出各個時段交通方向的熱點、人流、集散轉運點
然後提出報告跟建議,當政府要調整公車路線、Youbike設站點、規劃自行車道
甚至是否要蓋捷運時就會運用這些大數據整理出來的資料

系統工程師則負責建置平台儲存這些資料,若是離線的比較簡單
只需要按照系統分析師的需求,規劃 DB schema 然後輸入資料
在線的還要考慮資料進來的負載平衡

其他包括資料的備份、存取資料的效率改善、可靠度的改善
(一千筆資料漏掉一筆跟漏掉十筆那系統分析的結果就會有所差距)

雜役
我敢說在座的各位........都是樂勝  這個職缺
寫程式去撈每家提供的資料格式再轉成系統工程師規劃的格式輸入
寫程式輸出資料分析師要的數據項目整理後的內容甚至繪製圖表做報告
可能有四、五個雜役去負責寫從悠遊卡、一卡通、愛金卡、有錢卡撈來的資料
再有三、四個雜役去寫資料分析程師要撈的資料項目
比如公車轉捷運的、捷運轉公車的、火車轉捷運的、Youbike 轉捷運的 .....

這些大數據可以分析什麼呢?

比如三峽人只能搭公車轉捷運,平均交通時間花了一個小時才到目的地
但是樹林人可以搭火車轉公車或捷運,平均交通時間只花了40分鐘就到目的地
然後樹林人使用火車的比例相較公車轉捷運維持在一定的數字量
那麼三峽就比較需要先蓋三鶯線,樹林的捷運則可以暫緩

基隆使用國道客運轉捷運的比率遠高於使用火車,基隆人比樹林多但火車搭乘率低
火車在基隆的服務品質不及樹林,所以基隆要蓋基隆輕軌

不過通常這些數據都會迎合聖意去做出來就是了
因此跟政府有關的資料分析師的重點在於怎麼做出一份有說服力的報告
民間的才會是專業導向,像是為市場調查做出實際的數據分析
像是軟體產業非常仰賴大數據的回傳資料決定下一版的介面調整
什麼按鈕拿掉、什麼功能改到什麼位置都是使用者點擊習慣分析出來的
只要老闆不一意孤行 (某窗戶八代把開始弄不見....) 都是很有用的

--
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 60.248.95.191
※ 文章代碼(AID): #1Q2GSdor (Tech_Job)
※ 文章網址: https://www.ptt.cc/bbs/Tech_Job/M.1510541095.A.CB5.html
umax: 好文1F 11/13 11:35
marsonele: 幫樹林QQ2F 11/13 12:28
kiba226: 推3F 11/13 12:32
infernoking: 推4F 11/13 14:14
dasala: 好文5F 11/13 15:25
f224rita: 推6F 11/13 15:43
bartester: 專業7F 11/13 20:53
cuddlykitten: 樹林QQ8F 11/13 22:01
doubleperson: 好文推9F 11/14 08:13

--
作者 visa9527 的最新發文:
  • +16 [討論] 番茄有在崩盤嗎? - HatePolitics 板
    作者: 27.242.38.161 (台灣) 2019-01-12 21:30:57
    最近比較少看關鍵龍捲風類節目 但是這幾週上家樂福發現番茄單價不斷下調 一盒69、59、49、39、29…… 今天看到的是 36 買一送一 最近沒有聽林家新或文山伯等人談話 請問是否有提到現在崩盤蔬果? …
    26F 16推
  • +17 Re: [討論] 韓市長是不是不想管連任了? - HatePolitics 板
    作者: 122.146.88.200 (台灣) 2018-12-11 11:11:39
    什麼都在意,什麼人都想討好,什麼壞的都不想沾,什麼有爭議的都想避 最後的結果,就是變成執政兩年的蔡英文 韓跟柯雖然個性差很大,不過他們有一個共通點 就是認為對的事就不計較後果放手去幹 認為對的話 (9 …
    25F 17推
  • +30 [閒聊] 生活機能良好範圍的指標地圖 - home-sale 板
    作者: 122.146.88.200 (台灣) 2018-10-08 10:43:50
    首先要說: 生活機能好不等於生活品質好,所以下面別戰生活品質了 比起一些用行政區、道路來劃分生活機能的指標 我覺得 Uber Eat 服務範圍圖真的是完美的生活指標地圖 它具體陳述了一些客觀的事實 綜 …
    77F 30推
  • +45 Re: [新聞] 什麼是人口紅利? 專家:房市將掀人口風暴 - home-sale 板
    作者: 122.146.88.200 (台灣) 2018-04-19 12:12:05
    買台北、住台北從來就不是因為台北市行政首都,而是因為台北工商經貿最能滿足需求 台北不是首都後,對台北完全是利大於弊 台北的公家機關撤出,留下更多地皮可以開發再造,行政院跟立法院拆掉後西區馬上 空出兩塊 …
    117F 45推
  • +25 Re: [閒聊] 假如台灣房價叫貴那香港房價應該叫什麼? - home-sale 板
    作者: 122.146.88.200 (台灣) 2018-01-18 13:45:44
    香港跟大台北比有結構性與地理性的問題 香港是真正走斷水流大師兄的路線,只需要菁英,不需要垃圾 菁英在香港可以領很高的薪水,垃圾在香港活得比台北 22K 還痛苦 從製造業轉型走經濟金融中心後的香港確實成 …
    55F 25推
點此顯示更多發文記錄
(visa9527.): Re: [討論] 大數據是在找什麼工作? - FW板