資料工程
7 篇文章
JW

資料倉儲是什麼、為什麼、做什麼?

擔任資料工程師的經驗與學習心得,其中分享我對於資料工程與資料倉儲的理解。

标签活跃作者
  • leafwind
    leafwind

    在日軟體工程師|不務正業|碎念個人意見|聯絡我:https://linktr.ee/leafwind

leafwind

從五個切入點看數據中台的必要性

在上一篇《我的資料工程轉捩點,與數據中台》講完個人經驗之後,我想來拆解數據中台的本質,我在第一次看到這個名詞之後,嘗試搜尋了很多資料,但都只得到模糊的抽象,完全無法理解它葫蘆裡賣的是什麼藥。直到最近又認真做了一次功課,加上數據中台也逐漸沒有那麼地神祕,才從中國的論壇找到我想要的「...

leafwind

我的資料工程轉捩點,與數據中台

2018 年,阿里巴巴對社會輸出「數據中台」這個價值體系,聲稱這樣的技術架構可以解決業務與開發效率的不對稱性、落實「數據為本」、極大化企業資料價值。到了 2020,流行的可能是「拆中台」,將數據中台切割成一堆不同的中台:數據中台、業務中台、技術中台、AI 中台、搜尋中台、知識中台...

leafwind

資料森友會小普查:雇用錯置嚴重嗎?

前情提要由於資料科學/工程/分析領域在台灣還算是相對新的領域,而且發展也不像國外那麼完整,所以我之前創了一個 資料森友會 TG 群組,對象包含:剛畢業想加入這個領域的新鮮人考慮轉職到這個領域的職場人士有相關經驗(資料科學家/工程師/分析師)的職場人士想知道業界資料科學/工程在做什...

leafwind

為什麼川普不希望收購 TikTok

TikTok 同意將資料交給微軟保護,接收則不限於微軟美國總統川普7月31日宣布,將禁止中國社交影音平台 TikTok 在美國營運,之後馬上就有消息傳出微軟正在與 TikTok 洽談收購條件,而川普當時並不是那麼願意收購,而是傾向封殺。今天最新發展則是字節跳動提出了新提案:Und...

leafwind

為何資料工程人才難以培養?

示意圖:被巨量資料開發的隕石砸到這幾年我很常聽到快畢業的學生,或是剛踏入職場的新鮮人詢問,要如何培養資料工程的實務能力,像是:我很希望自己有更好的資料工程(ETL/data pipeline)實務能力,但是在校內根本不可能有這種機會或是聽到有人因為科學家的職缺並不多,而想要轉職成...

leafwind

為什麼資料科學「曾經」比資料工程流行?

以後都用動森當做封面圖好了分析與模型在多數人眼中,比工程更性感「清資料很無聊、研究模型很潮」這從學生與新鮮人的角度來說,在踏入業界以前有這樣的認知是很正常的事情,對於那些已經在業界、卻不在 AI 領域的人來說,或許也是類似的狀況。然而並非所有人的興趣都是 AI,即使先退一步假設是...

没有更多