Technical

RE: 從零開始的 Data Pipeline—序章

2018-08-13 · 1 min read · Programming Data Engineering Data

對於許多軟體服務來說，Log 是一種埋藏的金礦，甚至對於廣告平台來說更是直接關係到營收多寡的東西，因此如何建立穩定可靠的 Data Pipeline 就成為一件非常重要的事情，本文將介紹如何從零開始建構整個流程。

簡易趨勢性分析報表－使用平均數與標準差

2018-08-11 · 1 min read · Programming Data Engineering Data

在監控整體服務營運成效時，一直有個疑問是「單從純量的圖形來看時，我實在看不出每天有什麼不一樣」以及「當不同事件相差數十倍時，我沒辦法在同一張表看出兩者各自的變化，更無法看出彼此間是否有什麼關聯」。想了許久以後我那連入門都算不上的統計知識突然派上用場了，使用了最簡單的平均數與標準差。

能被電腦理解的文字 NLP（一） — Word Embedding

2018-06-27 · 1 min read · Programming Machine Learning Data

我們總是希望有個管家機器人，只要跟他說句話就能幫忙處理大小事，例如做早餐、泡咖啡、傳送訊息，甚至是組裝鋼鐵鎧甲。在語音助手這一方面 Siri、Google Assistant、Amazon Alexa，都在逐步實現我們的夢想。而在文字處理方面也有了許多的改變，這篇將介紹將文字編碼的方式。

Windows 上 tensorflow-gpu 出現 CUDNN_STATUS_BAD_PARAM 的解法

2017-09-19 · 1 min read · Programming Python Machine Learning

當我在 Windows + Tensorflow-gpu 環境下執行程式時，一直出現 CUDNN_STATUS_BAD_PARAM，以下是我的解法。

再戰 Line Bot SDK －接收訊息與回應

2017-09-14 · 2 min read · Programming Python

在上一篇文章中，嘗試了使用 Line Bot SDK 進行主動推送訊息，這次要嘗試另一種關鍵的用法—接收與回應訊息。

兩天搞懂的簡單 CI（一）－Unit Test

2017-06-13 · 2 min read · Programming PHP Unit Test

我之前一直想在公司的專案加上自動化測試，但是從建置環境開始就遭遇困難、加上團隊的成員及主管間沒有共識，最後是當時有時程上的壓力在，因此最後只在我自己的專案中加入了簡單的單元測試，確保在出問題時可以較快速的找出問題所在。所以首先我要感謝海總理《克服人心的障礙跨越自動化測試的門檻》這個 Talk 的投影片，讓我下定決心要建立 CI 的流程。

SQL — UPDATE 與 JOIN

2017-05-19 · 1 min read · Programming SQL

事情的緣由是公司程式出 bug，造成某兩個 table 中應該要相同的某個欄位有了差異，因此想用一條 SQL 就解決這問題。

為什麼深度學習模型準確率不會提昇？

2017-04-21 · 2 min read · Machine Learning Data

去年(2016)五月看到了一場由資料科學年會舉辦李宏毅老師主講的「一日搞懂深度學習」課程的投影片後，我就試著照上面的步驟透過 Keras 建構了我第一個深度學習模型。起初使用了 Sigmoid 作為激勵函數後獲得了 94% 左右的成果，但是當我改用理論上比較好 ReLU 後，卻發現為什麼訓練出來的準確率 (accuracy) 都不會增加？

多維度資料視覺化呈現的好夥伴－主成份分析法(PCA)

2017-02-13 · 1 min read · Data Programming Python

主成份分析法(Principal components analysis, PCA) 是一種統計分析的方法，用於將多維度的資料集簡化為較低維度的資料。本文使用 Python, SciKit Learn 將四維度的資料簡化為較易視覺化的二維度資料。

初次嘗試 Line Bot sdk — 爬蟲與推送訊息

2017-02-04 · 1 min read · Programming Python

最近恰巧發現了一款 PS4 遊戲《地平線：期待黎明》(Horizon : Zero Dawn)，看了故事預告以及放出來的 Gameplay 以後，就深深地被吸引到了。因為我還沒有 PS4，且比較想入手的 PS4 Pro 又嚴重缺貨，除了 PTT Gamesale 板偶爾有一些人賣之外，其他地方都沒有看到，但由於 GS 板的都會在極短的時間內被掃掉，因此想做個 LineBot 提醒自己。