資料工程師的日常
open-menu closeme
Home
Technical
Life
About
github linkedin rss
  • 論文選讀 — Detecting Spacecraft Anomalies Using LSTMs and Nonparametric Dynamic Thresholding

    calendar 2021-04-19 · 2 min read · Machine Learning Data Engineering Data Paper
    論文選讀 — Detecting Spacecraft Anomalies Using LSTMs and Nonparametric Dynamic Thresholding

    一般的異常偵測 (Anomaly Detection) 系統中,最基礎的就是用靜態閾值 (Static Threshold) 來作為判斷異常的基準,如記憶體使用率超過 85%、硬碟使用量超過 90% 等,但時常需要有經驗的人提供一個「看起來合理的範圍」。本篇是由 NASA 噴射推進實驗室所發表的 paper,示範了他們使用的動態閾值的方法 (Dynamic Threshold)。 如果用在產品中的話,應該可以在說明中加上一行告示「本系統包含 NASA 噴射推進實驗室之技術」


    Read More
  • 簡單易懂的現代推薦系統 Recommender Systems

    calendar 2020-06-29 · 1 min read · Machine Learning Data
    簡單易懂的現代推薦系統 Recommender Systems

    在這個資訊超載的年代,使用者有限的注意力也成為各種串流平台、網路廣告、電商等數位服務的兵家必爭之地。這篇文章將會概略的談論推薦系統常見的幾種方式。 本篇內容節錄自我在 DataCon.TW 2019 的分享《推薦系統:從 Data Pipeline 到 Machine Learning》


    Read More
  • 論文選讀 — Real-Time Personalization using Embeddings for Search Ranking at Airbnb

    calendar 2018-09-03 · 3 min read · Programming Machine Learning Paper Data
    論文選讀 — Real-Time Personalization using Embeddings for Search Ranking at Airbnb

    這是我第一次嘗試的系列,因為我工作上也是做推薦系統相關,讀到這篇覺得有很多地方的想法很有趣與實用,因此嘗試寫一篇來介紹。 這篇是 Airbnb 八月底在 KDD 2018 發表熱騰騰的 paper,他們試圖建立使用者與房間的 embedding,以此作為搜尋排序的基準。


    Read More
  • 能被電腦理解的文字 NLP(一) — Word Embedding

    calendar 2018-06-27 · 1 min read · Programming Machine Learning Data
    能被電腦理解的文字 NLP(一) — Word Embedding

    我們總是希望有個管家機器人,只要跟他說句話就能幫忙處理大小事,例如做早餐、泡咖啡、傳送訊息,甚至是組裝鋼鐵鎧甲。在語音助手這一方面 Siri、Google Assistant、Amazon Alexa,都在逐步實現我們的夢想。 而在文字處理方面也有了許多的改變,這篇將介紹將文字編碼的方式。


    Read More
  • Windows 上 tensorflow-gpu 出現 CUDNN_STATUS_BAD_PARAM 的解法

    calendar 2017-09-19 · 1 min read · Programming Python Machine Learning
    Windows 上 tensorflow-gpu 出現 CUDNN_STATUS_BAD_PARAM 的解法

    當我在 Windows + Tensorflow-gpu 環境下執行程式時,一直出現 CUDNN_STATUS_BAD_PARAM,以下是我的解法。


    Read More
  • 為什麼深度學習模型準確率不會提昇?

    calendar 2017-04-21 · 2 min read · Machine Learning Data
    為什麼深度學習模型準確率不會提昇?

    去年(2016)五月看到了一場由資料科學年會舉辦李宏毅老師主講的「一日搞懂深度學習」課程的投影片後,我就試著照上面的步驟透過 Keras 建構了我第一個深度學習模型。起初使用了 Sigmoid 作為激勵函數後獲得了 94% 左右的成果,但是當我改用理論上比較好 ReLU 後,卻發現為什麼訓練出來的準確率 (accuracy) 都不會增加?


    Read More

Luke Hong

Software engineer in data with 4 cats.
Read More

Featured Posts

  • 台灣資料工程師職場觀察 (2024)——資料領域的改變與困境
  • 論文選讀 — Detecting Spacecraft Anomalies Using LSTMs and Nonparametric Dynamic Thresholding
  • 簡單易懂的現代推薦系統 Recommender Systems
  • 這張發票透露了你的什麼訊息?
  • 論文選讀 — Real-Time Personalization using Embeddings for Search Ranking at Airbnb

Recent Posts

  • Adobe LightRoom 的替代選項
  • 我三十歲的時候(中)——生存回報
  • 我三十歲的時候(上)——毀滅與重生?
  • 夢境 – 執政官
  • 我的 2021 回顧
  • 台灣資料工程師職場觀察與回顧 (2021)
  • 我與焦慮症共構的生活近況
  • 拋棄混亂無章的工作排程-使用 Airflow 管理
  • 篩選資料用的 SQL Join : Left Semi, Left Anti
  • 關於射箭這運動(四) – 如何選購複合弓

Categories

TECHNICAL 20 LIFE 13

Series

ABOUT-ARCHERY 4 DATA-PIPELINE-FROM-SCRATCH 2 LINE-BOT-SDK 2

Tags

DATA 13 PROGRAMMING 13 HOBBY 8 DATA ENGINEERING 7 MACHINE LEARNING 6 ARCHERY 4 PYTHON 4 PHOTOGRAPHY 3 YEAR REVIEW 3 CAREER 2
All Tags
ARCHERY4 CAREER2 DATA13 DATA ENGINEERING7 DEPRESSION1 DREAM1 HOBBY8 MACHINE LEARNING6 PAPER2 PHOTOGRAPHY3 PHP1 PRIVACY1 PROGRAMMING13 PYTHON4 SCUBA DIVING1 SQL2 TRAVEL2 UNIT TEST1 YEAR REVIEW3
[A~Z][0~9]
資料工程師的日常

Copyright 2017-  資料工程師的日常. All Rights Reserved

to-top