LightGBM explained系列——Gradient-based One-Side Sampling（GOSS）是什麼？

之前有介紹

LightGBM, Light Gradient Boosting Machine

演算法如何使用，那天我突然覺得會使用machine learning的package固然很厲害，但有些時候還是要有一個尋根的心態，所以想帶給大家一個新的系列：
Lightgbm explained系列

如果想更了解LightGBM，可以看我的LightGBM explained系列文：

• LightGBM + GridSearchCV 調整參數（調參）feat. Categorical Data處理
• LightGBM explained系列——Histogram-based algorithm是什麼？
• LightGBM explained系列——Exclusive Feature Bundling（EFB）是什麼？
• LightGBM explained系列——Gradient-based One-Side Sampling（GOSS）是什麼？

這次是介紹一下，lgb在減少計算成本所用的抽樣演算法 "Gradient-based One-Side Sampling（GOSS）"
中文名稱翻作"梯度單邊抽樣"

LightGBM explained系列——Exclusive Feature Bundling（EFB）是什麼？

之前有介紹

LightGBM, Light Gradient Boosting Machine

演算法如何使用，那天我突然覺得會使用machine learning的package固然很厲害，但有些時候還是要有一個尋根的心態，所以想帶給大家一個新的系列：
Lightgbm explained系列


如果想更了解LightGBM，可以看我的LightGBM explained系列文：

• LightGBM + GridSearchCV 調整參數（調參）feat. Categorical Data處理
• LightGBM explained系列——Histogram-based algorithm是什麼？
• LightGBM explained系列——Exclusive Feature Bundling（EFB）是什麼？
• LightGBM explained系列——Gradient-based One-Side Sampling（GOSS）是什麼？

這次是介紹一下，LightGBM用來降維的演算法 "Exclusive Feature Bundling"
中文名稱翻作"獨立特徵合併"

LightGBM explained系列——Histogram-based algorithm是什麼？

之前有介紹

LightGBM, Light Gradient Boosting Machine

演算法如何使用，那天我突然覺得會使用machine learning的package固然很厲害，但有些時候還是要有一個尋根的心態，所以想帶給大家一個新的系列：
Lightgbm explained系列

如果想更了解LightGBM，可以看我的LightGBM explained系列文：

• LightGBM + GridSearchCV 調整參數（調參）feat. Categorical Data處理
• LightGBM explained系列——Histogram-based algorithm是什麼？
• LightGBM explained系列——Exclusive Feature Bundling（EFB）是什麼？
• LightGBM explained系列——Gradient-based One-Side Sampling（GOSS）是什麼？

這次是介紹一下，LightGBM在決定best split point所用的演算法 "Histogram-based algorithm"
中文名稱翻作"直方圖優化演算法"

LightGBM + GridSearchCV 調整參數（調參）feat. Categorical Data處理

其實這篇認真只是想整理給自己看的:SS
先說因為最近在參加一些KAGGLE比賽，看看各位大大們都是用lgb或是xgb來跑，認真研究了一下，整理一下結論，文章出爐啦!!!

如果想更了解LightGBM，可以看我的LightGBM explained系列文：

• LightGBM + GridSearchCV 調整參數（調參）feat. Categorical Data處理
• LightGBM explained系列——Histogram-based algorithm是什麼？
• LightGBM explained系列——Exclusive Feature Bundling（EFB）是什麼？
• LightGBM explained系列——Gradient-based One-Side Sampling（GOSS）是什麼？

LightGBM(lgb)

https://github.com/Microsoft/LightGBM
準確率不變(與xgb差別不大)的狀況下，

• 訓練效率更高更快
• 適用處理大量資料
• 支援並行學習(我可能要再研究一下)

謝志明 博士 談「類神經網路演算法的應用」

謝志明 博士 談「類神經網路演算法的應用」

蠻有幸的是資料科學與巨量資料導論，可以一起參與巨資碩專班的演講主題，這次可是從雙溪趕來城中聽演講(上次聽演講也是好久以前的事了...
feat.也是第一次來到未來教室！
演講人是類神經網路的一位前輩學者：謝志明 博士
其實對類神經網路一直沒那麼熟悉，想說可以看書、看影片來了解，但這次有這一項機會，很像是種入門吧！非常幸運👅👅👅

(2)
演講日期：2018/12/14(五)
時間：PM8:00
講者姓名：謝志明 博士
職稱：國立中興大學應用數學博士/中華全球華人產業發展學會理事/廈門華廈學院物流與電子商務系教授兼系主任
當日演講時數：2 hours
題目：類神經網路演算法的應用

資料探勘(Data Mining) ID3決策樹(Decision Tree)怎麼計算?

資料探勘(Data Mining) ID3決策樹(Decision Tree)怎麼計算?

看到都是類別資料，在R裡面用rpart就可以了！
決策樹是ID3演算法 (好像是澳洲昆士蘭大學一個教授研究出來的)

圖略醜，因為怕有版權問題哈哈ZZ

這堂課是
INTRODUCTION TO DATA SCIENCE AND BIG DATA課堂筆記

資料探勘(Data Mining) 概念是什麼?

資料探勘(Data Mining) 概念是什麼?

INTRODUCTION TO DATA SCIENCE AND BIG DATA課堂筆記

Content

1.瞭解分類Classification的概念
2.學習簡單的分類演算法

• 決策樹
• 最鄰近法
• 簡單貝氏分類(機率)

3.認識評估分類模型的方法