文藝復興

Viewing posts tagged ML

類神經網路訓練不起來怎麼辦 (二)： 批次 (batch) 與動量 (momentum) - 李宏毅機器學習筆記

 Posted by: bart30508 | in Machine Learning, 資料工程 | 1 year, 5 months ago |

什麼是Batch?

  1. 每次用一部分的資料算出gradient(loss)，update參數，不會拿全部的資料計算gradient(loss)，update參數。 其中一部分的資料就稱為一個Batch。
  2. 把所有的Batch通通算過一遍，就稱為一個epoch。
  3. 每做完一個epoch，劃分不同的Batch，這件事就叫做Shuffle。

為什麼要用Batch?

增加運算效率

[read more]

 or 

Subscribe

* indicates required

Recent Posts

Archive

2022
2021

Categories

Apache 1

Data Science 2

Dbfit 1

Design Pattern 1

Devops 4

DigitalOcean 1

Django 1

English 3

Excel 5

Flask 3

Git 1

HackMD 1

Heroku 1

Html/Css 1

Linux 4

Machine Learning 2

Manufacture 1

Mezzanine 18

Oracle 1

Postgresql 7

PowerBI 4

Powershell 4

Python 21

SEO 2

SQL Server 52

SQLite 1

Windows 1

database 8

work-experience 1

其他 1

自我成長 1

資料工程 1

Tags

SEO(1) Github(2) Title Tag(2) ML(1) 李宏毅(1) SQL Server(18) Tempdb(1) SSMS(1) Windows(1) 自我成長(2) Excel(1) python Flask(1) python(5) Flask(2)

Authors

bart30508 (147)

Feeds

RSS / Atom

© COPYRIGHT 2011-2022. Max的文藝復興. ALL RIGHT RESERVED.