오픈콜

디지털오픈랩에 대해 궁금한 점을 올려주시면 신속히 답변드립니다.
구분 컨설팅
제목 BGD와 SGD의 구분 방법
공개여부 공개
문의자 이윤주 문의일 2023-11-03
질문내용 BGD와 SGD 각각 어떤 차이가 있는지 궁금합니다.
답변일자 2023-11-06
답변내용 BGD의 경우 전체 데이터셋은 BGD의 기울기를 구성하는데 사용됩니다. 즉, 엄청난 양의 데이터를 사용하기 때문에 가중치 업데이트가 천천히 되고 수렴이 어렵습니다. 그에 비해 SGD의 경우 단일 샘을을 사용하여 확률적 기울기를 계산합니다. 그래서 더 빈번한 가중치 변경으로 인해 배치 기울기보다 훨씬 더 빨리 수렴됩니다.
첨부파일