Neural network tips

🗂 REVIEW/Graph Study

[CS224W] General Tips

8강 뒷부분에는 General Tips 와 Practical Demos 라는 페이지가 일부 더 있습니다. 이 중 General Tips 가 생각치도 못했던? 재밌는 부분이 있어서 번역해놓겠습니다. General Tips 1. 데이터 전처리는 중요하다. renormalization tricks을 사용해라 https://discuss.dgl.ai/t/how-to-implement-the-renormalization-trick/86 Variance - scaled initialization : 분산 스케일링을 하는 초기화를 사용해라 Network data를 whitening해라 whitening : data를 uncorrelated 하게 만들어주고 각각의 variance를 1로 만들어주는 작업 ucsd.tis..

지니티토리
'Neural network tips' 태그의 글 목록