11.24 주간 회고록

이번주는 notion에 뭔가를 남겼다기 보다는 필기를 주로 진행했다.

따라서...뭘 남겨야 할지 잘 모르겠다!

 

11.20

Cross Entropy에 대해서 다시한번 명확하게 정리하는 시간을 가졌다.

정보량과 엔트로피의 관계, 왜 loss로 cross entropy를 사용하는지에 대해 알아봤다.

KL-Divergence를 최소화 한다 == Cross Entropy를 최소화 한다! 가 되어버리기 때문이다!!

https://sugar-acoustic-4ae.notion.site/DLBasic-11-20-b760a08c7058482ca1eed830ed406ffb?pvs=4

[DLBasic] 11.20

 

11.21

MLE, GAN, Diffusion, Transformer 등 간단한 수식을 동반하여 기본 개념을 알아봤다.

뭔가... 어렵기 때문에 다시 복습 할 필요성이 있다고 생각된다.

 

11.22 ~ 23

데이터 시각화에 대해 공부했다. 데이터를 다루는데에는 익숙하지 않아서, 어떤 방법을 어떤 데이터에 활용할 수 있는지에 대한 팁들을 얻을 수 있었다고 생각한다. 정말 많은 노하우를 제공해 주시고 계신다는 생각이 들었다.

 

11.24

심화과제들을 풀었다.

심화과제는 아쉽게도 수식을 코드로 옮기는것에 그쳤기 때문에, 더 자세한 내용이 궁금하다면 직접 논문을 읽어볼 수 밖에 없다는 생각이 들었다.