[Week10] 한국어 언어 모델 학습 및 다중 과제 튜닝

Day 42

typed entity marker (punct) 방법을 사용하고 cross validation 까지 적용하니 성능이 많이 올랐다.

하지만 올리고나서 몇시간만에 다른 분들도 다 올라왔다 ㅎㅎ

다들 어떻게 이리 잘 올리는지 참 ㅎㅎ

어떻게 하면 더 성능을 올릴 수 있을지 고민하고 또 고민해야겠다.

사용되는 output vector 의 개수가 중요할지…

아니면 또 다른 변수가 중요할지…

실험을 통해 알 수 밖에 없는데 실험이 오래걸리니 ㅠㅠ

실험해서 성능 올리는 사람들이 대단하다고 생각되는 시간이다

Day 45

대회를 12등으로 마무리했다.

많은 것이 부족했음을 느꼈고 1등과 2등의 방법을 보니 더 아쉬었다.

남은 P-Stage 에 대해서는 더 열심히 해야겠다는 생각이 들었고 더 많은 것을 시도해보고 테스트해봐야 겠다고 생각했다.