네이버 부스트캠프 AI Tech 4기 5주차 회고
어느덧 부스트캠프를 시작한지 한 달이 지났다. 너무나도 빠른 진도와 많은 학습량에 조금 어지러웠지만, 벌써 많이 성장한 것이 느껴진다. 6주차부터는 첫 대회가 시작되는데, semantic text similarity 관련 대회인 것 같다. 처음해보는 task라 얼만큼 잘 할지는 모르겠지만, 대회의 등수나 점수보다는 스스로 많이 성장할 수 있는 방향으로 대회를 참가해보고 싶다. 개인적으로는 transformer 계열의 다양한 모델들을 시도해보는(RoBERTa, ALBERT, BigBird, ELECTRA, BART, T5, XLNet 등 정도) 경험을 이번 대회에서 꼭 해보고싶다. 각 모델들의 장단점이 있을테고, 이번 대회를 하며 이와 관련한 내용들을 정리 해볼 수 있었으면 좋겠다. 또한 데이터 전처리 쪽..
2022. 10. 24.