본문 바로가기

기타53

최근 근황과 CVPR 2025 accept 블로그에 정말 오랜만에 들어와본다. 화요일에 수업에서 Noise Otimization in DM으로 발표해야해서 자료도 만들어야하고, 화요일과 수요일 각각 연구 미팅이 있고, 화요일까지 CVPR camera ready 제출 해야하고 등등 .. (심지어 화요일에 ICML 리뷰가 나온다!!!!!! 화요일에 뭐가 되게 많다.) 아무튼 이번주 다음주가 매우 정신이 없는데 블로그 글은 꼭 이렇게 바쁠때 더 쓰고 싶어지는 것 같다. 최근 근황은 우선 첫 논문이 CVPR 2025에 억셉되었다. 아직 아카이빙도 못했고, 카메라레디도 제출안했는데 아마 곧 아카이브에 올리지 않을까 싶다. 생각보다 일찍 좋은 결과가 나와서 굉장히 좋았고, 또 .. 그냥 너무 좋다. 사실 나는 어떤 수치적인 성과를 비교할때 0과 1의 차이가.. 2025. 3. 23.
파이썬 특정 함수 뜯어보기 (inspect 라이브러리) 파이썬을 활용하다 보면 특정 라이브러리의 특정 함수에 대한 사용법 혹은 내부 동작 방식을 알고 싶은 경우가 있다.대부분의 경우에는 라이브러리를 타고, 가다보면 해당 함수가 정의된 .py 파일을 찾아 살펴보면 될 것이다. 그러나 나의 경우 clip model(아래 사진의 model)에서 forward_text_embedding function이 그 어떤 reference에도 나오지 않았다. 이게 특정 라이브러리의 함수가 어떻게 생겨먹었나(?) 알 수 있는 방법이 없을지 검색하다가 inspect 라이브러리를 알게 되었다. 사용 방법은 매우 간단한데, 그냥 import inspect 후, inspect.getsource(model.forward_text_embedding)을 하면 내부 코드가 어떻게 생겼는지 .. 2024. 9. 1.
최근 근황 (졸업과 논문) 이번 여름 방학은 정말 정신이 하나도 없었다. 3월에 KIST에 들어와서 진행한 연구를 AAAI에 무사히 잘 제출하였고, 동시에 같은 날 학부 졸업식까지 있었다.처음 써보는 논문인데 너무 좋은 사수를 만나 성공적으로 마무리 할 수 있었던 것 같다. 작년 5월 쯤 학부 졸업 전에 뉴립스 섭미션을 해보자라는 목표가 있었는데, 뉴립스는 아니지만 그래도 탑컨퍼에 공동 1저자로 낼 수 있어서 성취감이 정말 컸다. 내년에는 더 열심히 해서 뉴립스에도 꼭 제출할 수 있었으면 좋겠다. 이번에 논문을 쓰면서 많은 것을 느꼈는데, 우선 분명 아쉬움은 있었다. 많은 실험을 하며 잘 되지 않던 케이스도 있었고, 잘 되더라도 설명력이 부족하거나, 이게 최선(최적)일까? 하는 생각도 정말 많이 들었다. 그럼에도 끝까지 실험을 열.. 2024. 8. 19.
[화상 영어] 일곱번째 수업 리뷰 수업 날짜 : 24/04/22 수업의 주제는 Unwinding / Relaxing이였다.대화를 꽤 많이 한 것 같은데, 마지막에 여행 얘기도 좀 해서 재밌었다.Ross가 (어린)애들이랑 대화하는 것 보다 나랑 말하는게 훨씬 재밌다고 하는데, 찐웃음(?)이 많이 나오는 것 같아 내심 기분이 좋다. 원래는 5분 정도는 피드백을 해줬었는데 점점 그 시간까지 대화를 꽉 채워서 하는것 같기도 ....1. Conversation ReviewRoss : Ready to relax and take it easy for the evening?Me : Yes, but i didn't eat my dinner so I'm little bit hungry now.의도 : 네, 근데 다 좋은데 저녁을 못먹어서 조금 배고프네요... 2024. 5. 29.
[LLM tuning 오류] AttributeError: module 'collections' has no attribute 'Container' 최근에 LLM 코딩할 일이 생겨서 이준범님의 KoAlpaca 레포를 보고 스크립트를 따라하고 있다.https://github.com/Beomi/KoAlpaca 3090 4대를 이용하였고, README에 나와있는대로 진행하였는데, 아래와 같은 오류들이 나왔다.AttributeError: Caught AttributeError in replica 0 on device 0.AttributeError: module 'collections' has no attribute 'Container' 해당 오류 이후에 터미널이 꺼지지는 않고 계속 무한 로딩이 지속되었는데, python 버전 문제였다. 3.10 버전이 collections 모듈을 좀 수정한 것 같다. 아무튼 파이썬 버전을 3.9로 내려서 새로 가상환경을 만.. 2024. 5. 27.
[화상 영어] 여섯번째 수업 리뷰 수업 날짜 : 24/04/15 수업의 주제는 Inflation / Business였다.지난 주에는 굉장히 잘 말이 나와서 speaking 실력이 늘었다고 생각했는데, 평소 별로 생각해볼 기회가 적은 inflation / business / economy 에 대해서 말하려니 말이 잘 안나왔다. 말이 잘 안나오면 자연스럽게 스스로 당황하고, 문법도 많이 망가지는 것 같다. 쉬운 문장을 편하게 말하는 연습을 많이 해야하는데 .. 꾸준히 하다보면 늘겠지 뭐 .. 요즘엔 일주일에 2회 수업으로 늘릴까 하는 생각도 든다.1. Conversation ReviewRoss : Could you tell me what you think it("point out") might mean then if you think you.. 2024. 5. 10.