23.08.16 수

1. 아침에 물 한잔 O
2. 건강: 토마토 주스 & 요거트 & 견과류 & 영양제 O
3. 운동: 복근 10분 & 가슴 10분 O
4. 연구: deepCT O
5. 연구: deepImpact O
6. 사람에 대한 이해 O
7. 미용: 눈 점 반드시 알아본다 X

8. 밤산책
 
bm25, repbert, colbert, b-idf
 
- 드디어 deepCT를 다 읽었다. 내용적으로 얻는 게 많았다. query를 길이 별로 experiment해서 long queries에서 도움이 된다는 걸 말했던 것이라는 걸 알았다.
- deepImpact도 읽었는데, 확실히 downstream task에 맞게 optimize되지 않는다는 점과 ground truth가 필요하다는 점은 단점이 명확했다. 이 다음 나온 sparterm이나 doct5query같은 모델은 이런 단점을 잘 극복한 것 같다. 그리고 mlm head를 통해 relevance한 words를 포착한다는 점이 인상적이다.

- 어제 운동도 아주 잘했고 밤에 산책도 성공적이었다. 하지만, 잠에 들지 않았다. 10시에 잠들었는데 새벽 3시까지 잠을 못잤다.. 이유가 뭐지?