23.08.01 화

1. 아침에 따듯한 물 한잔 O

2. 연구실: 랩미팅 O

3. 연구: recXplainer O

4. 약속: 상도역 19시 30분 저녁 O

5. 운동: 가슴운동 20분 X

6. 휴식: 명상, 낮잠 O

7. 미용실 예약, 크로스핏 예약 O

 

오늘까지는 약속이 있어서 그렇고 수요일은 완전 공부해야징

내일은 전문연 알아보기 + 석박 고민

 

- 요즘에 생성 모델이 많이 생기면서 text to image generation처럼 동시에 사용하는 연구들이 많이 나오고 있다. 오늘 랩실에서 대표적으로 controllable generation으로 이미지에 박스를 쳐두고 텍스트를 넣어서 이미지를 생성하는 형태나 원래 이미지를 editing하는 instruct pix2pix와 같은 방법 그리고 기존의 stable diffusion을 attend-and-excite방법을 통해서 더 프롬프트를 잘 따르게 하는 방법 마지막으로 concept을 few shot으로 뽑아서 내가 원하는 이미지에 적용하는 방법이 있었다. instructpix2pix는 데이터를 만들때도 gpt3, stable diffusion, prompt2prompt를 사용해서 pair image dataset을 생성하고 이를 통해서 instruction following diffusion model을 학습시켰다. 그리고 clip이 nlp, vison정보를 잘 엮었다보니 더 좋은데 이를 중요한 단어에 사용했더니 stable diffusion보다 좋았다고 한다. 

 

- rec x plainer을 읽어봤는데 너무 방법이 단순하고 내용이 없어서 내 방법도 논문으로써 가치가 있는 것 같다 이전 논문을 읽어봐야게싿.

 

- 저녁 약속을 잡아서 만났는데 좋은 사람을 만났다. 굿