[스테이블 디퓨전] 이미지에서 프롬프트 내용 추출하기(Clip 분석 확장 기능)
스테이블 디퓨전 확장 기능중 clip-interrogator을 설치하면
이미지에서 프롬프트 내용을 추출해 낼 수 있습니다.
우선, 스테이블 디퓨전 확장 기능 탭을 열고 URL에서 설치를 통해 설치 합니다.
설치할 주소는 아래와 같습니다
https://github.com/pharmapsychotic/clip-interrogator
GitHub – pharmapsychotic/clip-interrogator: Image to prompt with BLIP and CLIP
Image to prompt with BLIP and CLIP. Contribute to pharmapsychotic/clip-interrogator development by creating an account on GitHub.
https://github.com/pharmapsychotic/clip-interrogator.git
설치 완료 하면 아래와 같이 이미지 -> 이미지에 [CLIP 분석] 탭이 생긴것을 확인 할 수 있습니다.
자 이제 아래 이미지를 넣으면 어떤 프롬프트가 나오는지 보겠습니다
이미지를 넣고 [CLIP 분석] 버튼을 누르면 몇분정도 후에 프롬프트가 나옵니다.
아래와 같은 프롬프트가 나왔네요?
오~ 맞는거 같습니다
two strawberries are splashing into a pink liquid filled with milk and pink liquid, with the words happy birthday on the top, Alberto Seveso, pink, a photorealistic painting, art photography
그럼 저 프롬프트로 텍스트 -> 이미지 제작을 해볼까요?
물론 모델에 따라, VAE에 따라 더 상세한 프롬프트 내용에 따라 달라지겠지만,
얼추 비슷한 느낌의 이미지가 생성되는것을 알 수 있습니다.
유용하게 사용될만한 확장 기능으로 생각되네요~
담에는 DeepBooru 분석에 대해 설치하고 알아보겠습니다.
2023년 4월 6일 추가 내용
웹상에서 바로 사용도 가능합니다
