콘텐츠 제작을 위한 이미지-프롬프트 복원 품질의 이중 지표(F/R) 평가: 문자열 유사도 한계 보완(파일럿 실증연구)

초록

텍스트-투-이미지(text-to-image, T2I) 생성 결과로부터 프롬프트를 역추적하는 프롬프트 복원은 제작 로그 관리 및 품질 검수에 유용하다. 그러나 BLEU/ROUGE 등 기존 문자열 유사도 지표는 프롬프트 비유일성과 핵심 제약(개수·관계·행위 등) 누락을 충분히 반영하지 못하는 한계가 있다. 본 파일럿 연구는 생성–복원–재생성–평가의 4단계 파이프라인을 기반으로, 체크리스트 기반 ‘충실도(Faithfulness, F)’와 CLIP 임베딩 코사인 유사도 기반 ‘재현성(Reproducibility, R)’을 결합한 F/R 이원 평가 프레임워크를 제안하고 그 측정 가능성을 예비적으로 검토한다. 5대 제약 유형(SA/CT/PO/RE/AC)으로 설계된 46개의 통제 프롬프트를 Midjourney v7에 입력하여 이미지를 생성하고, 이를 Claude 3.5 Sonnet으로 복원·재생성한 결과, 2인 독립 평가 평균 F=0.885, μR=0.922였으며, 전체 실패율은 2.2% 였다. 특히, 관계(RE) 유형에서만 유일한 실패(12.5%)가 발생하여, 복합 조건 보존이 주요 병목일 가능성을 예비적으로 확인하였다. 본 연구는 제작 실무 관점에서 해석 가능한 복원 품질 지표를 제시했다는 데 의의가 있다.

키워드