Can Large Language Models Substitute for Human Raters? Reliability and Validity of Urban Design Quality Assessment
본 연구는 서울의 도시 설계 평가를 위한 멀티모달 거대언어모델(LLM)의 신뢰성과 타당성을 평가하며, 이 모델들이 시각적으로 명시적인 특징들에 대해서는 우수한 성능을 보이지만 맥락적 또는 비례적 변수에 대한 인간의 평가를 완전히 재현하지 못하는 점이 보편적 적용보다는 요소별 특정 적용으로 그 적합성을 제한한다는 것을 밝혀냈다.