실시간 AI 디퓨전 파사드 — StreamDiffusionTD·TouchDesigner로 관객 반응을 즉시 생성하는 미디어 파사드 리서치
Pre-rendered is over. The wall now generates in real time — reading the crowd, drawing the moment. Exploring AI diffusion on architectural facades.
미디어 파사드 프로젝트의 제작비 대부분은 영상 렌더링에 쓰인다. 그리고 그 영상은 개막일부터 철거일까지 한 프레임도 바뀌지 않는다.
나는 이 구조가 바뀔 수 있다고 본다.
StreamDiffusion을 TouchDesigner에 연결하는 방식을 리서치 중이다. 개념은 단순하다. 건물 앞 광장에 설치된 카메라가 실시간으로 장면을 읽고, 그 입력값을 AI 디퓨전 모델이 즉시 이미지로 바꿔 외벽에 쏜다. 사전에 완성된 영상 파일은 없다. 지금 이 순간, 이 광장의 모습이 파사드가 된다.
실무적으로 풀어야 할 문제는 분명히 있다. 실시간 생성의 레이턴시를 어디까지 줄일 수 있는지, 대형 외벽 해상도에서 품질이 유지되는지, 기상 조건과 조도 변화에 시스템이 안정적인지. 이 단계를 건너뛰고 싶은 마음도 있지만, 건너뛰면 현장에서 무너진다.
그런데 이 리서치가 브랜드 경험 관점에서 흥미로운 이유가 따로 있다. 지금까지 파사드는 브랜드가 관객에게 일방적으로 송출하는 미디어였다. 실시간 생성이 가능해지면, 그 공간에 모인 사람들이 콘텐츠의 변수가 된다. 같은 브랜드 공간이지만, 오늘 저녁과 내일 저녁의 파사드는 다르다.
"공간 브랜딩은 고정된 메시지가 아니라, 그 자리에서 만들어지는 관계다."
이 방향이 맞다면, 발주처가 제작사에 묻는 첫 번째 질문도 달라져야 한다. '영상 몇 분짜리예요?'가 아니라 '시스템이 무엇을 읽나요?'로.
레일을 타고 움직이며 보는 위치마다 다른 그림을 보여주는 아나모픽 키네틱 디스플레이 구상
A display that moves along a rail, showing different images depending on where you stand. Anamorphic logic, now embedded in motion.
화면이 고정돼 있어야 한다는 전제를 의심하면서 이 작업이 시작됐다.
아나모픽 키네틱 디스플레이를 구상 중이다. 레일을 따라 LED 패널이 이동하고, 보는 사람의 위치에 맞춰 콘텐츠가 달라지는 구조다.
아나모픽 기법은 원래 회화에서 출발했다. '바른 각도에서만 상이 완성된다'는 원리인데, 이걸 정적인 화면이 아니라 움직이는 패널에 얹으면 전혀 다른 경험이 만들어진다.
공간 경험 프로젝트를 다루면서 하나 반복적으로 확인한 게 있다. 사람은 '나를 위해 반응하는 것'에 훨씬 오래 머문다. 일방적으로 쏘는 콘텐츠보다, 내 위치를 읽고 따라오는 화면 앞에서 발걸음이 느려진다.
아직 드래프트 단계라 결정되지 않은 것들이 많다. 레일 구조, 위치 감지 방식, 콘텐츠 전환 타이밍 — 각각이 서로에게 영향을 주기 때문에 한 번에 풀리지 않는다. 디렉팅의 상당 부분은 이런 '미결 변수들의 우선순위를 정하는 일'이라고 생각한다.
"좋은 경험은 기술이 아니라 관계에서 온다."
화면과 사람 사이의 관계를 다시 설계하는 것. 지금 내가 초안 위에서 계속 묻고 있는 질문이다.