Humans moving in space → and unprecedently, something happens on the surrounding screens/projections??
What if all the UIs/simple interactions we use in our daily web interfaces - are re-presented and re-interpreted within the space, with us human body used as the interactive pointer/mouse/finger → Finger within the smartphones, Body within the Installation (Bodily Experience)
Toggler: Boolean Interaction
Slider: 1-Dimensional Interaction
Pad/2D Mouse Move/Touch Move: 2-Dimensional Interaction
Toggler → Body being on the left of the space ←> Right of the space
Slider → Body moving across the single corridor/passage → And something occurring reactively on the screen
Pad Movement → Body moving within the 2D floor → And something occurring reactively on the screen
Thus, the human-as-interface tracks the body/human to create a bodily movement that influences the surroundings → And humans act as a big finger. A language that will expand the boundary of bodily interaction → Not through the wall projection, but through the floor-based bodily movement tracking.
Multi-Device Web Artwork: Inducing Physicality from Virtuality, is at the End - the communication between the subject and the space. The conversation between the subject and the space.
Imagine humans interacting within a space in which screens project unexpected images. Wouldn't it be interesting to re-envision the simple, daily interactions we have with digital user interfaces? We could incorporate these modalities within the very fabric of the space, using our bodies as interactive tools, akin to the finger on a smartphone or a pointer on a computer.
Consider the concept of a "toggler", denoting a binary, Boolean interaction of on-off or left-right states. Similarly, a "slider" could represent one-dimensional movement across a linear path, while a "pad movement" could encompass two-dimensional transitions across a plane. Translate these concepts to a physical environment – the body acting as a toggler, shifting from one side of a space to another, or a slider, moving through a passage with corresponding reactive elements occurring on the screens. Or the body as a pad, moving within a two-dimensional area, activating corresponding reactions on screens.
This concept gives rise to the idea of the human-as-interface – our bodies tracked within the space, influencing the surrounding environment like a giant collaborative articulator. An extension of the language of bodily interaction, this concept strays from the tradition of wall projection, and instead harnesses the very movement of our bodies on the floor.
In the end, a multi-device web artwork like this brings physicality to the virtual realm. It is a dialogue between the individual and the space, a vibrant conversation born from interactive movement and experiential art.
인간이 스크린에 예기치 않은 이미지를 투영하는 공간 내에서 상호작용하는 모습을 상상해 보세요. 우리가 디지털 사용자 인터페이스와 매일 하는 단순한 상호작용을 새롭게 구상해보면 정말 흥미롭지 않을까요? 이러한 방식들을 공간의 본질에 통합하고, 우리의 몸을 스마트폰의 손가락이나 컴퓨터의 포인터처럼 인터랙티브 도구로 사용하는 것을 생각해볼 수 있습니다. "토글러"라는 개념을 생각해 보세요. 이는 켜짐-꺼짐 또는 왼쪽-오른쪽 상태의 이진 논리 상호작용을 나타냅니다. 유사하게, "슬라이더"는 선형 경로를 따라 이동하는 일차원적 움직임을 나타낼 수 있으며, "패드 이동"은 평면을 가로지르는 이차원적 전환을 포함할 수 있습니다. 이러한 개념을 물리적 환경에 적용해보면, 몸이 토글러 역할을 하여 공간의 한쪽에서 다른 쪽으로 이동하거나, 슬라이더 역할을 하여 통로를 따라 움직이며 화면에 반응 요소가 발생하는 것을 상상할 수 있습니다. 또는 몸이 패드처럼 이차원 영역 내에서 이동하며 화면에 대응하는 반응을 활성화할 수 있습니다. 이 개념은 인간을 인터페이스로 사용하는 아이디어를 낳습니다. 우리의 몸이 공간 내에서 추적되어 주변 환경에 영향을 미치는 거대한 협업 도구처럼 작용하는 것입니다. 신체적 상호작용의 언어를 확장하는 이 개념은 벽 프로젝션의 전통에서 벗어나, 대신 바닥에서 우리의 몸의 움직임을 활용합니다. 결국, 이러한 다중 장치 웹 아트워크는 가상 영역에 물리성을 부여합니다. 이는 개인과 공간 사이의 대화이며, 인터랙티브한 움직임과 체험 예술에서 태어난 생생한 대화입니다.
human-as-interface
human sliders
human mouse
bodily experience
multi-device web artwork
physicality
virtuality
interaction design
web interface
UI
UX
body movement tracking
bodily interaction
Text written by Jeanyoon Choi
Ⓒ Jeanyoon Choi, 2024