Trend AnalysisArts & Design

VR Cinema: The Multi-Sensory Narrative Frontier

VR cinema dissolves the frame that has defined filmmaking for over a century. Without a fixed frame, the viewer becomes an active participant in the narrative space—creating both opportunities and challenges for storytelling, editing, and emotional engagement.

By Sean K.S. Shin

This blog summarizes research trends based on published paper abstracts. Specific numbers or findings may contain inaccuracies. For scholarly rigor, always consult the original papers cited in each post.

Traditional cinema is defined by the frame—a rectangular boundary that the director controls completely. Within the frame, everything is composed: camera angle, lighting, actor placement, editing rhythm. The viewer watches from a fixed position, guided by the director's choices. VR cinema eliminates the frame. The viewer is placed inside the narrative space, free to look in any direction, and the director's control is fundamentally different: not what the viewer sees, but what surrounds the viewer.

This shift is not merely technical. It challenges assumptions about narrative structure, emotional manipulation, editing grammar, and the relationship between creator and audience that cinema has refined over 130 years.

The Research Landscape

Multi-Sensory Design

Liu and Zhu (2025) investigate the sensory, narrative, and technical foundations that distinguish immersive VR films from conventional cinema. Their analysis identifies three dimensions of VR-specific film design:

Spatial narrative. In traditional film, narrative progresses through editing—cutting between shots to advance the story. In VR, the viewer occupies a continuous space. Story progression must be designed through spatial cues (where events happen around the viewer), audio directionality (sounds drawing attention to specific locations), and character movement (actors guiding the viewer's gaze through their behavior).

Embodied presence. VR creates a sense of "being there" that flat screens do not. This presence is both an opportunity (heightened emotional engagement) and a constraint (violence, horror, and intimacy feel qualitatively different when the viewer is "present" rather than watching from a safe distance).

Multi-sensory integration. Emerging VR systems incorporate haptic feedback (vibration, wind, temperature) and spatial audio (sounds positioned in 3D space) alongside visual immersion. Liu and Zhu argue that multi-sensory VR film requires a new design language that coordinates visual, auditory, and tactile elements—something that traditional film theory, focused almost exclusively on image and sound, does not provide.

Phenomenology of VR Spectatorship

Çalışkan (2025) provides the most theoretically grounded analysis, examining VR spectatorship through phenomenology—the philosophical study of conscious experience. The case study is Darkening, a VR film exhibited at the Czech National Film Museum.

The key finding: VR spectatorship involves what Çalışkan calls "narrative embodiment"—the viewer does not simply observe the story but inhabits it. Çalışkan's phenomenological analysis suggests this is not merely metaphorical — prior VR research has shown that physiological responses (heart rate, galvanic skin response) in VR viewers can approach those of real-world experiences, though Çalışkan's own study is a theoretical/phenomenological analysis rather than a psychophysiology experiment.

This embodiment has implications for film ethics: content that is acceptable on a flat screen (violence, disturbing imagery) may be unacceptable in VR, where the viewer's embodied response approaches the intensity of a real experience. The film classification systems developed for traditional cinema may need revision for VR.

Industry Transformation

Lyu, Niu, and Yang (2024), with 1 citation, survey VR's impact on the film industry more broadly, covering production workflows, distribution models, and audience expectations. Their analysis identifies a paradox: VR technology has reached sufficient maturity for compelling cinematic experiences, but the business model for VR cinema remains unclear.

Theatrical exhibition—the economic backbone of traditional cinema—does not translate to VR. VR requires headsets, dedicated viewing spaces, and shorter format lengths (extended VR viewing causes fatigue). Festival exhibition and museum installation have emerged as the primary venues for VR cinema, reaching small but engaged audiences. Mass distribution through consumer VR headsets (Meta Quest, Apple Vision Pro) is growing but has not yet achieved the scale needed to support large production budgets.

Disrupting Conventions

Martínez-Cano (2024), with 3 citations, examines the disruption of traditional "moving image conventions" by what he terms "metaverse film." The paper identifies several conventions that VR cinema must reinvent:

The shot: In traditional cinema, a "shot" is a continuous image between two cuts. In VR, there are no cuts (or cuts feel disorienting). The basic unit of VR cinema is the "scene" or "environment," not the shot.
The edit: Cross-cutting, montage, and continuity editing—the grammar of traditional cinema—do not translate directly. VR editing must work through spatial transitions (moving the viewer between environments) rather than temporal cuts.
The performance: Actors in VR must perform in 360 degrees, aware that the viewer might be looking at them from any angle. This requires theatrical rather than cinematic performance technique.

Critical Analysis: Claims and Evidence

Claim	Evidence	Verdict
VR spectatorship involves embodied responses exceeding flat-screen viewing	Çalışkan's phenomenological analysis (theoretical, not experimental) + prior VR literature	⚠️ Theoretically supported; not directly measured in this study
Multi-sensory VR requires a new design language beyond image+sound	Liu & Zhu's sensory analysis	✅ Supported — tactile and spatial audio dimensions are undertheorized
VR cinema lacks a viable mass-market business model	Lyu et al.'s industry analysis	✅ Supported — festival/museum exhibition dominates
Traditional editing grammar does not translate to VR	Martínez-Cano's analysis of disrupted conventions	✅ Supported — cuts are disorienting; spatial transitions needed

Open Questions

Long-form narrative: Most VR films are 5-20 minutes. Can VR sustain feature-length storytelling without viewer fatigue?

Viewer agency vs. narrative control: If the viewer can look anywhere, how does the director ensure that the audience sees the narratively important events? "Guided freedom" techniques are emerging but not yet mature.

Accessibility: VR headsets exclude viewers who experience motion sickness, have visual impairments, or cannot afford the hardware. How should VR cinema address accessibility?

Preservation: VR films are platform-dependent. How do we preserve VR cinema for future audiences when the hardware evolves and current platforms become obsolete?

What This Means for Your Research

For filmmakers, VR requires rethinking the fundamentals: composition without a frame, narrative without cuts, performance without a camera position. The skills that transfer are storytelling and emotional design; the skills that don't are conventional cinematography and editing.

For film scholars, VR cinema provides a productive case study for examining which aspects of cinematic language are medium-specific and which are more universal.

Explore related work through ORAA ResearchBrain.

전통 영화는 프레임으로 정의된다. 감독이 완전히 통제하는 직사각형의 경계 안에서 카메라 앵글, 조명, 배우 배치, 편집 리듬 등 모든 요소가 구성된다. 관객은 고정된 위치에서 감독의 선택에 이끌리며 영화를 관람한다. VR 시네마는 이 프레임을 제거한다. 관객은 내러티브 공간 안에 배치되어 어느 방향이든 자유롭게 바라볼 수 있으며, 감독의 통제 방식도 근본적으로 달라진다. 관객이 무엇을 보느냐가 아니라, 관객을 무엇이 둘러싸느냐가 핵심이 된다.

이러한 전환은 단순한 기술적 변화가 아니다. 영화가 130년에 걸쳐 정교하게 발전시켜온 내러티브 구조, 감정 조율, 편집 문법, 창작자와 관객 간의 관계에 대한 기존 가정들에 근본적인 의문을 제기한다.

연구 현황

다감각 설계

Liu와 Zhu(2025)는 몰입형 VR 영화를 일반 영화와 구별 짓는 감각적, 내러티브적, 기술적 토대를 탐구한다. 이들의 분석은 VR 특화 영화 설계의 세 가지 차원을 제시한다.

공간적 내러티브. 전통 영화에서 내러티브는 편집, 즉 장면 사이의 컷을 통해 진행된다. VR에서 관객은 연속된 공간을 점유한다. 스토리 전개는 공간적 단서(관객 주변에서 사건이 일어나는 위치), 오디오 방향성(특정 장소로 주의를 유도하는 소리), 인물 움직임(행동을 통해 관객의 시선을 이끄는 배우)을 통해 설계해야 한다.

체현된 현존감. VR은 평면 화면이 줄 수 없는 '그 곳에 있는' 느낌을 만들어낸다. 이 현존감은 강화된 감정적 몰입이라는 기회이자 동시에 제약이기도 하다. 안전한 거리에서 바라보는 것이 아니라 관객이 '현장에 있는' 상태가 되면, 폭력, 공포, 친밀한 장면의 질적 느낌이 달라지기 때문이다.

다감각 통합. 새롭게 등장하는 VR 시스템은 시각적 몰입과 함께 햅틱 피드백(진동, 바람, 온도)과 공간 오디오(3D 공간에 위치한 소리)를 통합한다. Liu와 Zhu는 다감각 VR 영화가 시각, 청각, 촉각 요소를 조율하는 새로운 설계 언어를 필요로 한다고 주장한다. 이미지와 사운드에만 집중해온 전통 영화 이론은 이러한 언어를 제공하지 못한다.

VR 관람의 현상학

Çalışkan(2025)은 가장 이론적으로 탄탄한 분석을 제시한다. 의식적 경험을 철학적으로 연구하는 현상학의 관점에서 VR 관람 경험을 탐구하며, 체코 국립 영화 박물관에서 전시된 VR 영화 Darkening을 사례로 삼는다.

핵심 발견: VR 관람은 Çalışkan이 '내러티브 체현(narrative embodiment)'이라 부르는 것을 수반한다. 관객은 단순히 이야기를 관찰하는 것이 아니라 이야기 안에 거주한다. Çalışkan의 현상학적 분석에 따르면 이것은 단순한 비유가 아니다. 기존 VR 연구들은 VR 환경에서 관객의 생리적 반응(심박수, 피부 전기 반응)이 실제 경험과 유사한 수준에 가까울 수 있음을 보여주었다. 다만 Çalışkan 자신의 연구는 심리생리학적 실험이 아닌 이론적·현상학적 분석이다.

이러한 체현은 영화 윤리에 함의를 갖는다. 평면 화면에서는 허용 가능한 콘텐츠(폭력, 불쾌한 이미지)가 VR에서는 허용될 수 없을 수 있다. 관객의 체현된 반응이 실제 경험의 강도에 근접하기 때문이다. 전통 영화를 위해 개발된 등급 분류 체계는 VR을 위해 재검토가 필요할 수 있다.

산업의 변화

Lyu, Niu, Yang(2024)은 피인용 1회로, VR이 영화 산업 전반에 미치는 영향을 제작 워크플로, 배급 모델, 관객 기대의 측면에서 광범위하게 조사한다. 이들의 분석은 하나의 역설을 제시한다. VR 기술은 설득력 있는 영화적 경험을 만들어낼 수 있을 만큼 성숙해졌지만, VR 시네마의 비즈니스 모델은 아직 불분명하다.

전통 영화 경제의 근간인 극장 상영은 VR에 적용되지 않는다. VR은 헤드셋, 전용 관람 공간, 더 짧은 상영 시간(장시간 VR 관람은 피로를 유발한다)을 필요로 한다. 영화제 상영과 박물관 설치 작품이 VR 시네마의 주요 유통 경로로 부상했으며, 소수이지만 높은 참여도를 가진 관객에게 도달하고 있다. 소비자용 VR 헤드셋(Meta Quest, Apple Vision Pro)을 통한 대중 배급은 성장 중이지만 대규모 제작비를 감당할 수 있는 규모에는 아직 이르지 못했다.

관습의 해체

Martínez-Cano(2024)는 피인용 3회로, 그가 '메타버스 영화(metaverse film)'라 부르는 것에 의해 전통적인 '동영상 관습'이 해체되는 방식을 분석한다. 이 논문은 VR 시네마가 재창안해야 할 여러 관습을 제시한다.

샷: 전통 영화에서 '샷'은 두 컷 사이의 연속된 이미지다. VR에서는 컷이 없거나(또는 컷이 방향 감각을 잃게 만든다), VR 시네마의 기본 단위는 샷이 아닌 '장면' 또는 '환경'이다.
편집: 교차 편집, 몽타주, 연속 편집 등 전통 영화의 문법은 VR에 직접 적용되지 않는다. VR 편집은 시간적 컷이 아닌 공간적 전환(관객을 환경 사이로 이동시키는 방식)을 통해 작동해야 한다.
연기: VR의 배우는 360도 방향에서 연기해야 하며, 관객이 어느 각도에서든 자신을 바라볼 수 있다는 것을 인식해야 한다. 이는 영화적 연기 기법이 아닌 연극적 연기 기법을 요구한다.

비판적 분석: 주장과 근거

주장	근거	판정
VR 관람은 평면 화면 관람을 초과하는 체현된 반응을 수반한다	Çalışkan의 현상학적 분석(이론적, 비실험적) + 기존 VR 문헌	⚠️ 이론적으로 지지됨; 해당 연구에서 직접 측정되지 않음
다감각 VR은 이미지+사운드를 넘어서는 새로운 설계 언어를 필요로 한다	Liu & Zhu의 감각 분석	✅ 지지됨 — 촉각 및 공간 오디오 차원이 이론화 부족
VR 시네마는 대중 시장에서 실행 가능한 비즈니스 모델이 없다	Lyu 외의 산업 분석	✅ 지지됨 — 영화제/박물관 상영이 지배적
전통 편집 문법은 VR에 적용되지 않는다	Martínez-Cano의 해체된 관습 분석	✅ 지지됨 — 컷은 방향 감각을 잃게 하며 공간적 전환이 필요

열린 질문들

장편 내러티브: 대부분의 VR 영화는 5~20분 분량이다. VR은 관객 피로 없이 장편 스토리텔링을 지속할 수 있는가?

관객 주체성 대 내러티브 통제: 관객이 어느 방향이든 바라볼 수 있다면, 감독은 어떻게 관객이 내러티브상 중요한 사건을 확실히 보도록 할 수 있는가? '안내된 자유(guided freedom)' 기법이 등장하고 있지만 아직 성숙 단계에 이르지 못했다.

접근성: VR 헤드셋은 멀미를 경험하거나 시각 장애가 있거나 기기를 구입할 여력이 없는 관객을 배제한다. VR 시네마는 접근성 문제를 어떻게 해결해야 하는가?

보존: VR 영화는 플랫폼에 종속된다. 하드웨어가 진화하고 현재 플랫폼이 구식이 될 때 미래 관객을 위해 VR 시네마를 어떻게 보존할 수 있는가?

연구에의 시사점

영화 제작자에게 VR은 기본기의 재사고를 요구한다. 프레임 없는 구성, 컷 없는 내러티브, 카메라 위치 없는 연기가 그것이다. 이전 가능한 기술은 스토리텔링과 감정 설계이며, 이전되지 않는 것은 기존의 촬영술과 편집이다.

영화학 연구자에게 VR 시네마는 영화 언어의 어떤 측면이 매체 특수적이고 어떤 측면이 보다 보편적인지를 검토하는 생산적인 사례 연구를 제공한다.

ORAA ResearchBrain에서 관련 연구를 탐색해보자.

References (5)

[1] Liu, B. & Zhu, S. (2025). Transcending Narrative Realms: A Multi-Sensory Exploration in Immersive VR Film. Proc. ASME IDETC/CIE 2025.

DOI Scholar

[2] Çalışkan, Ö. (2025). Cinema without frames: How Darkening bridges virtual and real to redefine presence and narrative embodiment. Convergence.

DOI Scholar

[3] Lyu, B., Niu, Y., & Yang, Y. (2024). The Application of VR in the Film Industry. Applied and Computational Engineering.

DOI Scholar

[4] Martínez-Cano, F.-J. (2024). Metaverse film. The rising of immersive audiovisual through disrupting traditional moving image and its conventions. Avanca Cinema.

DOI Scholar

Martínez-Cano, F. (2023). Metaverse film. The rising of immersive audiovisual through disrupting traditional moving image and its conventions. AVANCA | CINEMA.

DOI Scholar

VR Cinema: The Multi-Sensory Narrative Frontier

The Research Landscape

Multi-Sensory Design

Phenomenology of VR Spectatorship

Industry Transformation

Disrupting Conventions

Critical Analysis: Claims and Evidence

Open Questions

What This Means for Your Research

연구 현황

다감각 설계

VR 관람의 현상학

산업의 변화

관습의 해체

비판적 분석: 주장과 근거

열린 질문들

연구에의 시사점

References (5)

Explore this topic deeper