Spatial Video:Fånga realistiskt djup och perspektiv | [Ditt varumärke/företagsnamn]

Spatial video är en innovativ inspelningsmetod som fångar detaljerna och verkligheten i en scen utöver djupet och perspektivet. Medan en vanlig 2D-video tar platta bilder, behåller rumsliga videor avståndet, djupet och perspektivet av en scen - så att man kan få känslan av att vara där. Denna unika funktion är det som gör rumslig video till den nya kungen av fotografi, filmskapande och till och med delning av personliga minnen.

Genom implementeringen av en funktion för att fånga rumsliga videor på iPhone 15 Pro och iPhone 15 Pro Max, och senare iPhone 16-serien, har Apple gjort denna störande teknik tillgänglig för massorna. När dessa rumsliga videor visas genom en enhet som Apple Vision Pro, blir resultatet en levande och realistisk upplevelse som vida överträffar vad som kan ses på vanliga skärmar.

Det här är den omfattande handledningen om rumslig video, som täcker allt om det rumsliga videokonceptet, dess tekniska aspekter, den steg-för-steg-metoden för inspelningsprocessen (med särskilt fokus på iPhone-modeller som stöds), och en mångsidig lista över utvecklande, praktiska tillämpningar, inklusive uppslukande underhållning och bevarande av 3D-minne.

I den här artikeln

Del 1:Vad är spatial video?

Spatial video är en framtidsvideo som kan spela in hela den visuella representationen, tillsammans med djup- och rymddata för en scen. Den extra datakanalen gör tittarupplevelsen mer levande och nästan 3D, så att du kan känna dig som om du är på samma plats som scenen istället för att bara titta på den på en skärm.

Hur det skiljer sig från traditionella format

• I motsats till traditionell 2D-video:2D-videor av standardkvalitet visar endast höjd och bredd, det vill säga allt visas på ett plant plan. Den rumsliga videon ökar dock djupuppfattningen så att objekten kommer närmare eller längre från betraktaren – precis på samma sätt som vi uppfattar världen omkring oss.
• I motsats till 360-graders- eller VR-video:Huvudfunktionen hos 360-graders- och VR-videor är att hela miljön som omger kameran fångas; därför är dessa videor närmast den virtuella världen, och användaren kan få en känsla av att de finns där. Syftet med den rumsliga videon är att ha realistiska figurer precis framför kameran med exakt 3D-djup för personliga videor, händelser och berättande, så att en fullständig virtuell miljö inte krävs.

En vardaglig analogi

Om du vill förstå det bättre, föreställ dig skillnaden mellan ett fotografi och ett stereoskopiskt 3D-vykort. Bilden är tilltalande men platt, medan du med 3D-vykortet kan uppleva avståndet, som att vissa föremål dyker ut medan andra stannar längst bak. Spatial video gör samma sak för dina videor.

Del 2:Hur fungerar rumslig video?

Spatial video är en teknik som fångar bilder så att våra mänskliga ögon kan förstå avståndet mellan objekt. Vanliga videor fångar en platt bild, medan i det här fallet två olika perspektiv av samma scen spelas in separat på ett litet avstånd. Detta genombrott stänger gapet mellan videon och verkligheten. Följaktligen kan åskådare förstå videor som om de vore närbilder av livet.

Fångning med dubbla linser

Kärnelementet i den rumsliga videon är ett system med dubbla linser, som fungerar på samma sätt som våra två ögon. Varje lins fångar scenen från en något annorlunda position, och den lilla skillnaden mellan dessa två bilder är nödvändig för att skapa djupuppfattning.

Till exempel är Apples användning på iPhone 15 Pro och iPhone 15 Pro Max kombinationen av huvudkameror och ultravida kameror båda i landskapsläge så att två perspektiv kan tas samtidigt. Vissa avancerade beräkningsfotograferingsalgoritmer används sedan för att göra två videor perfekt matchade för att ta hand om skillnaderna i linsernas synfält eller eventuella förvrängningar. Slutprodukten är en stereoskopisk video som visar realistiskt avstånd och skala.

Inspelning av djup och parallax

Känslan av djup i rumslig video beror till största delen på parallax, vilket är fenomenet att objekt ändrar sin position när de ses från två olika vinklar. Förändringen, eller skillnaden som det kallas här, mäts mycket noggrant och registreras av kamerasystemet. Rumsliga videor uppnår tittarens uppfattning av avstånd genom att fånga parallax, vilket ger en känsla av tredimensionell rymd. Uppspelningen av en sådan video på en enhet som Apple Vision Pro, där varje öga har sin respektive vy, är den metod för återgivning som är mest trogen den ursprungliga scenen.

Uppspelning för uppslukande visning

När en stereoskopisk skärm används, visas rumslig video samtidigt för båda ögonen, med en vy till vänster öga och den andra till höger. Denna dubbla uppspelning förvirrar hjärnan till att kombinera de två vyerna, vilket är anledningen till att den ger en verklighetstrogen 3D-upplevelse som känns uppslukande och naturlig. Endast den primära vyn är inställd för dem som är på en vanlig 2D-skärm, därför spelas videon fortfarande upp som en vanlig platt video utan djupeffekt.

Lagringsformat och filstorlekar

Enkelt uttryckt är spatial video dubbelt så mycket lagring som en traditionell video eftersom den bär två videoströmmar och vissa rumsliga metadata. Apple vände sig till Multi-View HEVC (MV-HEVC) för att bära sina rumsliga videor, ett format som håller de två vyerna som separata lager inom en videofil.

Denna design säkerställer att äldre enheter, som inte känner igen rumslig uppspelning, som standard endast kommer att visa basskiktet som en standard 2D-video. Även om MV-HEVC är en slags mästare i komprimering, äter de rumsliga videorna fortfarande mycket hårddiskutrymme. Tänk till exempel på iPhone 15 Pro-modellen, som fångar rumsliga videor med 1080p-upplösning och 30 bilder per sekund i SDR, vilket resulterar i en uppskattad storlek på cirka 130 MB per minut. Däremot kommer en vanlig 1080p 30fps platt video att förbruka lite över 60–70 MB per minuts lagringsutrymme. Det extra utrymmet är reserverat för den andra vyn och rumsliga metadata, vilket gör att den stereoskopiska effekten kan uppstå.

Krav på maskinvara och programvara

Specialiserad hårdvara och mjukvara är nödvändig för att fånga och spela upp rumslig video. För att fånga rumslig video behövs en enhet med två kameror och programvara som kan synkronisera dem. Bland de första vanliga smartphones med inbyggd rumslig videoinspelning är Apples iPhone 15 Pro, iPhone 15 Pro Max och iPhone 16-serien, som kör iOS 17.2 eller senare. Under uppspelning för att uppnå den uppslukande effekten krävs en stereoskopisk skärm, t.ex. Apple Vision Pro-headsetet, som skickar varje vy direkt till dina ögon.

Ur mjukvarusynpunkt har iPhones kamera-app ett separat spatialt videoläge, och de inspelade videorna går in i Photos-appen i ett Spatial-album. Användningen av Final Cut Pro på Mac för redigering innebär att de rumsliga videorna kan importeras och exporteras för att bli ytterligare fulländade, medan AVFoundation, Apples ramverk, är det som stöder utvecklare att ändra sida vid sida stereovideo till MV-HEVC-format med rumslig metadata.

Del 3:iPhone och rumslig video (Apples implementering)

Med introduktionen av inbyggda inspelningar på iPhone 15 Pro och iPhone 15 Pro Max med iOS 17.2 har Apple helt förändrat rumslig video för vardagliga användare. För första gången gav en vanlig smartphone vem som helst möjlighet att filma 3D-videor av vilket slag som helst utan att behöva specialutrustning. Tekniken utvecklades ytterligare med iPhone 16-serien på iOS 18, vilket möjliggör mer exakt djupfångst. När det gäller iPhone 16 Pro-modellerna inkluderade detta framsteg tillägget av rumslig ljudinspelning på örat, vilket möjliggör enkel integrering av både bild och ljud.

Hur Apple använder flera linser och djupsensorer

Apples metod går ut på att slå samman huvud- och ultravida kameror för att få två olika vyer av samma objekt, precis som våra ögon. Dessa två vyer matchas med hjälp av djupsensorer och anpassas genom beräkningsfotografering för att resultera i den stereoskopiska effekten. På grund av denna blandning kan videon fortfarande visa tittaren det realistiska avståndet och storleken som om det vore en uppslukande uppspelning, men samtidigt kan den visas som vanligt (platt) på skärmarna på enheter som inte kan visa 3D.

Inspelningsenheter

Spatial videoinspelning stöds av följande enheter:

• iPhone 15 Pro och iPhone 15 Pro Max med iOS 17.2 eller senare
• iPhone 16 och iPhone 16 Plus med förbättrad djupfångst
• iPhone 16 Pro och iPhone 16 Pro Max, som inte bara spelar in 3D-video utan även spelar in rumsligt ljud

Dessa telefoner ger rumslig inspelning på en professionell nivå men i form av en smartphone, vilket gör att användaren kan spela in utan att använda några extra kameror eller andra tillbehör, vilket kan vara ganska obekvämt.

Uppspelningsenheter

Ett av de bästa sätten att njuta av rumsliga videor i sin fulla skönhet är att använda enheter som är speciellt utformade för stereoskopisk uppspelning:

• Apple Vision Pro erbjuder perfekt 3D-djup genom att ge varje öga motsvarande vy.
• Meta Quest 3, tillsammans med andra VR-headset, skulle också kunna spela upp dessa videor, men bara efter att de har konverterats till kompatibla sida-vid-sida-format.
• Dessa videor kan dessutom spelas upp i 2D på vanliga enheter som iPhone, iPad eller Mac, vilket innebär att även utan speciell hårdvara kan användare fortfarande komma åt dessa videor.

Fördelar med Apples rumsliga video

Apples lösningar ger en massa nya fördelar för den genomsnittliga användaren:

• 3D-fångst av ditt liv:Sådana ögonblick som födelsedagar, bröllop och dina resor blir för alltid med dig allt mer levande och verklighetstrogna.
• iCloud-integration när den är som bäst:Spatial videor, precis som i gamla dagar, säkerhetskopieras fortfarande automatiskt och är tillgängliga på olika enheter.
• Djupt engagemang med ljud och video:Med hjälp av rumsligt ljud som följer med iPhone 16 Pro, uppnås perfekt ljud för uppspelning på Vision Pro, vilket gör att det känns som att du stod där i det fångade ögonblicket.
• Snabb delning:Vänner som inte har 3D-kompatibla headset kan fortfarande se dessa videor i 2D-format.

Genom den briljanta kombinationen av hårdvaruinnovation, rumsligt ljud och sömlös integrering över hela ekosystemet har Apple ökat sitt spel och satt ribban för den fantastiska videoupplevelsen som du kan ha med dig i fickan.

Del 4:Hur man spelar in rumslig video

När du vill spela in rumsliga videor på din iPhone är saker och ting enkla, men låt oss inse det, du måste ha en enhet som stöder den här funktionen, såväl som rätt version av programvara och inställningar. För din 3D-videoinspelning visas en enkel stegguide nedan.

Krav

• En iPhone 15 Pro eller iPhone 15 Pro Max med iOS 17.2 eller senare, eller valfri iPhone 16-seriemodell (iPhone 16 Pro/Pro Max är rumsligt även ljudet).
• För det första, tillräckligt med utrymme på enheten för att spara inspelningarna, eftersom rumsliga videor tar upp mer utrymme, är större än vanliga 2D-videor och storleken är cirka 130 MB per minut vid 1080p, 30 fps.
• Ljus är lämpligt för rumslig video, eftersom väl upplysta miljöer rekommenderas för exakt djup.
• Om du ska känna 3D-effekten måste du ha en stereoskopisk uppspelningsenhet precis som Apple Vision Pro.

Steg för att spela in rumslig video på iPhone

Steg 1Aktivera spatial videoinspelning

Öppna först Inställningar på din Apple iPhone och gå sedan till Kamera> Format och aktivera "Spatial Video for Apple Vision Pro." Genom detta kommer alternativkameran att spela in videor i ett rumsligt (3D) format snarare än standard 2D.

Steg 2 Öppna kameraappen

iPhones inbyggda kameraapp är vad du använder för att ta bilder. I den här appen bör du byta till videoläge.

Steg 3 Håll telefonen i liggande riktning

Att spela in en rumslig video endast i landskapsläget är eftersom huvud- och ultravidvinkellinsen måste vara parallella för att de två distinkta perspektiven ska kunna fångas.

Steg 4 Håll kameran stadigt

Rama in ditt motiv och tryck på spela in. Se till att din telefon står stilla och flytta den inte plötsligt. Det stadiga skottet gör att kamerorna och djupsensorerna kan registrera parallaxen exakt och bibehålla 3D-effekten.

Steg 5 Kolla in ditt klipp

När du är klar trycker du på stoppikonen. Funktionen "Stoppa inspelning" sparar automatiskt din rumsliga video i appen Foton i albumet "Spatial".

Andra enheter som stöder rumslig video

Rumslig video är inte begränsad till iPhones. Du kan fånga eller uppleva 3D-video med olika enheter utformade för uppslukande visning.

VR/AR-headset:

• Apple Vision Pro – den primära uppspelningsenheten för iPhone-fångade rumsliga videor.
• Meta Quest 3/Pro – stöder uppspelning av 3D-videoformat sida vid sida.
• Andra headset med blandad verklighet som kan visa stereoskopiskt videoinnehåll.

Specialiserade 3D-kameror:

• Canon RF-S 3D-objektiv med kompatibla EOS R-kameror.
• Insta360 EVO och liknande hopfällbara 3D/VR180-kameror.
• Professionella riggar för filmiska VR-upplevelser.

Bästa metoder för rumslig video av hög kvalitet

För att maximera djupet och realismen i dina rumsliga videor, följ dessa riktlinjer:

• För att behålla ett stadigt grepp om din telefon eller kamera är det lämpligt att använda ett stativ eller kardan.
• För att fånga detaljer om djup tydligt bör inspelningen göras i ljusa och väl upplysta områden.
• För optimal 3D-effekt bör huvudmotivet placeras 3-8 fot från kameran.
• Flytta sakta på kameran och avstå från att göra snabba panoreringar eller skakningar.
• Djupet blir rikare när du har lager som är tydliga (förgrund, mitten, bakgrund)

Del 5:Hur man redigerar rumslig video med Final Cut Pro

Man kan utan tvekan säga att den officiella programvaran för redigering av rumsliga videor är Apple Final Cut Pro. Nämnda app stöder stereoskopiska djupdata på ett mycket bekvämt sätt; därför kan användare klippa, rendera och exportera sina rumsliga videor samtidigt som 3D-effekterna behålls.

Nyckelfunktioner för rumslig videoredigering i Final Cut Pro

• Native spatial videoimport:Ta in de rumsliga videor som du har spelat in med iPhone eller någon annan enhet som är kompatibel med programvaran utan krångel.
• Djupmedveten redigering:Du kan justera det stereoskopiska djupet för att förbereda 3D-upplevelsen för användaren.
• Färgkorrigering och betygsättning:Låt användarna justera ljusstyrkan, kontrasten och färgerna i videon för att helt fördjupa sig i de bländande bilderna.
• Stöd för rumsligt ljud:Se till att det rumsliga ljudet som spelats in med iPhone 16 Pro-modellernas mikrofon är perfekt synkroniserat med videon för en övergripande realistisk upplevelse.

Steg för att redigera rumslig video i Final Cut Pro

Steg 1 Importera din rumsliga video

Du kan antingen ansluta din iPhone till din Mac eller helt enkelt använda AirDrop eller iCloud för att överföra rumsliga videor. Efter det, starta Final Cut Pro och fortsätt till Arkiv> Importera> Media för att ladda filmerna till ditt projekt.

Steg 2Aktivera "Båda ögon"-vyn

För att komma åt stereoskopisk (3D) uppspelning av din rumsliga video i tittaren, välj alternativet "Båda ögon". Detta gör att du kan få en förhandsvisning av djupfunktionen som kommer att visas på en enhet som Apple Vision Pro.

Step3Automatisk skala och förbättra bilder

Om din rumsliga video är något beskuren eller inte passar ramen väljer du ditt klipp från tidslinjen, öppnar panelen Granskare och klickar på Skala automatiskt.

Efter det utför du färgkorrigering, gradering, filter och övergångar för den första. Om syftet med din video är att skapa en uppslukande upplevelse med rumsligt ljud (tillgängligt på iPhone 16 Pro-modeller), se till att ljud och video är perfekt synkroniserade.

Steg 4Exportera din redigerade rumsliga video

Navigera till Arkiv> Dela> Exportera fil, välj HEVC Spatial Video och spara sedan filen i ett format som är optimerat för uppspelning på kompatibla enheter, som Apple Vision Pro.

Del 6:Bonusverktyg:Wondershare Filmora – En oklanderlig redigerare

Trots att Wondershare Filmora inte kan hantera rumslig videoredigering, gör dess breda utbud av verktyg och högkvalitativa utdata det ett utmärkt alternativ för enkel videoredigering och export. Så, planera att skapa sociala medier, vloggar eller presentationsvideor från dina rumsliga bilder. Filmora-introducerade AI-verktyg kan vara otroligt snabba och användarvänliga för att redigera dessa 2D-videor.

De viktigaste styrkorna hos Filmora

• Användarvänligt gränssnitt:Ett bra val för nybörjare som vill ha professionella resultat utan timmars träning att vänja sig vid programmet.
• Redigering i hög upplösning:tillåter inte bara 4K utan även 8K-klippning för briljant tydliga bilder.
• Inbyggda filmiska effekter:Ger användning av filter, LUT, övergångar och mallar för iögonfallande resultat.
• AI-drivna verktyg:Dessa verktyg består av AI Video Enhancer, Auto Reframe, Smart Short Clips och Portrait Cutout och ger den önskade effekten snabbare och enklare.
• Avancerade ljudfunktioner:Erbjuder AI Vocal Remover, AI Audio Denoise och rumsliga ljudförbättringar som gör en publik helt uppslukad av upplevelsen.
• Snabb export och delning:Gör det möjligt för användare att snabbt och bekvämt exportera och dela sitt arbete på YouTube, TikTok, Instagram och många andra plattformar.

Varför överväga Filmora?

I kraft av sin enkelhet såväl som sin kraft befinner sig Filmora i en gynnsam position. Om du planerar att multitaska kan du använda Filmora för att redigera din standardvideo tillsammans med ditt rumsliga innehåll, eller skapa snabba, polerade klipp utan att behöva navigera i komplicerade professionella sviter som Final Cut Pro eller Premiere Pro.

Bara för att nämna några av AI-funktionerna i Filmora 14 som använder den senaste tekniken i branschen:De AI-drivna funktionerna i Filmora 14 – som Smart Short Clips, AI Video Translation och AI Portrait Cutout – är verkligen en spelväxlare för innehållsskapare som behöver arbeta snabbt och inte offra sin kreativitet i processen. Först och främst, som vi vet, kan kreativiteten vara mycket begränsad om arbetsflödet inte var smidigt och effektivt, men det är inte ditt fall om du är med Filmora.

Del 7:Hur man tittar på rumslig video

• Uppspelning på Apple Vision Pro:Apple Vision Pro är det bästa stället att visa upp dina rumsliga videor. Foto-appen plockar upp dem och spelar upp dem som komplett 3D, så att du kan titta på dem antingen i ett fönster eller i ett uppslukande läge där du får se hela scenen omkring dig.
• Visa med VR/AR-headset:Rumsliga videor kan också ses via VR-headset som Meta Quest och Oculus. De flesta av de nuvarande direktstödda headseten i spatial videoformat kan öppna filen utan problem. Om inte kan du behöva använda en app från tredje part för att konvertera filen till ett stereoformat sida vid sida och sedan ladda in den i headsetet.
• Standard 2D-visning:På gadgets utan 3D-uppspelningsmöjligheter, som de flesta mobiltelefoner, surfplattor och datorer, växlar rumsliga videor automatiskt till sina standard, platta (2D) versioner. Det här är ett sätt att säkerställa kompatibilitet, om än till priset av att man förlorar den extra känslan av djup.
• Immersive vs. flat playback:Immersive playback låter dig se allt djup, parallax och hela känslan av att vara där på scenen. Platt uppspelning använder endast det underliggande videolagret; sålunda visas den som vilken icke-3D-video som helst utan 3D-effekten.

Del 8:Så här delar du rumsliga videor

• Dela med Vision Pro-användare:Antingen via appen Foton eller molnplattformar som iCloud, Vision Pro-användare är fria att distribuera rumsliga videor. De kan helt enkelt kolla in dem i 3D på sina headset utan krångel.
• Dela med icke-Vision Pro-användare:De kommer att kunna se den delade videon i 2D om vännerna som du delar filen med inte har en 3D-enhet. För att få VR-headsetanvändare att få tillgång till videon kan du behöva förse dem med versionen som har konverterats till stereo och är kompatibel med deras enhet. Förresten, rumsliga videor tar mycket plats; därför bör du tänka på lagring och bandbredd innan du delar.

Del 9:Begränsningar och överväganden

Tekniska begränsningar

Även om en rumslig video ger en fantastisk 3D-upplevelse är tekniken fortfarande begränsad. Synvinkeln är fast, så det är inte möjligt att flytta runt scenen som i fallet med äkta 6-DoF VR-innehåll. Upplösningen kan också vara lägre än för en vanlig 4K eller högre 2D-video, särskilt efter komprimering. Utöver det tenderar rumsliga videor att ha ganska strikta krav på bildhastigheten och uppspelningsenheten för att bibehålla djup och jämnhet.

Praktiska överväganden

Det är en ganska stor utmaning att spela in en rumslig video, och kraven inkluderar bra belysning; annars blir djupnoggrannheten och kvaliteten i allmänhet lägre. Kamerarörelsen och kompositionen kan också vara mer utmanande; mjuka rörelser och korrekt utförd inramning är fördelaktigt för tittarens komfort. Dessutom tar filerna upp mycket utrymme jämfört med vanliga videor, så de lagrar inte bara mer utan även uppladdningen eller delningen kan gå långsammare.

Dessutom är en annan nackdel att rumslig video fortfarande är begränsad till användningen av specifik hårdvara för både inspelning och uppspelning, t.ex. iPhone 15 Pro och senare modeller för inspelning, och enheter som Apple Vision Pro eller vissa VR-headset för 3D-visning. Nu finns det bara en handfull professionella appar, som Final Cut Pro, som ger fullständigt stöd för rumsliga format. Därför är redigeringsverktyg fortfarande ganska begränsade.

Slutsats

Rumsliga videor revolutionerar fånga och återuppleva minnen på ett sätt som lägger till ett lager av djup och verklighet som inte ens standardvideor kan matcha. Med introduktionen av rumsliga videoinspelningar på iPhone 15 Pro och efterföljande modeller, samt uppslukande uppspelning på enheter som Apple Vision Pro och Meta Quest, blir denna teknik alltmer tillgänglig.

Ändå borde processen att redigera en rumslig eller standardvideo inte vara svår om du är nybörjare och vill ha ett kraftfullt verktyg för att utveckla dina videor – vare sig det är standard 2D eller uppslukande klipp – Filmora kommer att vara din bästa allierade. Den har användarvänlig dra-och-släpp-redigering, olika effekter och avancerade AI-verktyg som gör det enkelt för både nya och erfarna kreatörer att visa sin kreativitet.