ARKit Er Apples plattform for augmented reality

Det Er Apples Plattform For augmented reality. Gaat zowel om spill og apper for produksjon og levering. Hvis du bare møtte ARKit laten som meubels i en bepaalde ruimte eruit zien, nog voordat je ze aanschaft. Den nyeste versjonen er ARKit 4 i iOS 14 og iPadOS 14. Blant annet gjør den full bruk av den nye LiDAR-Skanneren til iPad Pro.

nedenfor kan du lese Hva ARKit er og hva Du kan gjøre med Det.

• ARKit 5 i iOS 14
• Utvidet Virkelighet
• Hva er ARKit?
• kompatible enheter
• Apper Med ARKit
• ARKit 4 i iOS 14
• ARKit 3 og 3.5
• ARKit 2

nytt i iOS 15: ARKit 5

i iOS 15 Har Apple ytterligere forbedret ARKit på følgende punkter:

• posisjonsankre I London
• forbedret Bevegelsessporing
• forbedret Ansiktssporing

posisjonsankre I London

Du får Nå Posisjonsankre i London og i flere amerikanske byer. For eksempel kan du lage DINE EGNE AR-opplevelser på berømte steder som Pariserhjulet London Eye Og Times Square. Det kan også gjøres i ditt eget nabolag. Stedsankere ble allerede innført I ARKit 4, men er nå på flere steder. DU plasserer AR-opplevelsene på bestemte steder som byer eller severdigheter. De er knyttet til en viss breddegrad og lengdegrad og en viss plass. Andre kan gå rundt de virtuelle objektene og se dem fra forskjellige vinkler, akkurat som et ekte objekt.

det fungerer på iPhone XS, iPhone Xs Max, iPhone XR og nyere og bare i enkelte byer.

forbedret Bevegelsessporing

ARKit 5 gir også forbedret Bevegelsessporing. Du fanger bevegelsene til en bestemt person i sanntid med et enkelt kamera. Kameraet kjenner kroppsposisjonen og vet også hvor visse ledd og bein er plassert, samtidig som det er i stand til å estimere kroppslengde.

dette fungerer på iPhone 12-serien og iPad Pro i alle apper som er opprettet Med ARKit, uten at utviklere må endre koden sin.

forbedret Ansiktssporing

det er mulig å spore ansikter med frontkameraet I ARKit 5, slik at DU også kan bruke ar-opplevelser med Det. Det støttes i tillegg på ultra-vidvinkelkameraet på iPad Pro 2021. Du kan deretter spore Tre Ansikter samtidig Med TrueDepth-kameraet, for Eksempel I Snapchat og Når Du bruker Memoji. Sporing av flere ansikter brukes også Til Senterstadiet, hvor du alltid holder deg i bildet mens du chatter. Flere forklaringer om Ansiktssporing for utviklere finner du her.

ansiktssporing via frontkameraet fungerer på alle enheter Med En a12 Bionic-chip, og sporing av tre ansikter samtidig fungerer på iPad Pro 2021 og nyere.

det er også noen andre små forbedringer, for eksempel et Nytt Appklipp – kodeanker for å feste virtuelt innhold fra Appklippet eller ARKit-appen. I tillegg er det mulig å oppdage opptil 100 bilder om gangen.

nedenfor kan Du se En video Fra Apple Om ARKit 5, beregnet for utviklere:

augmented reality Med ARKit

ARKit ble annonsert UNDER WWDC i 2017 og har vært tilgjengelig for iPhone og iPad siden iOS 11. AR staat voor augmented reality, oftewel toegevoegde realiteit. Augmented reality viser deg mer i apper. Den er en av de mest populære Spillene I Hele Verden. Med augmented reality har du et digitalobjekt som kan brukes til å realisere, og kameraet på iPhone. Det er også et objekt som er bygget, og det er et stort område, i et eget hjem. Meer over hva augmented reality precies er, les du i onderstaande gids.

Hva er ARKit?

ARKit Er Apples egen plattform for utvidet virkelighet. Utviklere kan bruke DEN til å bygge AR i apper for iPhone og iPad. Takket Være Arkits verktøy trenger ikke utviklere å programmere kompliserte interaksjoner selv. De kan gjøre bruk Av byggesteinene Som Apple allerede har opprettet. Det har lenge vært mulig å lage applikasjoner for forstørret virkelighet, Men ARKit gjør det mye enklere for utviklere. I tillegg ser det ofte mye bedre ut.

For ARKit bruker Apple En rekke teknikker, inkludert Visual Inertial Odometry (VIO). Med denne teknikken kan miljøet skannes. Ved å kombinere VIO med bevegelsesinformasjon fra sensorene i iOS-enheten, vet enheten hvordan du beveger deg. Bildet kan da bevege seg sammen. Core Motion brukes til dette.

Takket være kameraet i iPhone og iPad kan ARKit gjenkjenne horisontale og vertikale flater, for eksempel bord, gulv og vegger. Alle typer virtuelle objekter kan plasseres på disse flyene.

ARKit bruker også kameraet til å bestemme mengden lys og forekomsten av lys i et rom. Basert på dette kan bildet gjøres så realistisk som mulig. Objektet ser faktisk ut til å være i miljøet, med de riktige skyggene og samme grad av eksponering som de andre gjenstandene i rommet.

Apples AR-verktøy fungerer også Med Metall, SceneKit og tredjepartsverktøy Som Unity og Unreal Engine, to verktøy som vanligvis brukes i spillutvikling.

på hvilke enheter Fungerer ARKit?

Augmented Reality krever nødvendig prosessorkraft og fungerer derfor ikke på alle iPhone, iPad og iPod touch. De grunnleggende funksjonene til augmented reality-funksjonen krever en iOS-enhet med Minst a9-prosessor. Det betyr fra iPhone 6s og 9,7-tommers iPad Pro.

Arkits grunnleggende funksjoner fungerer på følgende modeller:

• iPhone 6s Og iPhone 6s Pluss og nyere
• iPhone SE (første generasjon) og nyere
• iPad (2017) og nyere
• iPad Pro (alle generasjoner)

Apple utgir jevnlig oppdateringer for ARKit. Dette er vanligvis ledsaget av den årlige store programvareoppdateringen, men noen ganger også i mellom. Enhetene som kan bruke visse funksjoner, varierer per ARKit-versjon.

ARKit 4 ser bedre ut

Under WWDC 2020 annonserte Apple ARKit 4. Her er de viktigste innovasjonene:

• Dybde API
• Plasseringsankre
• forbedret Ansiktssporing

Dybde API

med Den nye Dybde API kan utviklere gjøre Enda mer detaljerte dybdemålinger med LiDAR-Skanneren i iPad Pro. Informasjon om den absolutte avstanden til et objekt beregnes per piksel. Sammen med ANDRE ar-triks er virtuelle objekter bedre plassert i rommet og ser enda mer realistiske ut. Det tar også mindre tid for et objekt å bli plassert.

Lokasjonsankre

Lokasjonsankre Er AR-objekter som kan festes til virkelige steder av en app. Utviklere kan bestemme dette med nøyaktige koordinater. Brukere kan gå rundt disse objektene som om de var museumsbiter. En realistisk søknad om denne teknikken er for en byvandring app. For eksempel, hvis du går gjennom en middelalderby, kan en slik app slippe objekter som gjør at det virker som om Du er I Middelalderen. Apple sier at dette bare er tilgjengelig i» visse » byer.

mer omfattende Ansiktssporing

Ansiktssporing eksisterte allerede for ARKit, men Fra ARKit 4 fungerer Den også med selfie-kameraet. Du kan spore opptil tre ansikter samtidig. Med det gjør iPhone det mulig å lime inn mer realistiske filtre over ansiktet ditt mens du tar et bilde. Apple nevner Selv Snapchat som et eksempel på en app som kan dra nytte av dette. Det fungerer for enheter Med En A12 Bionic chip og nyere.

ARKit 3 Og ARKit 3.5: utvidet virkelighet ytterligere forbedret

Det har vært to versjoner Av ARKit 3, nemlig versjon 3 og 3.5. Nedenfor kan du lese om innovasjonene som disse versjonene brakte.

• ARKit 3,5
• ARKit 3

ARKit 3.5

I ARKit 3.5 forbedret Apple noen deler som hovedsakelig var fokusert på Den nye LiDAR-Skanneren på iPad Pro på den tiden.

Scenegeometri

denne funksjonen lar en app lage et geometrisk kart over miljøet. Enheten er mer oppmerksom på gulv, vegger, tak, vinduer, dører og stoler, noe som gjør at virtuelle objekter bedre kan posisjonere seg i det faktiske miljøet.

Instant AR

det er ikke lenger nødvendig å kalibrere EN AR-app, fordi Takket Være LiDAR-Skanneren gjenkjenner appen et miljø direkte. DU kan umiddelbart plassere AR-objekter i miljøet. ALLE AR-apper bruker dette umiddelbart på den nyeste iPad Pro.

forbedret Bevegelsesopptak og Okklusjon av Mennesker

Siden ARKit 3 er apper for utvidet virkelighet mer oppmerksomme på at folk går rundt i miljøet. SOM et resultat vises ar-objekter pent bak en person når han går foran dem. I kombinasjon Med ARKit 3.5 på iPad Pro har dette blitt ytterligere forbedret. Måling av høyden har også blitt ytterligere optimalisert takket være forbedret bevegelsesopptak. Også her er det ikke nødvendig med endring i koden TIL EN AR-app.

ARKit 3

ARKit 3 er en del av iOS 13 og Ipados 13 og dukket opp høsten 2019 for alle med en passende enhet. Det inkluderte to store innovasjoner: slik at folk kan gå rundt I ET AR-miljø og fange bevegelse. I Tillegg lanserte Apple verktøyene RealityKit og Reality Composer, som gjør det enklere å lage AR-apper.

Folk Okklusjon

Den nye Folk Okklusjon funksjonen betyr at du kan la folk gå rundt i en app i sanntid. Folk ser ikke lenger ut som et spøkelse, men kan gå gjennom bildet. Objekter tar også hensyn til dette og vil bli sett foran eller bak personen. En person kan derfor også gå forbi et veldig stort ar-objekt og bli usynlig.

motion capture

Motion capture lar utviklere fange folks bevegelse og holdning og bruke den som input for DERES AR-applikasjoner. Dette gjør at du kan fange bevegelsen til en person i sanntid med et annet kamera. IPhone forstår kroppsposisjonen og konverterer den til stillingen til en dukke. Tidligere trengte du en spesiell dress for dette. Kameraet overvåker posisjonen til lemmer og ledd.

samtidig bruk av kamera foran og bak

Siden ARKit 3, kan du samtidig bruke ansiktsgjenkjenning og anerkjennelse av objekter i den virkelige verden. Dette skyldes At ARKit kan kombinere bilder av kameraer foran og bak. For eksempel kan du kontrollere objekter med ansiktet ditt.

arbeide sammen I AR-spill

med såkalte samarbeidsøkter kan du bygge et felles verdenskart, hvor begge spillerne kan delta. Dette gjør det enklere for utviklere å lage delte AR-opplevelser for flerspillerspill.

RealityKit

RealityKit er et rammeverk for utviklere å lettere flette virtuelle objekter med den virkelige verden. De vises automatisk i riktig skala, på Flere Apple-enheter. Den styrer også nettverkskrav og delte ar-opplevelser. Det inkluderer fotorealistiske effekter for miljøet og kameraet, flere animasjoner og lydeffekter. Det fungerer opprinnelig Med ARKit og har En Swift API.

Reality Composer

Reality Composer lar utviklere bygge interaktive scener med FULL AR-støtte. Det er hundrevis av virtuelle objekter tilgjengelig for dem å importere til sine apps. Disse virtuelle objektene kan leveres med animasjoner og kan svare på skjermkraner, nærhet og andre utløsere. Den kan brukes I Xcode og som en iOS-app.

ARKit 2

Under WWDC 2018 annonserte Apple ARKit 2. ARKit 2 var en del av iOS 12 og introduserte en rekke nye funksjoner og funksjoner. Dette var de viktigste forbedringene:

• delte opplevelser: flerspiller ar
• vedvarende AR: fortsett AR senere uten å starte på nytt
• bildegjenkjenning og sporing: gjenkjenning AV 3d-objekter og reelle refleksjoner
• USDZ: nytt filformat for apper med utvidet virkelighet

flerspillerspill i AR

Siden ARKit 2 kan Du også spille flerspillerspill i AR. For eksempel står du, hver med sin egen iPad eller iPhone, mot hverandre mens du skyter lasere på hverandre. Bortsett fra spill, fungerer dette også med alle ANDRE AR-apper. Tenk for eksempel på en app som lar deg pusse opp hjemmet ditt. Utviklere får også muligheten til å bygge i en tilskuermodus. Dette lar deg se hvordan ET AR-spill går, uten å måtte spille aktivt sammen.

vedvarende AR

takket være en funksjon som heter vedvarende AR, kan du fortsette der du sluttet. Sett opp hjemmet ditt igjen takket være EN AR-app, slik at du kan se hvordan den nye sofaen eller spisebordet ser ut i hjemmet ditt. Hvis du vil fortsette å dekorere på et senere tidspunkt, trenger du ikke å starte om igjen med vedvarende AR. Virtuelle objekter som du plasserer i hjemmet via iPhone eller iPad er rett og slett igjen. Dette vil også komme til nytte når du lager et helt kunstverk i forstørret virkelighet.

bildegjenkjenning og sporing

Siden ARKit 2 kan 3D-objekter også oppdages, i tillegg til bare horisontale og vertikale flater. Tenk på leker, for eksempel. I TILLEGG kan refleksjoner projiseres på objektene som er synlige I AR. Takket være disse forbedringene, bør EFFEKTEN AV AR være enda mer realistisk enn før. Apple lanserte også en måleapp for å måle området, men det fungerte bare for horisontale og vertikale avstander.

USDZ:

Apple og Pixar utviklet USDZ filformat, basert På Universal Scene Beskrivelse system laget Av Pixar. Takket VÆRE USDZ kan nettsteder, apper og designere lage 3D-bilder som kommer til liv på iPhone og iPad. USDZ fungerer I Meldinger, Safari, Mail, Filer og mer, og gir disse bildene liv i disse appene. Hvis en nettbutikk legger USDZ-versjoner AV sine produkter på nettstedet, kan du plassere disse elementene i den virkelige verden takket Være Quick Look. Så du trenger ikke å laste ned EN hel AR-app, fordi BARE det spesifikke objektet kommer til liv takket VÆRE USDZ. USDZ ER et open source-format, slik at alle kan komme i gang med det.

Apper med ARKit

utviklere har allerede gitt ut en rekke apper som bruker ARKit. Fra apps som lar deg lage et kart over ditt hjem, Til Morsomme spill der du styrer et lite fly. I veiledningen nedenfor har vi samlet en liste over utvidede virkelighetsapper som bruker ARKit, slik at du selv kan oppleve nøyaktig Hvordan ARKit fungerer.