Realitatea virtuală: tot ce trebuie să știi. Viitorul și VR

Aceasta este o nouă direcție interesantă în dezvoltarea aplicațiilor. Acesta anunță noi formate de povestire și multe altele moduri eficiente transmiterea emotiilor si senzatiilor.

Dacă anterior, crearea unor astfel de aplicații necesita echipamente scumpe și abilități speciale, acum dezvoltarea realității virtuale a devenit accesibilă datorită instrumentelor și tehnologiei intuitive care se găsesc în cel mai apropiat magazin de electronice. În acest tutorial, vă vom prezenta cum să creați o aplicație video la 360 de grade pentru Android în zece minute. Nu sunt necesare abilități de programare.

Ce vei avea nevoie

Un telefon cu un giroscop care rulează Android KitKat sau mai nou.

Unity3D este un motor de jocuri multiplatformă, versiunea 5.6 și o versiune ulterioară.

Video la 360 de grade.

Cum se creează o aplicație?

Dacă un videoclip obișnuit este limitat de un cadru dreptunghiular, atunci un videoclip panoramic are forma unei sfere. Prin urmare, mai întâi vom crea un ecran sferic pe care va fi proiectat un videoclip cu vedere la 360 de grade. Jucătorul (sau observatorul) se va afla în această sferă și va putea vizualiza videoclipul în orice direcție.

Pasul 1: Construiește sfera ?

Să creăm un proiect nou în Unity sau o scenă nouă dacă dorim să integrăm playerul video într-un proiect existent. Gândiți-vă la Scenă ca la un nivel al jocului și la Project ca la întregul joc.

Plasați o sferă (obiect 3D → Sferă) cu o rază de 50 ( Scară= 50, 50, 50) până în centrul scenei ( Poziţie= 0, 0, 0). Setați poziția camerei la 0, 0, 0. Camera este ochii jucătorului: dacă o plasați decentrat, videoclipul va fi distorsionat.

Amplasând camera în interiorul sferei, nu o mai vedem pe scenă. Acest lucru se întâmplă deoarece majoritatea motoarelor de joc nu afișează interiorul obiectelor 3D, deoarece aproape niciodată nu trebuie să-l vedem, ceea ce înseamnă că nu trebuie să irosim resurse pentru randare.

Pasul 2: Flip Sphere Normals ?

În cazul nostru, trebuie să privim sfera din interior, așa că o vom întoarce invers.

În Unity, sferele sunt de fapt poliedre, formate din mii de margini minuscule. Laturile lor exterioare sunt vizibile, dar laturile lor interioare nu sunt. Pentru a vedea sfera din interior, trebuie să întoarceți aceste fețe. În termeni de geometrie 3D, această transformare se numește inversare normală.

Să aplicăm programul Shader La Material sfere. Materialele din Unity controlează aspectul obiectelor. Shaders sunt mici scripturi care calculează culoarea fiecărui pixel redat pe baza informațiilor despre material și iluminare.

Să creăm un nou Material pentru sferă, să-i aplicăm un Shader, al cărui cod poate fi copiat de aici. Acest shader va roti fiecare pixel al sferei, iar interiorul sferei va arăta ca o bilă mare albă.

Pasul 3: Proiectați un videoclip panoramic în interiorul unei sfere?

Importați un videoclip mp4 la 360 de grade în proiectul dvs. și transferați-l în sferă. Va apărea componenta Video Player și videoclipul va fi gata de redare. În fereastra acestei componente puteți seta repetarea nesfârșită și puteți regla setările de sunet.

Nota ed.

Dacă nu aveți propriul videoclip de acest tip, puteți utiliza videoclipurile altor persoane care sunt distribuite gratuit pe Internet.

Pasul 4: Configurați suportul Google Cardboard?

Folosind SDK-ul GoogleVR, vom crea o imagine stereoscopică. Combinația dintre efectul ochi de pește aplicat pe ambele părți ale ecranului divizat și distorsiunea lentilelor din plastic Google Cardboard creează iluzia de profunzime și imersiune în realitatea virtuală.

1. Pentru a adăuga SDK-ul GoogleVR la proiect, descărcați și importați pluginul. Apoi, ajustați setările Android: Selectați din meniul de susFișier → Build Settings
2. . Adăugați o scenă dacă nu a fost deja adăugată și selectați Android din platformele sugerate. Faceți clic pe Platformă de comutare
3. . Adăugați o scenă dacă nu a fost deja adăugată și selectați Android din platformele sugerate. . Schimbarea platformei va dura ceva timp. Setările jucătorului

. Componentele vor apărea în panoul de instructor. . Schimbarea platformei va dura ceva timp.În fereastră in sectiune:

• Alte setari Bifați caseta Realitatea virtuală acceptată . În fereastra pop-up SDK-uri de realitate virtuală faceți clic pe +, adăugați la listă.
• Carton Alegeți un nume unic pentru aplicația dvs. și introduceți-l în câmp Identificator de pachet
• . Numele unice ale aplicațiilor Android iau de obicei forma unui nume de domeniu invers, cum ar fi com.example.CoolApp. Puteți citi mai multe despre acest lucru în documentația oficială și Wikipedia. Pe meniu Nivel minim API selecta.

Android 4.4 Kit Kat (API Nivel 19) În panoul Project Browser din folder GoogleVR/Prefabs selectați elementul GvrViewerMain 0, 0, 0 .

și trage-l pe scenă. Dați-i aceeași poziție cu centrul sferei: prefabricat controlează toate setările modului de realitate virtuală, de exemplu, adaptând ecranul la lentilele Cardboard. De asemenea, primește date de la giroscopul telefonului pentru a urmări rotația și înclinarea capului. Când întoarceți capul, se va întoarce și Camera din playerul video.

Pasul 5: Lansați aplicația pe Android ?

Acest lucru se poate face în două moduri diferite:

• Selecta Selectați din meniul de susFișier →. Folosind un cablu USB, conectați telefonul la computer, activați depanarea USB și apăsați Construiți și rulați. Aplicația se va descărca imediat pe telefon.
• Sau faceți clic Numai construiți. Aplicația nu va fi descărcată pe telefon, dar va fi generată într-un fișier APK care poate fi trimis altor persoane sau încărcat în magazinul de aplicații mobile.

În timpul procesului de construire, vi se poate cere să selectați folderul rădăcină Android SDK. În acest caz, descărcați SDK-ul Android și specificați locația folderului acestuia.

Mai rămâne doar să lansați aplicația și să introduceți telefonul în Cardboard. Acum puteți experimenta o realitate virtuală captivantă la 360 de grade în confortul propriei case.

Ce urmează

Felicitări, ați creat o aplicație video la 360 de grade! Acum sunteți cu un pas mai aproape de dezvoltarea unei aplicații video de realitate virtuală. Da, există o diferență între ele. În primul caz, observatorul poate privi doar în orice direcție. În al doilea caz, se adaugă interactivitate, adică controlul asupra obiectelor.

Aplicația pe care tocmai ai creat-o poate servi drept punct de plecare pentru construirea unei experiențe de realitate virtuală mai diversă. De exemplu, în Unity puteți suprapune obiecte 3D și efecte de particule peste videoclipul dvs.

De asemenea, puteți încerca să plasați o imagine 3D a unui mediu în interiorul playerului video panoramic și să utilizați playerul video ca un skybox. Pentru a naviga utilizatorul prin mediul creat, puteți utiliza acest lucru

Studio NMASîmpărtășește experiența reală cu începătorii.

Clienții Nanobotmodels Medical Animation includ cele mai mari studiouri de animație, institute, organizații de cercetare medicală, birouri regionale ale celor mai mari companii farmaceutice din SUA, Australia, Marea Britanie, Rusia, Ucraina, Belarus, Kazahstan și multe altele.

În timp ce creează un alt videoclip sau o aplicație medicală interactivă, Yuri vede chiar și ceva de neînțeles IT- către jurnalist:

Dacă transferați acest lucru pe un dispozitiv de realitate virtuală, obțineți ceva de genul acesta:

Și cam așa a arătat această demonstrație pentru mine: VR-cască:

Cu animație 3D de la NMAS Am făcut o călătorie prin viruși herpetici simpli în interiorul unei celule nervoase din corpul uman, am văzut funcționarea sinapselor creierului și formarea unui răspuns imun - frumos, interesant și, după cum am înțeles, fiabil din punct de vedere științific. Cred că pentru fiecare sfat de la creatorul a ceva de genul acesta trebuie să asculte.

1. Spune o poveste interesantă - nu este nevoie de roller coaster.

Experiența în realitate virtuală nu este de o importanță capitală. Astăzi pe piață există diverse VR-există mult conținut, dar sunt foarte puține proiecte cu adevărat interesante. Prin urmare, în primul rând, decideți asupra ideii - ar trebui să fie cel mai interesant și neobișnuit.

Un roller coaster nebun VR Astăzi este suficient - nu vei surprinde pe nimeni cu ele. Dar practic nu există puzzle-uri logice captivante, dacă vorbim de jocuri - cel puțin, nu s-a făcut încă nimic valoros în această direcție.

Înainte de a începe proces creativ Familiarizați-vă mai bine cu elementele de bază ale lucrului cu realitatea virtuală, care sunt subliniate perfect în acest videoclip:

2. Alegeți platforma potrivită - începeți cu mobil

Principiile creării de conținut pentru realitatea virtuală astăzi sunt practic aceleași de la platformă la platformă. Mai mult, materialul creat pentru unul dintre dispozitivele disponibile astăzi poate fi portat pe altul fără probleme majore - principalul lucru este că are suficientă performanță.

Yuri recomandă pentru începători începe cu realitatea virtuală mobilă, pentru lucrul cu care un computer mai mult sau mai puțin productiv, un smartphone modern, precum și un simplu ieftin VR-caz - se va potrivi Gear VR, Mattel View-Master sau cel mai comun faceți clic pe +, adăugați la listă din Google.

Acest videoclip explică perfect problema diferitelor dispozitive pentru a intra în realitate virtuală - ele arată imediat cum să împacătuiți primul dvs. faceți clic pe +, adăugați la listă din carton:

3. Explorează motorul și interesează-te - nu încetează să uimești

În studio NMAS sunt siguri că dezvoltatorul nu mâncați mai mult de 15 minute pentru a interesa utilizatorul într-o aplicație video 3D sau de realitate virtuală interactivă. Chiar și cel mai curios pur și simplu nu poate rezista mai mult timp, așa că trebuie să începi să surprinzi de la bun început.

Mai mult, markerii de atenție trebuie identificați clar în lumea virtuală pentru ca utilizatorul să nu rateze cele mai interesante lucruri, trebuie menținută continuitatea narativă și trebuie definite puncte de intrare și ieșire în fiecare dintre spațiile care i se arată.

Pentru a face această problemă mai transparentă, vă recomandăm să citiți postarea, care explică în cel mai bun mod posibil principalele probleme ale lucrului cu cei mai populari VR-motor - Unitate:

4. Concentrați-vă pe calitate - utilizatorii nu ar trebui să sufere de rău de mișcare

Yuri sfătuiește să se concentreze nu pe indicatorii cantitativi, ci pe cei calitativi. Cu cât se dovedește a fi mai bine gândită și mai detaliată lumea virtuală din jurul utilizatorului, cu atât va fi fericit să petreacă mai mult timp în ea.

Cu toate acestea, în în acest caz, trebuie luate în considerare limitarea performanței platforme diferite. Astăzi este extrem de insuficientă, așa că va trebui să se sacrifice ceva în orice caz - calitatea texturilor, dimensiunea locațiilor și așa mai departe. Principalul lucru este că în timp ce studiezi lumea virtuală Nu ar trebui să existe întârzieri sau erori - acest lucru va provoca imediat greață și amețeli la utilizator.

Poate că caracteristica cheie a primului tău proiect, care te va face să închizi ochii la calitatea implementării, va fi o realitate mixtă - informațiile despre aceasta sunt cel mai bine prezentate în acest videoclip:

5. Ai răbdare și nu rata momentul - începe acum

Cel mai bun moment pentru orice demers este astăzi. Cu cât începi mai devreme să studiezi realitatea virtuală în principiu și să dezvolți conținut pentru aceasta în special, cu atât mai bine. ÎN NMAS sunt sigur că pt VRŞi AR viitor, așa că studioul s-a concentrat mult timp pe crearea unor astfel de materiale pentru specificul său medical.

1. Studierea echipamentului

• Fotogrammetrie și scanare 3D
• Explorați introducerea lui Oculus în poziționarea spațială audio și acest videoclip Audio 3D: proiectarea sunetelor pentru VR.

4. Introducerea interactivității

1. Studierea echipamentului

• Fotogrammetrie și scanare 3D
• Explorați introducerea lui Oculus în poziționarea spațială audio și acest videoclip Audio 3D: proiectarea sunetelor pentru VR.

4. Introducerea interactivității

. Odată ce ați stăpânit elementele de bază, puteți trece la idei mai mari. Dar e mai bine să începem cu. Dezvoltați-vă treptat, creând mai multe proiecte, veți putea aborda sarcini mai complexe cu mult mai multă încredere.

Experții cred că până în 2020 industria realității virtuale va fi evaluată la 30 de miliarde de dolari, iar VR se îndreaptă acum către această cifră cu pași uriași.

Cu sprijinul Microsoft, care a lansat un curs de dezvoltare a aplicațiilor pentru realitate virtuală, publicăm materiale despre de ce ar trebui să înveți să dezvolți aplicații VR.

Scriitorul și regizorul francez Antonin Artaud cu greu credea că termenul „realitate virtuală”, pe care l-a inventat, se va transforma până în 2016 într-una dintre cele mai promițătoare și mai scumpe industrii de calculatoare. Artaud a folosit pentru prima dată termenul într-o colecție de eseuri numită The Theatre and Its Double în 1938. Desigur, nu s-a vorbit despre ochelari de realitate virtuală, magazine de software și aplicații. Artaud a numit realitatea virtuală natura iluzorie a personajelor și obiectelor din teatru.

Realitatea virtuală în sensul său obișnuit a fost popularizată de programatorul, scriitorul și muzicianul Jaron Lanier. La mijlocul anilor 80, compania pe care a creat-o, VPL Research, deținea drepturile asupra majorității brevetelor în domeniul VR. Iar adevăratul boom al realității virtuale la acea vreme a fost oferit de filmele „The Lawnmower Man” și „Brainstorm”, precum și de cartea lui Howard Reingold „ Realitatea virtuală».

Acum toată lumea știe despre realitatea virtuală într-o măsură mai mare sau mai mică. La sfârșitul anului 2015, compania de analiză Statista a realizat un studiu în rândul rezidenților din SUA. Tuturor respondenților li s-a pus aceeași întrebare - „Ești interesat de realitatea virtuală?” - și ați rugat să vă evaluați dobânda pe o scară de cinci puncte. Doar 7% și-au evaluat dobânda drept unu, 5% ca două. 44% au spus că sunt 5 puncte interesați și 26% 4 puncte.

În orice studiu privind realitatea virtuală, totul se reduce într-un fel sau altul că industria va înflori. Profiturile din produsele software vor crește de aproape 60 de ori până în 2018, numărul de utilizatori până în același an va crește la 171 de milioane, iar profiturile din vânzarea căștilor de realitate virtuală vor crește de la 685 de milioane de dolari la 3,89 de miliarde de dolari.

VR este o industrie ideală și pentru dezvoltatori. Este relativ nou, ceea ce înseamnă că nu a fost încă format și nu este plin de specialiști, este interesant, iar volumul investițiilor în el este acum catastrofal de mare. Desigur, dezvoltatorii înșiși înțeleg acest lucru. Nu există statistici privind numărul de dezvoltatori din industria VR, dar se știe că doar Kitul de dezvoltare Oculus Rift a fost achiziționat în cantități de peste 175.000.

Potrivit inginerului VR Liv Eriskon, una dintre principalele întrebări pe care i le pun programatorii este „Câți bani și timp va trebui să investesc pentru a învăța cum să lucrez cu VR?” Având în vedere prețul de 600 USD pentru primele versiuni ale Oculus Rift, acest răspuns nu ar fi fost foarte încurajator în trecut. Acum că există Cardboard și aproape toată lumea are un smartphone, aceasta nu este o problemă.

În ceea ce privește intervalul de timp, răspunsul este mai vag. Potrivit lui Erickson, multe depind de nivelul de pregătire și de capacitatea de a învăța. „Dacă sunteți familiarizat cu C# și Unity, atunci lucrurile vor merge mult mai repede”, spune inginerul.

Salariul unui programator VR depinde de specializarea pe care o alege, dar, în general, este mai mare decât media pieței. Specialiștii care lucrează în mediul medical și financiar primesc cel mai mult. În ciuda faptului că atenția mass-media este concentrată asupra social mediași jocuri, lucruri nu mai puțin interesante se întâmplă în domeniul medicinei și al afacerilor. De exemplu, startup-ul MindMaze dezvoltă spații virtuale pentru recuperarea pacienților după atacuri de cord. Vivid Vision creează jocuri pentru a trata ambliopia - o boală care slăbește vederea - și strabismul.

În mediile de afaceri și corporative, realitatea virtuală se dezvoltă cu o viteză nu mai mică. SDK Lab creează spații virtuale pentru formarea angajaților companiilor miniere, Autodesk experimentează utilizarea VR în industria imobiliară, iar IrisVR creează instrumente pentru modelarea 3D a obiectelor.

Problema dezvoltatorilor este că există multe căști VR. Oculus, Microsoft Hololens, Samsung Gear VR, Google Cardboard - aceste dispozitive îmi vin imediat în minte. Există și HTC Vive, Project Morpheus, Visbox, Fove, StarVR – și de fapt sunt chiar mai mulți. Dezvoltatorii sunt de acord că, indiferent de platforma aleasă, principiul de învățare este aproximativ același. Primul pas este să înveți C++ sau C#, apoi Unity sau Unreal, deoarece acestea sunt cele mai frecvente SDK-uri folosite la dezvoltarea aplicațiilor de realitate virtuală.

O altă întrebare este de unde să începi antrenamentul. În prezent, nu există mai mult de 10 universități din întreaga lume care oferă cursuri de dezvoltare VR. Cele mai multe dintre ele sunt situate în Statele Unite și doar câteva în afara acesteia, în Norvegia și Singapore. Opțiune bună- studiază independent. Pentru a face acest lucru, este recomandabil să aveți deja abilități de dezvoltare. Puteți începe să învățați cu tutoriale video despre instrumentul de dezvoltare Unity.

După ce v-ați familiarizat cu mediul Unity, puteți trece la un curs Microsoft mai avansat. Este dedicat creării de aplicații virtuale și de realitate extinsă. Cursul este format din zece module. Primele sunt introductive și sunt dedicate discuției despre elementele de bază ale realității virtuale, utilizarea căștilor VR și principiile creării de programe VR în Unity.

Spre final, instructorii cursului vorbesc despre detalii tehnice mai complexe. De exemplu, în a patra lecție vorbim despre crearea de software pentru casca Fibrum. În al cincilea - despre caracteristicile interacțiunii utilizatorului în realitatea virtuală: cum să salvezi utilizatorul de disconfort și dificultăți de control. Ultimul modul este dedicat creării de aplicații de înaltă performanță în C++/DirectX.

Cursul este predat de evangheliștii Microsoft Rusia Dmitri Soșnikov și Dmitri Andreev, director tehnic al agenției de marketing MAAS Alexander Kondratov și fondator al companiei de dezvoltare de aplicații VR VR-AR Lab Artyom Pecheny.

Cursul în sine este mai degrabă tehnologic; învață elementele de bază ale dezvoltării aplicațiilor de realitate virtuală pentru dispozitive mobile. Pentru a dezvolta o aplicație sau un joc de succes, mai aveți nevoie de câteva componente: o idee potrivită pentru realitatea virtuală, abilități de dezvoltare a jocurilor în Unity, abilități în crearea de modele 3D pentru VR și un model de afaceri - idei pentru o posibilă comercializare a aplicarea.

În orice caz, trebuie să încercăm. Veniți cu o idee și încercați să o implementați în practică. Chiar dacă unele componente lipsesc, acesta nu este un motiv pentru a amâna procesul. Piața aplicațiilor VR este încă destul de liberă și trebuie să începem să acționăm chiar acum! În același timp, din punct de vedere tehnologic, totul nu este foarte dificil folosind experiența noastră, puteți învăța cum să creați aplicații VR în câteva zile;

La noi, sprijinim dezvoltatorii pe platforma noastră, de exemplu, în decembrie a avut loc un hackathon pe VR/AR, la competiția studenților Imagine Cup. o serie intreaga proiecte VR pentru studenți care au primit premii. Trebuie să începem să acționăm și să schimbăm această lume în bine.

VR va schimba multe industrii. În primul rând, bineînțeles, îmi vin în minte jocurile și divertismentul. În plus, o clasă separată de aplicații este video 360 sau teleprezență, când utilizatorul poate fi transportat „virtual” în alt loc. Astfel de proiecte au sens în domeniile educației, turismului și așa mai departe.

Dar ceea ce este cu adevărat cel mai interesant este să ne uităm la modul în care VR sau AR pot fi utilizate în aplicații non-gaming. De exemplu, în predare, VR poate permite elevilor să privească în interiorul unui fenomen sau proces, fie că este vorba despre mișcarea planetelor sau o reacție atomică. Probabil că VR poate schimba și stilul de comunicare al oamenilor, pentru că nu degeaba Facebook a achiziționat la un moment dat compania Oculus VR.