Google käytti mannekiinihaasteen youtube-videoita kouluttaakseen ai

Sisällysluettelo:

Mitä sinun tarvitsee tietää
Hanki lisää Pixel 3a
Google Pixel 3a

Mitä sinun tarvitsee tietää

Google kouluttaa AI: taan luomaan syvyyskarttoja, jotka eristävät kohtauksen ihmisen aiheet vain yhdellä kameralla.
Lähtökohtana Google käytti 2000 Mannequin Challengen YouTube-videota AI: n kouluttamiseen.
Tulokset johtavat kykyyn lisätä tehosteita videoihin, kuten muototilaan, ja niitä voidaan käyttää lisätyn todellisuuden kanssa.

Äskettäisessä blogiviestissä Google kertoi, kuinka se on toiminut syvyyshavainnoissa videoissa, joissa sekä kamera että kohde liikkuvat. Lähtökohtana tutkimus tarvitsi pääsyn valtavaan määrään tietoja AI: n kouluttamiseksi, ja ensimmäinen looginen askel oli sen kouluttaminen ihmisten havaitsemiseksi kohtauksessa, jossa kamera liikkui, mutta ihmiset olivat staattisia.

Kuten osoittautuu, Googlella oli täydellinen resurssi näihin tietoihin Mannequin Challenge -elokuvalle kuvattujen YouTube-videoiden muodossa. Tässä haasteessa henkilö tai ihmisryhmä seisoo täysin liikkumattomana kamerana panoroidessaan asemansa ympärille. Google käytti haasteesta 2000 videota auttamaan AI: ta tunnistamaan ihmishahmot monissa erilaisissa kohtauksissa.

Jotakin, joka tekee tästä tutkimuksesta entistä mielenkiintoisemman, on se, että Google opettaa AI: tä luomaan syvyyskarttoja käyttämällä materiaalia, joka on kuvattu vain yhdellä kameralla. Useimmiten useita kameroita on käytettävä kohtauksen syvyystietojen havaitsemiseen.

Google käyttää jo jotain vastaavaa still-kuvissa luodakseen muotokuvaustilansa Pixel-puhelimiin. Tämä koskee kuitenkin vain still-kuvia. Uusi menetelmä, jota Google on kehittänyt, kouluttaa AI: tä luomaan syvyyskartan, jossa sekä kamera että kohde liikkuvat kohtauksen sisällä.

Haarautumalla videoiksi, se avaa tulevaisuudessa ominaisuuksia luoda bokeh videokohtauksissa, jotka ovat samanlaisia kuin puhelimen muototila. Toinen tämän tutkimuksen hyöty on parannetut tulokset lisätyssä todellisuudessa, kuten Playmojikset Googlen leikkikentältä.

Toinen mahdollisuus on 3D-kuvien tuottaminen 2D-kohtauksista. Kameralaitteet ovat aina olleet välttämättömiä valokuvaamisessa ja videokuvauksessa, mutta se, mitä Google on vuosien varrella suorittanut ohjelmistoilla, osoittaa, että tulevaisuudessa algoritmit ovat yhtä tärkeitä ja auttavat tarjoamaan uusia kokemuksia.