Miten tekoälyn skaalaus voisi tehdä parempia kuvia

Sisällysluettelo:

Miten tekoälyn skaalaus voisi tehdä parempia kuvia
Miten tekoälyn skaalaus voisi tehdä parempia kuvia
Anonim

Keeawayt

  • Uudet edistysaskeleet kuvien suurentamisessa voivat auttaa kaikessa perhekuvista lääketieteellisiin kuvantamiseen.
  • Googlen tutkijat ilmoittivat, että he ovat tehneet läpimurtoja tekoälyn käyttämisessä valokuvien resoluution parantamiseen.
  • Mutta eräs asiantuntija sanoo, että skaalausohjelmisto ei ehkä ole tarpeen still-kuvaajille.
Image
Image

Uudet tekniikat, jotka suurentavat kuvia tekoälyllä, voivat parantaa kaikkea valokuvista videopelien grafiikkaan, asiantuntijat sanovat.

Googlen tutkijat keskustelivat äskettäin läpimurroista, joita he ovat tehneet kuvan tarkkuuden lisäämisessä. Tutkijat käyttivät koneoppimismallia muuttaakseen matalaresoluutioisen valokuvan yksityiskohtaiseksi korkearesoluutioiseksi kuvaksi. Se on osa kasvavaa trendiä käyttää tekoälyä kuvien parantamiseen.

"Näemme tekoälyn tehostamisen lisääntyvän erityisesti peleissä, joissa NVIDIA DLSS:n k altaiset tekniikat luovat koneoppimisen avulla uudelleen paljon korkeamman resoluution kuvan, joka kilpailee alkuperäisten kuvien laadusta ja joskus jopa ylittää sen. ", kuvantamisasiantuntija Ionut-Alexandru Popa kertoi Lifewirelle sähköpostihaastattelussa.

"Tällainen skaalaus toimii erinomaisesti tietokonepeleissä, joissa se onnistuu käyttämään vähemmän resursseja kuin laadukkaamman kuvan toisto suoraan."

Pikselin luominen

Google on tutkinut tapaa parantaa valokuvia käyttämällä diffuusiomalliksi kutsuttua menetelmää.

Yhtiö väittää, että tämä tekniikka parantaa olemassa olevia tekniikoita, kun ihmisiä pyydetään arvioimaan tuloksia. Yksi Googlen käyttämä lähestymistapa on SR3 tai superresoluutio toistuvan tarkentamisen kautta.

"SR3 on superresoluutioinen diffuusiomalli, joka ottaa syötteeksi matalaresoluutioisen kuvan ja rakentaa vastaavan korkearesoluutioisen kuvan puhtaasta kohinasta", Googlen tutkijat kirjoittivat blogikirjoituksessaan."Malli on koulutettu kuvan korruptioprosessiin, jossa kohinaa lisätään asteittain korkearesoluutioiseen kuvaan, kunnes jäljelle jää vain puhdasta kohinaa."

Skaalaustekniikat eivät ole uusia, ja niitä käytetään yleisesti kuvankäsittelysovelluksissa, Popa sanoi.

"On paljon tilanteita, joissa tarvitaan korkeamman resoluution kuvaa, joten skaalausta käytetään pikselien luomiseen olemassa olevien pikseleiden väliin", hän lisäsi. "Useimmat ihmiset eivät ymmärrä, mutta kun he katsovat televisiota 4K-näytöllään, 1080p-videosignaali skaalataan automaattisesti kattamaan koko näytön. Televisiosi tekee tämän automaattisesti."

Uusien pikselien sisällön "arvaamiseen" käytetään monia nykyisiä tekniikoita, jotta tuloksena oleva kuva näyttää hyvältä, Popa sanoi.

"Tällä hetkellä käytetyimmät algoritmit kuvien skaalaaminen ovat bilineaariset ja kaksikuutioiset menetelmät, jotka varmistavat jatkuvan siirtymisen vierekkäisten pikselien välillä asteittain vaihtuvilla väreillä, mutta tämä menetelmä johtaa usein terävyyden menetykseen", hän lisäsi."Tämä kompensoidaan osittain käyttämällä terävöitystä skaalatun kuvan yli."

On monia tilanteita, joissa tarvitset korkeamman resoluution kuvaa, joten skaalausta käytetään pikselien luomiseen olemassa olevien pikseleiden väliin.

Kuvan skaalaus on ratkaisevan tärkeää viihteen, median ja internetin toiminnan kann alta, valokuvaaja Sebastien Coell kertoi Lifewirelle sähköpostihaastattelussa.

"Esimerkiksi sen sijaan, että verkkosivua varten tarvittaisiin useita kuvakokoja, yksi puhelimessa käytettäväksi tai toinen tabletille", hän sanoi, "jos voit skaalata 1080p-kuvan 2 kilotavuksi tai 4k ja puhelinkuva tablettiin ja 1080p:ksi, olet yhtäkkiä vähentänyt tarvittavien kuvien määrää kuudesta kahteen."

"Säästät myös tarvittavan tiedostotilan suurista 2k- ja 4k-tiedostoista, mikä pienentää tarvitsemaasi tiedostojen kokonaistallennustilaa noin 70-90 %."

Ei vain televisioon

Valokuvien skaalaus voi myös parantaa valokuvien laatua ja jopa auttaa lääketieteellisessä kuvantamisessa. Ohjelmistokehittäjät sanovat, että skaalaus voi lisätä kuvien resoluutiota ilman laadun heikkenemistä.

Mutta Matic Broz, valokuvaussivuston Photutorial perustaja, kertoi Lifewirelle sähköpostihaastattelussa, että todelliset tulokset riippuvat käytetystä ohjelmistosta.

"Äskettäin tekoäly on löytänyt tiensä kuvan parempaan, vaikka se ei ole toistaiseksi vaikuttunut", hän lisäsi.

Broz sanoi, että paras hänen käyttämänsä skaalausohjelmisto on Vance AI:n AI Image Enlarger.

Image
Image

"Edes heidän 8-kertainen kuvanskaalaus ei aiheuta merkittävää kohinaa (se on 64-kertainen resoluutio), hän sanoi. "Odotan, että algoritmit paranevat vain seuraavina vuosina, mikä mahdollistaa vielä suuremman skaalauksen."

Kysyvävalokuvaajille Broz sanoi, että on avoin kysymys, tarvitaanko kuvan parannuskeinoja.

"Kameroiden kehittäjät parantavat jatkuvasti kamera-antureiden resoluutiota, nyt jopa 100 MP+ resoluutiolla", hän lisäsi. "Henkilökohtaisesti olen käyttänyt 24 megapikseliä ja noin 50 megapikseliä, enkä ole koskaan tuntenut tarvetta suuremmille kuville, en edes suurille tulosteille."

Suositeltava: