Hvordan AI-oppskalering kunne lage bedre bilder

Innholdsfortegnelse:

Hvordan AI-oppskalering kunne lage bedre bilder
Hvordan AI-oppskalering kunne lage bedre bilder
Anonim

Key takeaways

  • Nye fremskritt for å forstørre bilder kan hjelpe med alt fra familiebilder til medisinsk bildebehandling.
  • Google-forskere annonserte at de hadde gjort gjennombrudd i bruken av kunstig intelligens for å øke bildeoppløsningen.
  • Men en ekspert sier at oppskaleringsprogramvare kanskje ikke er nødvendig for stillfotografer.
Image
Image

Nye teknikker som forstørrer bilder ved hjelp av AI kan forbedre alt fra bilder til videospillgrafikk, sier eksperter.

Google-forskere diskuterte nylig gjennombrudd de har gjort når det gjelder å øke bildeoppløsningen. Forskerne brukte en maskinlæringsmodell for å gjøre et lavoppløselig bilde til et detaljert bilde med høy oppløsning. Det er en del av en økende trend med bruk av kunstig intelligens for å forbedre bilder.

"Vi ser en økning i AI-drevet oppskalering, spesielt i spill, der teknologier som NVIDIA DLSS bruker maskinlæring for å gjenskape et mye høyere oppløsningsbilde, som konkurrerer med og noen ganger overgår kvaliteten på de opprinnelige bildene, " fort alte bildeekspert Ionut-Alexandru Popa til Lifewire i et e-postintervju.

"Denne typen oppskalering fungerer utmerket i dataspill, der den klarer å bruke færre ressurser enn å gjengi et bilde med høyere kvalitet direkte."

Creating Pixel

Google har utforsket en måte å oppskalere bilder ved hjelp av en metode som kalles diffusjonsmodeller.

Selskapet hevder at denne teknikken forbedrer eksisterende teknologier når mennesker blir bedt om å bedømme resultatene. En tilnærming Google brukte kalles SR3, eller Super-Resolution via Repeated Refinement.

"SR3 er en superoppløselig diffusjonsmodell som tar et lavoppløselig bilde som input og bygger et tilsvarende høyoppløselig bilde fra ren støy," skrev Google-forskere i blogginnlegget."Modellen er trent på en bildekorrupsjonsprosess der støy gradvis legges til et høyoppløselig bilde til bare ren støy gjenstår."

Oppskaleringsteknikker er ikke nye og brukes ofte i fotoredigeringsapplikasjoner, sa Popa.

"Det er mange situasjoner når du trenger et bilde med høyere oppløsning, så oppskalering brukes til å lage piksler mellom de eksisterende," la han til. "De fleste skjønner det ikke, men når de ser på TV på 4K-skjermen, oppskaleres 1080p-videosignalet automatisk til å dekke hele skjermen. Dette gjøres automatisk av TV-apparatet ditt."

Mange nåværende teknikker brukes for å "gjette" innholdet i de nye pikslene slik at det resulterende bildet ser bra ut, sa Popa.

"For øyeblikket er de mest brukte algoritmene for bildeoppskalering bilineære og bikubiske metoder, som sikrer en kontinuerlig overgang mellom tilstøtende piksler, med gradvis skiftende farge, men denne metoden resulterer ofte i tap av skarphet," la han til."Dette kompenseres delvis ved å bruke et skarphetspass over det oppskalerte bildet."

Det er mange situasjoner når du trenger et bilde med høyere oppløsning, så oppskalering brukes til å lage piksler mellom de eksisterende.

Bildeoppskalering er avgjørende for hvordan underholdning, media og internett fungerer, sa fotograf Sebastien Coell til Lifewire i et e-postintervju.

"For eksempel, i stedet for å måtte ha flere bildestørrelser for en nettside, som i, en for bruk på en telefon, en for et nettbrett," sa han, "hvis du kan oppskalere det 1080p-bildet til 2k eller 4k og det telefonbildet til et nettbrett og 1080p, har du plutselig redusert antall bilder som trengs fra 6 ned til 2."

"Du vil også spare filplassen som trengs fra de store 2k- og 4k-filene, så du vil redusere den totale fillagringsstørrelsen som trengs med rundt 70–90 %."

Ikke bare for TV

Fotooppskalering kan også øke kvaliteten på bilder og kan til og med hjelpe med medisinsk bildebehandling. Programvareutviklere sier at oppskalering kan øke oppløsningen til bilder uten forringelse av kvaliteten.

Men Matic Broz, grunnleggeren av fotonettstedet Phototutorial, sa til Lifewire i et e-postintervju at de faktiske resultatene avhenger av programvaren som brukes.

"Nylig har AI funnet veien til bildeoppskalering, selv om jeg ikke er imponert over det så langt," la han til.

Broz sa at den beste oppskaleringsprogramvaren han har brukt er AI Image Enlarger av Vance AI.

Image
Image

"Selv deres 8x bildeoppskalering introduserer ikke noen betydelig støy (det er en 64x økning i oppløsning)," sa han. "Jeg forventer at algoritmene bare vil bli bedre i de påfølgende årene, noe som muliggjør enda større oppskalering."

For stillfotografer sa Broz at det er et åpent spørsmål om bildeoppskalere er nødvendig.

"Kamerautviklere forbedrer stadig oppløsningen til kamerasensorer, nå selv med 100 MP+ oppløsning," la han til. "Personlig har jeg brukt 24 MP og omtrent 50 MP, og jeg har aldri følt behov for større bilder, ikke engang for store utskrifter."

Anbefalt: