Förbättra mobilbilder

En mobilsensor är pytteliten. I bra ljus spelar det knappt någon roll. Inomhus och på natten höjer kameran känsligheten (ISO) för att få en användbar exponering, och sensorns slumpmässiga brus förstärks tillsammans med bilden. Du ser det som korn, och i skuggorna som fläckar i rött, grönt och lila som inte hör till motivet.

Sedan försöker mobilen dölja bruset. Den inbyggda brusreduceringen suddar ut fin struktur tillsammans med kornet. Därför ser nattbilder ofta utsmetade eller målade ut: hår blir en slät massa, lövverk grön akvarell och tegel platt orange. Nattlägen som slår ihop flera bilder hjälper, men de kan ge utsmetning och spökbilder när något rör sig.

Det sista steget sker oftast när bilden delas. WhatsApp, Messenger och de flesta sociala appar krymper bilden och sparar den igen som en komprimerad JPEG. Komprimeringen slänger den fina detalj som fanns kvar och lägger till fyrkantiga block och glorior runt kanter. Varje vidarebefordran kan ge ytterligare en omgång. Vår sida om att förbättra kvaliteten på WhatsApp-bilder förklarar det steget i detalj, och varför nattbilder blir korniga handlar om kamerasidan.

Förbättra kör två neurala nätverk efter varandra. Det första är en restaureringsmodell. Den tar bort sensorbrus, färgfläckar, utsmetning från mobilens brusreducering och JPEG-komprimering i ett enda steg, och behåller riktiga kanter där de var. Det andra är en detaljmodell. Där brus eller komprimering har suddat ut fin struktur, som vävningen i ett tyg eller barren på en tall, lägger den tillbaka naturlig struktur så att resultatet inte ser ut som plast.

Detaljmodellen arbetar bara där bilden behöver det. Om din bild redan är ren lämnar Förbättra den i stort sett som den är; modellen hittar inte på detaljer som inte behövs. Text som upptäcks i bilden, som skyltar och etiketter, lämnas åt restaureringssteget, som tar bort brus och komprimering men inte ritar om bokstäver.

Båda nätverken tränades på par av ett rent fotografi och samma fotografi efter en simulering av riktiga mobiler. Simuleringen kalibrerades mot mätningar av riktiga enheter: brus från enklare och äldre mobiler, sammanslagning i nattläge och de regler för skalning och komprimering som meddelandeappar använder. Därför känner Förbättra igen mobilskador som ett vanligt brusfilter behandlar som detaljer.

Resultatet har exakt samma bredd och höjd som din uppladdning. Förbättra förstorar inte, beskär inte och ändrar inte ljuset i bilden, och vitbalans och exponering ändras inte heller: en varm nattscen förblir varm. Behöver du också en större bild kan du köra Förstora 4× på det förbättrade resultatet.

Förbättra gör störst skillnad när skadan är brus eller komprimering, inte saknad skärpa:

• Bilder tagna i svagt ljus, på natten eller inomhus som blev korniga, kladdiga eller mjuka: stadsljus, restauranger, konserter, födelsedagsfester.
• Bilder som tappat kvalitet efter att ha skickats via WhatsApp eller en annan chattapp, eller sparats många gånger, när originalet är borta.
• Bilder från äldre eller enklare mobiler, vars små sensorer brusar även inomhus.
• Produkt- och annonsbilder tagna i en mörk butik eller ett garage, innan de läggs ut på nätet.

Förbättra reparerar bilden; modellen läser den inte. Den gör inte oläslig text läsbar, återskapar inte en registreringsskylt och skärper inte ett dokument. Mycket liten eller tät text kan ibland missas av textdetekteringen, så för dokument där varje tecken spelar roll bör du kontrollera resultatet eller behålla originalet.

Den fina struktur som läggs till är trovärdig, inte en återgivning av motivet. Använd inte resultaten som bevis eller för identifiering, till exempel av ansikten, registreringsskyltar eller serienummer. Och en bild som redan är skarp och välexponerad ändras knappt: Förbättra är ett reparationsverktyg, inte ett filter som får varje bild att se annorlunda ut.

Förbättra byggdes för fotografier. På skärmbilder och grafik tar den också bort komprimeringsblock, men jämna ytor kan få en svag struktur, så jämför resultatet med originalet.

Modellen kan bara arbeta med det som finns i filen, så en bättre bild in ger ett bättre resultat:

• Använd den kopia som vidarebefordrats minst. Bilden i avsändarens kamerarulle slår en som vidarebefordrats tre gånger.
• Undvik skärmbilder av bilder. En skärmbild lägger till en omskalning och gränssnittets skalning ovanpå de ursprungliga skadorna.
• Ladda upp bilden innan du redigerar den. Filter, kraftig skärpning och höjd ljusstyrka gör det svårare att skilja brus från detaljer.
• Förbättra först, förstora sedan. Om du förstorar en brusig bild förstoras bruset, och brus är svårare att ta bort när det har spridits över fler pixlar.
• Kontrollera ansikten och eventuell text i 100 % zoom innan du skriver ut eller publicerar.

Många AI-förbättrare är helt generativa: de ritar om hud, ögon och struktur från grunden. Det kan se imponerande ut vid en snabb blick och fel ut vid en närmare titt, särskilt på en person du känner. Förbättra är inställt på att reparera det som pixlarna stöder. Modellen förskönar inte ansikten, ändrar inte ansiktsuttryck och lägger inte till föremål. Där informationen verkligen är borta lämnar den området rent och naturligt i stället för att hitta på något. Vår guide om trogen och generativ uppskalning förklarar skillnaden.

Varje exempel på den här sidan och i galleriet är ett verkligt resultat från modellen. De skadade bilderna skapades med vår mobilsimulator utifrån rena foton, och det står vid varje exempel.