3-čioji technologinė revoliucija fotografijoje
2018.05.11  Naujienos:  egzotiška technikagsm fotoaparatai  5
 
RAW nuotrauka ir koreguota nauju algoritmu: Foto:illinois.edu  

Atsiradus galingesniems procesoriams ir struktūrizuotiems duomenimis (big data), permainos bus ir fotografijoje. Dešimtmečius žinomi algoritmai jau pradeda lįsti iš moksliukų laboratorijų ir stebinti žmones.
Štai Ilinojaus (JAV) universito mokslininkai pristatė įdomius rezultatus apdorojant ypač prasto apšvietimo nuotraukas.


Plačiau:
Nuotraukos: web.engr.illinois.edu/~cchen156/SID.html - atsidarius, perskyrą galima stumdyti
Straipsnis: arxiv.org/pdf/1805.01934.pdf
Plepalai: petapixel.com/2018/05/09/ai-is-taking-low-light-photo-qualit.../

RAW failas. Sumažinta. Foto:illinois.edu  
RAW failas. Sumažinta. Foto:illinois.edu

konvertuotas RAW failas. Foto:illinois.edu  
konvertuotas RAW failas. Foto:illinois.edu

Konvertuotas nauju algoritmu: Foto:illinois.edu  
Konvertuotas nauju algoritmu: Foto:illinois.edu


Kelios mintys apie tai

  • Vėl skubama algoritmus pavadinti dirbtiniu intelektu :) Ne, kaip įprasta tai tik savaime apsimokantys algoritmai kurie jau seniausiai žinomi. Dirbtinis intelektas atsiras dar negreitai.
  • Rezultatai džiugina ir tai, be abejo, jau dabar diegiama į šiuolaikinius fotoaparatus mobiliuose telefonuose. Tiesiog tai karščiausia, greičiausiai technologijas įsisavinanti rinka.
  • Naujausi algoritmai apsimokymui ir nuotraukų apdorojimui naudoja big data - didelius duomenis. Jie pasiekiami tik įrenginiuii turint nuolatinį ryšį. Tad įprasti fotoaparatai kol kas ir liks „įprasti“.
  • Big data (didelius struktūrintų duomenų kiekius) turi tik didžiausios įmonės - Google, Samsung, Apple, Microsoft. Įprastų fotoaparatų gamintojai bus priversti tuos duomenis pirkti arba patys palengva tuo užsiimti - startuoti tik dabar. Tai pralaiminčio pozicija.

Pirmi nelaimės požymiai ;)

Daugiau ar mažiau protingi algoritmai ims kištis į mūsų fotografuojamą vaizdą.
Lietuvis Vladislav Pranskevičius su kolegomis padarė online-servisą kuris iš visiškai neryškias foto padidina iki „kiek tik nori“ - kaip kriminaliniuose serialuose ;)
petapixel.com/2017/10/31/website-uses-ai-enhance-photo-csi-s.../
Pabandžiau: Originali ir sugadinta foto

Originali foto  
Išplauta foto sumažinant ir vėl padidinat foto  


Algoritmo pataisyta nuotrauka 2 metodais

Padidinta naudojant 'Magic' algoritmą  
Padidinta naudojant 'Boring' algoritmą  

Straipsnyje rezultatai įspūdingesni, bet man taip nepavyko. Atrodo, algoritmas dar nepakankamai apsimokęs. Greičiausiai trūksta tų big data duomenų, kurių mažas startuolis tiesiog neturi. Manau greit koks google pristatys savo technologiją kuri iš visiškai neryškios foto padarys ryškiausią, bet nebūtinai realybę atitinkančią foto.

Štai čia kiti bandymai: webdav.tuebingen.mpg.de/pixel/enhancenet/
Noriu akcentuoti senų ir naujų metodų esminį skirtumą: nauji (atseit dirbtinio intelekto) algoritmai prastą vaizdą atkuria iš kitų žmonių darytų nuotraukų. Taip galima puikiai atkurti pavyzdžiui gerai žinomų paukščių plunksnų faktūrą. Bet tokie algoritmai gali pridaryti klaidų jei atkuriami vaizdai nėra tipiški. Pavyzdžiui dar nematyto paukščio nuotraukų nauji algoritmai gerai neatkurs.

Pvz: Atkuriami vaizdo fragmentai, bet ne visad tie kurie buvo (akys)
Visas straipsnis: arxiv.org/abs/1804.07723

NVidia iliustracija  
NVidia iliustracija




Naujos technologijos gali ne tik atkurti bet ir keisti.
Štai pavyzdžiui Nvidia eksperimentuoja keisdami metų laikus ir orą:
research.nvidia.com/publication/2017-12_Unsupervised-Image-t...

Kas gresia?

Neišvengiama, mobilių telefonų fotoaparatai vis labiau gražins mūsų daromas nuotraukas. To net neklausdami.
Programos merginoms ne tik makiažą uždės bet ir į egzotiškas šalis perkels ir šampano įpils.
Įprastos nuotraukos irgi ims keistis. Realybę ir pramaną bus vis sunkiau atskirti.
Tai blogai? Gal taip. Bet neišvengiama. Reikės tai priimti, susitaikyti ir išmokti gyventi.

Jei pirmoji fotografijos technologija buvo cheminė, antroji - skaitmeninė, tai trečioji - virtualioji ar pramanytoji.
Dabar įprasti fotoaparatai irgi prisijungs prie dirbtinio intelekto (kuris kažkada atsiras) ir visi tuo naudosis.
Tik reti keistuoliai (kaip dabar juostininkai) fotografuos realų vaizdą, o ne manipuliuotą. Tik kaip bus galima atskirti realų nuo fikcijos jei net fotografas ne visad žinos kiek algoritmai įsikišo koreguodami vaizdą?
Čia tik pamąstymai ;)  Bet kodėl gi ne?

eFoto redaktorius

Komentarai
Turinys
  • Juris
    Juris 
      2018.05.11, 16:01, vertino: Gerai, , rašė:
    ... kaip ir su kiekvienu nauju žvilgučiu - žmonės pažais - ir apsipras ...
    - galima numanyti, kad su laiku realūs atvaizdai įgaus didesnę vertę ... :)
  • Badas
    Badas 
      2018.05.11, 16:27, vertino: Gerai, , rašė:
    Teisingumo delei upscalinga reikejo lyginti ne su priestvanine photoshopo bicubic interpoliacija,o su siuolaikiniais algoritmais, pavyzdziui, Perfect Resize. Veikiausiai nepranoktu sito intelektualaus algoritmo, taciau skirtumas butu gerokai mazesnis.
  • eFoto redaktorius    2018.05.11, 17:15, rašė:
    Čia apie skirtingus principus kalbama
    Nauji algoritmai gali vaizdą sudėdinėti iš jau buvusių, kitų žmonių fotografuotų vaizdų. Nors tai dar neveikia bet bus
    Gal čia išraiškingesni pavyzdžiai:
    webdav.tuebingen.mpg.de/pixel/enhancenet/
  • Rima Prusakova
    Rima Prusakova 
      2018.05.11, 23:47, rašė:
    jo  
  • Agrostemma
    Agrostemma 
      2018.05.14, 14:09, rašė:
    Dėl triukšmo nuotraukose - gal po kelių keliolikos metų iki praktinio pritaikymo fotografijoje bus ištobulinta ir CMOS sukūrėjo Eriko Fosumo ( Eric R. Fossum) sukurta nauja sensorių technologija (ar trečia CMOS sensorių karta), pavadinta QIS (quanta image sensor), kol kas tik 1 mpx prototipas, nespalvotą vaizdą fiksuojantis. Kas žino, gal pavyks įgyvendinti (reikia pridėti spalvas, reikia sumažinti elektros kiekį kurį sunaudoja dirbdamas sensorius), bet jei būtų įgyvendinta, savo interviu ir įkurtos kompanijos (gigajot) puslapyje profesorius žada fotografinį vaizdą prilygstantį juostinei fotografijai (nebebus pikselių? nebebus demozaikinimo?), o taip pat itin didelį jautrumą ir vaizdą be triukšmo.
     
    EDIT: pasižiūrėjau dar diskusijoje ką aiškina profesorius Fosumas, tai visgi spalvai išgauti  šiame naujajame sensoriuje reiks naudoti tuos pačius spalvinius filtrus prieš atskirus sensoriaus pikselius (kol kas fotono energiją [bangos ilgį] galima nustatyti tik rentgeno diapazone, o regimos šviesos diapazone, tik sensoriuose kurie dirba netoli absoliutaus nulio), taigi demozaikinimas spalvotoje fotografijoje liks, net jei šie sensoriai ir ateis į ją.

Jūsų komentaras

Rašyti komentarus gali TIK užsiregistravę eFoto.lt dalyviai. Užsiregistruoti