Several approaches to improve noise removal in photographic images
Gespeichert in:
| Titel: | Several approaches to improve noise removal in photographic images |
|---|---|
| Autoren: | Ghimpeteanu, Gabriela |
| Weitere Verfasser: | University/Department: Universitat Pompeu Fabra. Departament de Tecnologies de la Informació i les Comunicacions |
| Thesis Advisors: | Bertalmío, Marcelo, Batard, Thomas |
| Quelle: | TDX (Tesis Doctorals en Xarxa) |
| Verlagsinformationen: | Universitat Pompeu Fabra, 2018. |
| Publikationsjahr: | 2018 |
| Beschreibung: | 178 p. |
| Schlagwörter: | Image denoising, Realistic noise model, Local/non-local method, Camera processing pipeline, Image quality metrics, Perceptual metrics, Psychophysical experiments, Local variational method, Patch-based method, Differential geometry |
| Beschreibung: | Noise acquisition is an unavoidable component when capturing photographs, even in the case of current state of the art cameras. This problem is even accentuated when the lighting conditions are not ideal. Therefore, removing the noise present in the captured image is still an essential task in the camera image processing pipeline. In this thesis, we analyze several approaches to improve current image denoising meth- ods. First, we propose a general framework that can improve a denoising method, moti- vated by a simple principle: for any algorithm, the smaller the noise level, the higher the quality of the denoised image. Therefore, by carefully choosing an image decomposition of the noisy image into less noisy one(s) and applying the algorithm on the latter, the performance of any denoising method can increase. Second, we accentuate the importance of using a realistic noise model for testing any denoising methods, as in the usual AWG scenario the results can be extremely di erent. The noise model can be estimated on RAW images, as the camera processing pipeline alters the noise, and denoising becomes a challenge when applied on camera output. We show how a local method applied on RAW can outperform a non-local one applied on camera output, in the realistic noise scenario. Finally, in this thesis we propose a fast, local denoising method where the Euclidean curvature of the noisy image is approximated in a regularizing manner and a clean image is reconstructed from this smoothed curvature. User preference tests show that when denoising real photographs with actual noise our method produces results with the same visual quality as the more sophisticated, non-local algorithms, but at a fraction of their computational cost. These tests also highlight the limitations of objective image quality metrics like PSNR and SSIM, which correlate poorly with user preference. |
| Description (Translated): | L'adquisició de soroll és un component ineludible quan capturem una fotografi a, fins i tot en el cas de les càmeres d'última generació. Aquest problema s'accentua encara més quan les condicions d'illuminació no són ideals. Per tant, l'extracció del soroll que està present a la imatge capturada continua sent una tasca essencial dintre del processament d'imatges de la càmera. En aquesta tesi, analitzem diversos enfocaments per millorar els mètodes actuals d'extracció de soroll. En primer lloc, proposem un marc general que permet millorar un mètode d'extracció. Aquest marc està motivat per un principi senzill: per a qualsevol algoritme, com més petit sigui el nivell de soroll a l'imatge original, més alta serà la qualitat de la imatge de sortida. Per tant, escollint acuradament una descomposició de la imatge sorollosa en una altra amb menys soroll i aplicant l'algoritme en aquesta última, podem augmentar el rendiment de qualsevol mètode d'extracció de soroll. En segon lloc, remarquem la importància d'utilitzar un model de soroll realista per a evaluar qualsevol mètode d'extracció de soroll, ja que els resultats en imatges realistes poden divergir enormement en comparació amb l'escenari habitual de suposar AWG. Amb aquest , estimem un model de soroll en imatges RAW, ja que el processament de l'imatge dintre de la càmera altera el soroll, i l'extracció de soroll es converteix en un desa fiament al no seguir el model AWG. Mostrem que, quan suposem un model de soroll realista, un mètode local aplicat a RAW pot superar un de no-local aplicat a la sortida de la càmera. Finalment, en aquesta tesi proposem un mètode ràpid i local d'extracció de soroll on la curvatura euclidiana de la imatge sorollosa s'aproxima de manera regularitzadora i es reconstrueix una imatge neta d'aquesta curvatura suavitzada. Les proves de preferència dels usuaris mostren que el nostre mètode produeix resultats amb la mateixa qualitat visual que els algorismes més sofi sticats i no-locals, però amb una fracció del seu cost computacional. Aquestes proves també posen de relleu les limitacions de mètriques de qualitat d'imatge objectives com PSNR i SSIM, que es correlacionen malament amb la preferència dels usuaris. Programa de doctorat en Tecnologies de la Informació i les Comunicacions |
| Publikationsart: | Dissertation/Thesis |
| Dateibeschreibung: | application/pdf |
| Sprache: | English |
| Zugangs-URL: | http://hdl.handle.net/10803/461012 |
| Rights: | ADVERTIMENT. L'accés als continguts d'aquesta tesi doctoral i la seva utilització ha de respectar els drets de la persona autora. Pot ser utilitzada per a consulta o estudi personal, així com en activitats o materials d'investigació i docència en els termes establerts a l'art. 32 del Text Refós de la Llei de Propietat Intel·lectual (RDL 1/1996). Per altres utilitzacions es requereix l'autorització prèvia i expressa de la persona autora. En qualsevol cas, en la utilització dels seus continguts caldrà indicar de forma clara el nom i cognoms de la persona autora i el títol de la tesi doctoral. No s'autoritza la seva reproducció o altres formes d'explotació efectuades amb finalitats de lucre ni la seva comunicació pública des d'un lloc aliè al servei TDX. Tampoc s'autoritza la presentació del seu contingut en una finestra o marc aliè a TDX (framing). Aquesta reserva de drets afecta tant als continguts de la tesi com als seus resums i índexs. |
| Dokumentencode: | edstdx.10803.461012 |
| Datenbank: | TDX |
| FullText | Text: Availability: 0 CustomLinks: – Url: http://hdl.handle.net/10803/461012# Name: EDS - TDX (s4221598) Category: fullText Text: View record in TDX |
|---|---|
| Header | DbId: edstdx DbLabel: TDX An: edstdx.10803.461012 RelevancyScore: 1327 AccessLevel: 3 PubType: Dissertation/ Thesis PubTypeId: dissertation PreciseRelevancyScore: 1327.01977539063 |
| IllustrationInfo | |
| Items | – Name: Title Label: Title Group: Ti Data: Several approaches to improve noise removal in photographic images – Name: Author Label: Authors Group: Au Data: <searchLink fieldCode="AR" term="%22Ghimpeteanu%2C+Gabriela%22">Ghimpeteanu, Gabriela</searchLink> – Name: Author Label: Contributors Group: Au Data: University/Department: Universitat Pompeu Fabra. Departament de Tecnologies de la Informació i les Comunicacions – Name: Author Label: Thesis Advisors Group: Au Data: Bertalmío, Marcelo<br />Batard, Thomas – Name: TitleSource Label: Source Group: Src Data: TDX (Tesis Doctorals en Xarxa) – Name: Publisher Label: Publisher Information Group: PubInfo Data: Universitat Pompeu Fabra, 2018. – Name: DatePubCY Label: Publication Year Group: Date Data: 2018 – Name: PhysDesc Label: Physical Description Group: PhysDesc Data: 178 p. – Name: Subject Label: Subject Terms Group: Su Data: <searchLink fieldCode="DE" term="%22Image+denoising%22">Image denoising</searchLink><br /><searchLink fieldCode="DE" term="%22Realistic+noise+model%22">Realistic noise model</searchLink><br /><searchLink fieldCode="DE" term="%22Local%2Fnon-local+method%22">Local/non-local method</searchLink><br /><searchLink fieldCode="DE" term="%22Camera+processing+pipeline%22">Camera processing pipeline</searchLink><br /><searchLink fieldCode="DE" term="%22Image+quality+metrics%22">Image quality metrics</searchLink><br /><searchLink fieldCode="DE" term="%22Perceptual+metrics%22">Perceptual metrics</searchLink><br /><searchLink fieldCode="DE" term="%22Psychophysical+experiments%22">Psychophysical experiments</searchLink><br /><searchLink fieldCode="DE" term="%22Local+variational+method%22">Local variational method</searchLink><br /><searchLink fieldCode="DE" term="%22Patch-based+method%22">Patch-based method</searchLink><br /><searchLink fieldCode="DE" term="%22Differential+geometry%22">Differential geometry</searchLink> – Name: Abstract Label: Description Group: Ab Data: Noise acquisition is an unavoidable component when capturing photographs, even in the case of current state of the art cameras. This problem is even accentuated when the lighting conditions are not ideal. Therefore, removing the noise present in the captured image is still an essential task in the camera image processing pipeline. In this thesis, we analyze several approaches to improve current image denoising meth- ods. First, we propose a general framework that can improve a denoising method, moti- vated by a simple principle: for any algorithm, the smaller the noise level, the higher the quality of the denoised image. Therefore, by carefully choosing an image decomposition of the noisy image into less noisy one(s) and applying the algorithm on the latter, the performance of any denoising method can increase. Second, we accentuate the importance of using a realistic noise model for testing any denoising methods, as in the usual AWG scenario the results can be extremely di erent. The noise model can be estimated on RAW images, as the camera processing pipeline alters the noise, and denoising becomes a challenge when applied on camera output. We show how a local method applied on RAW can outperform a non-local one applied on camera output, in the realistic noise scenario. Finally, in this thesis we propose a fast, local denoising method where the Euclidean curvature of the noisy image is approximated in a regularizing manner and a clean image is reconstructed from this smoothed curvature. User preference tests show that when denoising real photographs with actual noise our method produces results with the same visual quality as the more sophisticated, non-local algorithms, but at a fraction of their computational cost. These tests also highlight the limitations of objective image quality metrics like PSNR and SSIM, which correlate poorly with user preference. – Name: Abstract Label: Description (Translated) Group: Ab Data: L'adquisició de soroll és un component ineludible quan capturem una fotografi a, fins i tot en el cas de les càmeres d'última generació. Aquest problema s'accentua encara més quan les condicions d'illuminació no són ideals. Per tant, l'extracció del soroll que està present a la imatge capturada continua sent una tasca essencial dintre del processament d'imatges de la càmera. En aquesta tesi, analitzem diversos enfocaments per millorar els mètodes actuals d'extracció de soroll. En primer lloc, proposem un marc general que permet millorar un mètode d'extracció. Aquest marc està motivat per un principi senzill: per a qualsevol algoritme, com més petit sigui el nivell de soroll a l'imatge original, més alta serà la qualitat de la imatge de sortida. Per tant, escollint acuradament una descomposició de la imatge sorollosa en una altra amb menys soroll i aplicant l'algoritme en aquesta última, podem augmentar el rendiment de qualsevol mètode d'extracció de soroll. En segon lloc, remarquem la importància d'utilitzar un model de soroll realista per a evaluar qualsevol mètode d'extracció de soroll, ja que els resultats en imatges realistes poden divergir enormement en comparació amb l'escenari habitual de suposar AWG. Amb aquest , estimem un model de soroll en imatges RAW, ja que el processament de l'imatge dintre de la càmera altera el soroll, i l'extracció de soroll es converteix en un desa fiament al no seguir el model AWG. Mostrem que, quan suposem un model de soroll realista, un mètode local aplicat a RAW pot superar un de no-local aplicat a la sortida de la càmera. Finalment, en aquesta tesi proposem un mètode ràpid i local d'extracció de soroll on la curvatura euclidiana de la imatge sorollosa s'aproxima de manera regularitzadora i es reconstrueix una imatge neta d'aquesta curvatura suavitzada. Les proves de preferència dels usuaris mostren que el nostre mètode produeix resultats amb la mateixa qualitat visual que els algorismes més sofi sticats i no-locals, però amb una fracció del seu cost computacional. Aquestes proves també posen de relleu les limitacions de mètriques de qualitat d'imatge objectives com PSNR i SSIM, que es correlacionen malament amb la preferència dels usuaris.<br />Programa de doctorat en Tecnologies de la Informació i les Comunicacions – Name: TypeDocument Label: Document Type Group: TypDoc Data: Dissertation/Thesis – Name: Format Label: File Description Group: SrcInfo Data: application/pdf – Name: Language Label: Language Group: Lang Data: English – Name: URL Label: Access URL Group: URL Data: <link linkTarget="URL" linkTerm="http://hdl.handle.net/10803/461012" linkWindow="_blank">http://hdl.handle.net/10803/461012</link> – Name: Copyright Label: Rights Group: Cpyrght Data: ADVERTIMENT. L'accés als continguts d'aquesta tesi doctoral i la seva utilització ha de respectar els drets de la persona autora. Pot ser utilitzada per a consulta o estudi personal, així com en activitats o materials d'investigació i docència en els termes establerts a l'art. 32 del Text Refós de la Llei de Propietat Intel·lectual (RDL 1/1996). Per altres utilitzacions es requereix l'autorització prèvia i expressa de la persona autora. En qualsevol cas, en la utilització dels seus continguts caldrà indicar de forma clara el nom i cognoms de la persona autora i el títol de la tesi doctoral. No s'autoritza la seva reproducció o altres formes d'explotació efectuades amb finalitats de lucre ni la seva comunicació pública des d'un lloc aliè al servei TDX. Tampoc s'autoritza la presentació del seu contingut en una finestra o marc aliè a TDX (framing). Aquesta reserva de drets afecta tant als continguts de la tesi com als seus resums i índexs. – Name: AN Label: Accession Number Group: ID Data: edstdx.10803.461012 |
| PLink | https://erproxy.cvtisr.sk/sfx/access?url=https://search.ebscohost.com/login.aspx?direct=true&site=eds-live&db=edstdx&AN=edstdx.10803.461012 |
| RecordInfo | BibRecord: BibEntity: Languages: – Text: English PhysicalDescription: Pagination: PageCount: 178 Subjects: – SubjectFull: Image denoising Type: general – SubjectFull: Realistic noise model Type: general – SubjectFull: Local/non-local method Type: general – SubjectFull: Camera processing pipeline Type: general – SubjectFull: Image quality metrics Type: general – SubjectFull: Perceptual metrics Type: general – SubjectFull: Psychophysical experiments Type: general – SubjectFull: Local variational method Type: general – SubjectFull: Patch-based method Type: general – SubjectFull: Differential geometry Type: general Titles: – TitleFull: Several approaches to improve noise removal in photographic images Type: main BibRelationships: HasContributorRelationships: – PersonEntity: Name: NameFull: Ghimpeteanu, Gabriela IsPartOfRelationships: – BibEntity: Dates: – D: 23 M: 01 Type: published Y: 2018 |
| ResultId | 1 |