Cyflwyniad
Mewn dyfeisiau delweddu digidol modern, o ffonau smart i gamerâu diwydiannol, y modiwl camera yw'r allwedd i ddal gwybodaeth weledol. Fel y gwyddom, mae'r synhwyrydd delwedd yn gyfrifol am drosi golau yn signalau trydanol. Fodd bynnag, ni ellir cyflwyno'r signalau trydanol amrwd neu'r allbwn data hyn gan y synhwyrydd yn uniongyrchol fel y delweddau clir ac sy'n gywir o liw yr ydym yn gyfarwydd â hwy. Mae angen iddynt fynd trwy gyfres o gyfrifiadau cymhleth a thrawsnewidiadau.articleam beth yw synhwyrydd?
Y gydran bwrpasol sy'n cyflawni'r tasgau prosesu delweddau critigol hyn yw'r prosesydd signal delwedd (ISP). Mae'r ISP yn ffigurol yn debyg i "ymennydd digidol" y modiwl camera neu'r system ddelweddu gyfan. Mae'n gyfrifol am drosi'r data crai a ddaliwyd gan y synhwyrydd yn y ddelwedd ddigidol neu ffrwd fideo olaf y gellir ei defnyddio.
Felly, beth yw ISP? Pa rôl y mae'n ei chwarae yn y broses ddelweddu?
Rôl yr ISP yn y modiwl camera
Mewn cadwyn delweddu digidol nodweddiadol, mae'r ISP wedi'i leoli ar ôl y synhwyrydd delwedd, ond cyn i'r data delwedd derfynol gael ei storio, ei arddangos, neu ei anfon at y prif brosesydd. Mae'r broses sylfaenol fel a ganlyn:
Light -> Lens -> Image sensor (captures raw light signals and converts them into electrical signals, usually containing raw image data) -> ISP (receives and processes raw data) ->Allbwn (delwedd\/fideo digidol wedi'i brosesu).
Mae'r ISP fel ffatri prosesu data cyflym, gan dderbyn y "deunyddiau crai" a gynhyrchir gan y synhwyrydd, a'u troi'n "gynhyrchion gorffenedig" o ansawdd uchel-delweddau digidol trwy amrywiol unedau prosesu mewnol a chyfrifiadau.
Pam mae angen ISP arnom? Y broblem gyda data synhwyrydd amrwd
Synwyryddion delwedd, yn enwedig y rhai sydd â araeau hidlo lliw (CFA), data crai allbwn (megis fformat bayer data crai) gyda'r nodweddion canlynol, felly mae angen iddynt gael eu prosesu gan ISP:
- Lliw anghyflawn:Oherwydd bodolaeth CFA, dim ond un o dri lliw cynradd coch, gwyrdd a glas y mae pob picsel yn ei gofnodi, yn hytrach na picsel lliw cyflawn.
- Sŵn:Bydd gweithgaredd electronig y synhwyrydd ei hun a throsglwyddo signal yn cyflwyno sŵn, yn enwedig pan fydd y signal yn cael ei chwyddo mewn amgylcheddau golau isel, mae'r sŵn yn fwy amlwg.
- Anffurfiol:Mae data crai yn fformat synhwyrydd-benodol nad yw'n gyfleus ar gyfer storio, arddangos neu agor yn uniongyrchol gyda meddalwedd delwedd\/fideo safonol.
- Heb ei gywiro:Nid yw data crai wedi'i addasu gan gydbwysedd gwyn, cywiro lliw, ac ati, ac ni all adlewyrchu lliw a disgleirdeb yr olygfa yn gywir.
Bodolaeth ISP yw datrys y problemau hyn yn effeithlon a throsi'r data amrwd, anghyflawn hyn yn ddelweddau sy'n cwrdd â safonau ac yn cael effeithiau gweledol da.articleam beth yw CFA?
Beth mae ISP yn ei wneud? Esboniwyd swyddogaethau craidd
Mae'r ISP yn cynnwys cyfres o unedau prosesu caledwedd pwrpasol sy'n gweithredu amryw algorithmau prosesu delweddau cymhleth. Mae swyddogaethau craidd yr ISP yn cynnwys:
Trosi data crai:
- Demosaicing \/ dadfygio:Tasg sylfaenol o ISP. Mae'n defnyddio algorithm i gasglu cydrannau lliw coll pob picsel yn seiliedig ar wybodaeth lliw pob picsel a'r picseli cyfagos, a thrwy hynny ailadeiladu'r wybodaeth picsel lliw cyflawn.
- Cywiriad picsel diffygiol:Canfod a chywiro picseli annilys ar y synhwyrydd.
Gwella Ansawdd Delwedd:
- Gostyngiad sŵn:Mae ISP yn defnyddio algorithmau amrywiol (megis lleihau sŵn gofodol a lleihau sŵn amserol) i nodi a chael gwared ar sŵn yn y ddelwedd, gan wneud y llun yn llyfnach, sy'n arbennig o bwysig mewn amgylcheddau ysgafn isel.articleYnglŷn â beth yw modiwl camera golau isel?
- Miniogi:Gwella cyferbyniad ymylon y ddelwedd i wneud i'r llun edrych yn gliriach ac yn fwy manwl.
- Iawndal optegol:Cywirwch ddiffygion optegol y lens, megis ystumio a cholli golau ymyl.
Rheoli Lliw a Disgleirdeb:
- Cydbwysedd Gwyn Auto (AWB):Yn dadansoddi goleuadau golygfa ac yn addasu cydbwysedd lliw i sicrhau bod gwrthrychau gwyn yn ymddangos fel y gwyn cywir, gan adfer gwir liw'r olygfa.
- Cywiriad lliw:Yn addasu lliw delwedd i'w wneud yn fwy cywir ac yn fwy cyson â chanfyddiad llygaid dynol neu safonau lliw penodol.
- Amlygiad awto (AE) ac ennill rheolaeth:Yn dadansoddi disgleirdeb golygfa ac yn addasu amser amlygiad yn awtomatig ac enillion synhwyrydd i gael delwedd â disgleirdeb priodol.
- Mapio tôn a chywiro gama:Yn addasu cromlin disgleirdeb a chyferbyniad y ddelwedd i wneud i'r ddelwedd ymddangos yn optimaidd ar yr arddangosfa.
Paratoi allbwn data:
- Fformatio:Trosi data delwedd wedi'i brosesu yn fformat delwedd safonol (ee, YUV, RGB).
- Cywasgiad:Cywasgu delweddau i mewn i fformat ffeil (ee, JPEG) neu amgodio ffrydiau fideo i fformat safonol (ee, H.264) ar gyfer storio a throsglwyddo effeithlon. Gwneir hyn fel arfer gan galedwedd amgodiwr y tu mewn i'r ISP.
Algorithmau a swyddogaethau allweddol a gyflawnir gan ISP
Mae ISP yn cynnwys cyfres o unedau cyflymu caledwedd sydd wedi'i optimeiddio'n fawr ac algorithmau meddalwedd cymhleth, sydd gyda'i gilydd yn ffurfio piblinell brosesu. Mae'r llif prosesu ISP nodweddiadol yn cynnwys ond heb fod yn gyfyngedig i'r camau a'r algorithmau allweddol canlynol:
Rhagbrosesu:
- Tynnu lefel ddu:Yn tynnu'r signal cyfeirio a gynhyrchir gan y synhwyrydd pan nad oes golau, gan sicrhau bod ardaloedd du yn wirioneddol ddu.
- Cywiriad picsel diffygiol:Yn canfod ac yn atgyweirio picseli wedi'u difrodi ar y synhwyrydd sydd bob amser yn allbwn gwerthoedd annormal.
Demosaicing:
- Dyma un o algorithmau pwysicaf ISP. Fel y soniwyd yn gynharach, dim ond un lliw y picsel sydd gan y data gwreiddiol. Mae'r algorithm demosaicing yn amcangyfrif dwy gydran lliw coll pob picsel trwy ddadansoddi gwybodaeth lliw y picsel a'r picseli cyfagos cyfagos, a thrwy hynny ailadeiladu'r wybodaeth dri lliw RGB gyflawn.
- Mae ansawdd yr algorithm demosaicing yn effeithio'n uniongyrchol ar eglurder y ddelwedd, cywirdeb lliw, ac a yw arteffactau (fel lliwiau llyfn neu ffug) yn ymddangos ar yr ymylon.
Gostyngiad sŵn:
- Bydd allbwn data crai gan y synhwyrydd delwedd, yn enwedig mewn amgylcheddau golau isel, yn cynnwys sŵn amlwg. Mae'r ISP yn perfformio amryw o algorithmau lleihau sŵn i leihau'r graenusrwydd diangen hwn.
- Mae algorithmau lleihau sŵn cyffredin yn cynnwys lleihau sŵn gofodol (dadansoddi picseli o fewn yr un ffrâm) a lleihau sŵn amserol (gan ddadansoddi'r tebygrwydd rhwng fframiau olynol i gael gwared ar sŵn ar hap).
- Gall algorithm lleihau sŵn da gael gwared ar sŵn yn effeithiol wrth warchod manylion y ddelwedd gymaint â phosibl.
Cydbwysedd Gwyn Auto (AWB):
- Mae gan wahanol ffynonellau golau (gwynias, fflwroleuol, golau haul, cysgod) dymheredd lliw gwahanol. Mae algorithm cydbwysedd gwyn Auto ISP yn dadansoddi'r cyfansoddiad ysgafn yn yr olygfa ac yn addasu enillion tri lliw cynradd coch, gwyrdd a glas i sicrhau bod gwrthrychau gwyn yn y ddelwedd yn ymddangos yn wyn pur, gan wneud i liw'r llun cyfan edrych yn naturiol ac yn gywir.
Cywiriad lliw a throsi gofod lliw:
- Mae'r ISP yn perfformio algorithm cywiro lliw i wneud iawn am yr ymateb synhwyrydd anwastad i wahanol liwiau, gan wneud lliw'r ddelwedd yn agosach at ganfyddiad y llygad dynol.
- Trosi data delwedd o ofod lliw gwreiddiol y synhwyrydd i ofod lliw safonol (fel SRGB) i'w arddangos yn gywir ar amrywiol arddangosfeydd.
Amlygiad Auto (AE) ac ennill rheolaeth:
- Mae'r ISP yn dadansoddi dosbarthiad disgleirdeb cyffredinol yr olygfa ac yn cyfrifo'r amser amlygiad gorau posibl ac enillion synhwyrydd (ffactor ymhelaethu signal) trwy'r algorithm amlygiad ceir.
- Mae'r ISP yn bwydo'r paramedrau hyn yn ôl i'r synhwyrydd delwedd neu rannau eraill o'r system i'w haddasu er mwyn sicrhau bod gan y ddelwedd ddisgleirdeb cymedrol, heb or -or -ddweud i golli manylion llachar na thanddatganiad i golli manylion tywyll.
Mapio tôn a chywiro gama:
- Mae'r algorithmau hyn yn addasu ystod disgleirdeb cyffredinol a chyferbyniad y ddelwedd i wneud i'r ddelwedd edrych yn fwy haenog ac effeithiol yn weledol ar yr arddangosfa. Mae mapio tôn yn gam allweddol, yn enwedig wrth brosesu delweddau amrediad deinamig uchel (HDR).
Miniogi:
- Mae'r ISP yn perfformio algorithm miniog i wella cyferbyniad ymylon y ddelwedd, gan wneud i'r llun edrych yn gliriach a'r manylion yn fwy amlwg. Gall gor-finiogi achosi i halos neu sŵn gael ei bwysleisio.
Cywiriad Optegol:
- Gwneud iawn am ddiffygion optegol y lens, megis ystumiad casgen, ystumio pincushion, neu fignetio.
Cywasgiad Delwedd:
- Mae rhai modiwlau ISP neu galedwedd sydd wedi'u hintegreiddio'n agos wrth ymyl yr ISP yn gyfrifol am gywasgu delweddau wedi'u prosesu i fformatau safonol (fel JPEG), neu amgodio ffrydiau fideo i fformatau fel H.264 a H.265 ar gyfer storio neu drosglwyddo'n effeithlon.
Pam mae'r ISP yn hanfodol ar gyfer ansawdd delwedd
Mae ISP yn chwarae rhan hynod hanfodol wrth bennu ansawdd y ddelwedd derfynol:
- Dyma'r bont o ddata amrwd i ddelwedd:Heb ISP, dim ond criw o ddata synhwyrydd amrwd, na ellir ei wylio y byddwch chi'n ei gael.
- Mae'n diffinio edrychiad a theimlad olaf y ddelwedd:Mae ansawdd yr algorithm prosesu delwedd a gyflawnir gan yr ISP yn pennu lliw, eglurder, lefel sŵn ac effaith weledol gyffredinol y ddelwedd yn uniongyrchol. Gall ISP perfformiad uchel wneud y mwyaf o botensial y synhwyrydd delwedd. Hyd yn oed os yw ansawdd sylfaenol y synhwyrydd yn dda, gall pŵer prosesu'r ISP wella'r ddelwedd derfynol. I'r gwrthwyneb, gall ISP yn ôl gyfyngu ar berfformiad synwyryddion uchaf.
- Mae'n cefnogi nodweddion camera datblygedig:Mae gweithredu llawer o nodweddion camera modern (megis HDR, rhai effeithiau ffotograffiaeth gyfrifiadol, cymorth adnabod golygfeydd) yn dibynnu ar bŵer prosesu'r ISP a'r algorithmau sy'n rhedeg ar y cyd.
Ble mae ISPs i'w gael?
Gall lleoliad corfforol yr ISP fod ar sawl ffurf:
- Wedi'i integreiddio ar y sglodyn synhwyrydd (ISP \/ SOC integredig):Mae llawer o fodiwlau camera ar gyfer ffonau smart, dyfeisiau wedi'u hymgorffori, a chynhyrchion defnyddwyr yn integreiddio'r swyddogaeth ISP ar yr un sglodyn â'r synhwyrydd delwedd. Mae'r lefel uchel hon o integreiddio yn lleihau maint a chost.
- Sglodion ISP arwahanol:Mewn rhai camerâu pen uchel, camerâu proffesiynol, neu systemau gweledol sydd angen galluoedd prosesu pwerus a hyblyg, gall yr ISP fod yn sglodyn pwrpasol ar wahân. Mae hyn yn darparu mwy o bŵer prosesu a lle addasu.
- Wedi'i integreiddio yn y prosesydd cynnal (bloc ISP yn y prosesydd gwesteiwr):Mae llawer o broseswyr cynnal perfformiad uchel (megis ffonau symudol, SOCs cyfrifiadurol neu sglodion modurol) yn cynnwys modiwlau swyddogaeth ISP y tu mewn. Ar yr adeg hon, dim ond prosesu rhagarweiniol neu allbwn data crai yn uniongyrchol i ran ISP y sglodyn gwesteiwr y gall y modiwl camera ei berfformio.
Nghasgliad
Mae'r prosesydd signal delwedd (ISP) yn gydran graidd anhepgor yn y broses delweddu digidol fodern. Mae fel "ymennydd digidol" y modiwl camera, sy'n gyfrifol am weithredu set o algorithmau cymhleth i brosesu'n effeithlon ac yn ddeallus, trosi a gwneud y gorau o'r data amrwd, anghyflawn a swnllyd a ddaliwyd gan y synhwyrydd delwedd, ac o'r diwedd cynhyrchwch ddelwedd neu fideo digidol clir, lliw-accurate a chyfoethog o fanylion.
Bydd deall beth yw'r ISP, pa dasgau allweddol y mae'n eu cyflawni a'i safle yn y gadwyn ddelweddu yn ein helpu i ddeall yn well sut mae'r modiwl camera yn gweithio a pham mae perfformiad yr ISP mor hanfodol i gael allbwn delwedd o ansawdd uchel.
Cwestiynau Cyffredin Cysylltiedig:
1. A oes gan bob modiwl camera eu ISP eu hunain?
A.Nid yw pob modiwl camera yn cynnwys sglodyn ISP cyflawn, annibynnol. Mae rhai modiwlau'n integreiddio'r swyddogaeth ISP ar y sglodyn synhwyrydd delwedd i ffurfio modiwl "system-ar-sglodyn" (SOC). Dim ond cyn-brosesu sylfaenol iawn y gall modiwlau eraill eu perfformio ac yna allbwn data i brif sglodyn prosesydd allanol (a allai fod â bloc swyddogaeth ISP wedi'i integreiddio y tu mewn) i'w brosesu yn derfynol. Ond ni waeth ble mae'r ISP wedi'i leoli, mae angen ei rôl yn y broses ddelweddu.
2.Sut mae pŵer prosesu'r ISP yn effeithio ar berfformiad y camera?
A.Mae pŵer prosesu'r ISP ac ansawdd ei algorithmau mewnol yn effeithio'n uniongyrchol ar ansawdd y ddelwedd derfynol (megis cywirdeb lliw, cydbwysedd gwyn, ac ati), mae cyflymder tynnu lluniau (effeithlonrwydd y biblinell brosesu yn effeithio ar gyflymder saethu parhaus), a gweithrediad swyddogaeth uwch (megis dadansoddiad HDR, a dadansoddiad nos, a synthesis nos, a synthesis nos, a synthesis nos.
3. Os nad yw'r synhwyrydd delwedd ei hun yn perfformio'n dda, a all yr ISP wella ansawdd y ddelwedd yn sylweddol?
A.Gall ISP wella delweddau o synhwyrydd sy'n perfformio ar gyfartaledd i raddau, megis gwneud i'r llun edrych yn lanach trwy algorithmau lleihau sŵn mwy pwerus, neu optimeiddio lliw a chyferbyniad trwy algorithmau deallus.
Datrysiad addasu modiwl camera un stop
Anfonwch eich gofynion atom ar gyfer modiwlau camera a byddwn yn addasu'r ateb gorau i chi. Gyda'n datrysiadau premiwm, gallwch wella'ch cynhyrchion, ennyn diddordeb eich cwsmeriaid, ac agor cyfleoedd newydd ar gyfer twf a llwyddiant cymwysiadau golwg wedi'u hymgorffori.
