买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明授权】宽动态范围影像方法_瑞昱半导体股份有限公司_201510585021.9 

申请/专利权人:瑞昱半导体股份有限公司

申请日:2015-09-15

公开(公告)日:2020-02-18

公开(公告)号:CN106534708B

主分类号:H04N5/235(20060101)

分类号:H04N5/235(20060101);H04N5/355(20110101)

优先权:

专利状态码:有效-授权

法律状态:2020.02.18#授权;2017.04.19#实质审查的生效;2017.03.22#公开

摘要:本发明实施例提供一种宽动态范围影像方法,其包括以下步骤。根据影像的亮部平均值与暗部平均值的第一差异值获得第一调整强度。依据暗部平均值与暗部像素数量,来调整第一调整强度,以产生第二调整强度。计算影像中多个第一区域的亮部加权平均值与影像中多个第二区域的暗部加权平均值,计算暗部加权平均值与亮部加权平均值之间的第二差异值,并根据第二差异值调整第二调整强度,以产生第三调整强度。使用第三调整强度选择性地对影像中的多个像素进行调整。

主权项:1.一种宽动态范围影像方法,包括:根据一影像的一亮部平均值与一暗部平均值的一第一差异值获得一第一调整强度;依据该暗部平均值与一暗部像素数量,来调整该第一调整强度,以产生一第二调整强度,其中该暗部像素数量小于一第一特定值或该暗部平均值大于第二特定值时,产生的该第二调整强度比该第一调整强度小;计算该影像中多个第一区域的一亮部加权平均值与该影像中多个第二区域的一暗部加权平均值,计算该暗部加权平均值与该亮部加权平均值之间的一第二差异值,并根据该第二差异值调整该第二调整强度,以产生第三调整强度,其中该些第一区域对应于该影像的一背景,该些第二区域对应于该影像的一前景;以及使用该第三调整强度选择性地对该影像中的多个像素进行一宽动态范围增益调整、一曝光增益调整或一珈玛增益调整,并输出调整后的该影像;其中若该第一差异值越大,则该第一调整强度越大;若该暗部平均值越小或该暗部像素数量越多,则第二调整强度越大;若该第二差异值为一正值,则调降该第二调整强度,以产生该第三调整强度;其中依据该第三调整强度决定一第一门槛值,对该些像素的多个亮度值介于该第一门槛值与一第二门槛值者进行该宽动态范围增益调整,对于该些像素的多个亮度值介于该第二门槛值与一第三门槛值者进行该曝光增益调整,以及对于该些像素的多个亮度值介于该第三门槛值与一第四门槛值者进行该珈玛增益调整,其中该第二门槛值至该第四门槛值由该第三调整强度、选择的一场景模式与一硬件规格的至少其中之一决定。

全文数据:宽动态范围影像方法技术领域[0001] 本发明是关于一种影像方法,且特别是一种宽动态范围影像widedynamicrangeimaging方法。背景技术[0002] 针对高反差场景例如,前景极暗,且背景极亮的画面,若影像撷取装置增加曝光,则会使得前景获得适中的亮度,但却会造成背景过曝。相反地,若影像撷取装置减少曝光,则会使得背景的亮度适中,但却会造成前景过暗。[0003] 高动态范围影像highdynamicrangeimaging方法是获取两张同一画面但曝光程度不同的影像,并将此两张影像进行合成处理,以使得影像的画面的前景与背景的亮度皆适中。然而,高动态范围影像方法的算法较为复杂,且影像撷取装置需要较好的感光元件,以选择不同感光单位来进行曝光,甚至影像撷取装置的画面频率或处理速度需要进一步地提升,才能顺利执行高动态范围影像方法。发明内容[0004] 本发明实施例提供一种宽动态范围影像方法,其包括以下步骤。根据影像的亮部平均值与暗部平均值的第一差异值获得第一调整强度。依据暗部平均值与暗部像素数量,来调整第一调整强度,以产生第二调整强度。计算影像中多个第一区域的亮部加权平均值与影像中多个第二区域的暗部加权平均值,计算暗部加权平均值与亮部加权平均值之间的第二差异值,并根据第二差异值调整第二调整强度,以产生第三调整强度。使用第三调整强度选择性地对影像中的多个像素进行调整。[0005] 综合以上所述,本发明实施例所提供的宽动态范围影像方法可以增加影像整体的细节,且同时能够让影像中暗部区域与亮部区域的细节明显显现。[0006] 为使本发明所属技术领域具有通常知识者能更进一步了解本发明的特征及技术内容,请参阅以下有关本发明的详细说明与附图,但是此等说明与所附图式仅是用来说明本发明,而非对本发明的权利范围作任何的限制。附图说明[0007]图1是本发明实施例的宽动态范围影像方法的流程的示意图。[0008] 图2A〜图2C分别是本发明实施例的三张不同影像的直方图。[0009] 图3是本发明实施例的暗部程度加权处理的示意图。[0010]图4是本发明的影像划分为多个第一区域与多个第二区域的示意图。[0011]图5是本发明实施例的分配影像各像素进行宽动态范围增益、曝光增益或珈玛增益调整的示意图。[0012] 符号说明[0013] Sll〜S13、S121、S122:步骤流程[0014] THl〜TH4、TH:门槛值[0015] ml:暗部平均值[0016] m2:亮部平均值[0017] Rll〜R15、R21〜R25、R31〜R35、R41〜R45、R51〜R55:区域[0018] C31、C32:曲线具体实施方式[0019] 本发明实施例提供一种宽动态范围影像方法,所述宽动态范围影像方法会将先透过影像的直方图获得影像的亮部平均值与暗部平均值的差异值亮部平均值减去暗部平均值,以根据差异值获得对应于第一调整强度。然后,考量差异值虽大但影像的画面并非高反差场景的情况,所述宽动态范围影像方法会先进行了暗部程度加权处理,以调整第一调整强度,并产生第二调整强度,接着,再进行中心亮度加权处理,以调整第二调整强度,并产生第三调整强度。之后,所述宽动态范围影像方法依据第三调整强度分配影像各像素进行宽动态范围增益、曝光增益或珈玛增益调整,以产生与输出调整后的影像。[0020] 在本发明实施例中,上述暗部程度加权处理是根据暗部像素数量与暗部平均值来调整第一调整强度,以产生第二调整强度。上述中心亮度加权处理是将影像分为多个第一区域对应于预设背景区域与第二区域对应于预设前景区域,以根据多个第一区域对应的权重与亮度平均值计算亮部加权平均值,以及根据多个第二区域对应的权重与亮度平均值计算暗部加权平均值,然后,再根据亮度加权平均值与暗部加权平均值调整第二调整强度,以产生第三调整强度。[0021]另外,于本发明实施例中,第三调整强度用来决定影像中亮度值小于某一门槛值的像素需要进行调整,而且依据选择的场景模式、硬件规格与第三调整强度的至少其中之一,位于第一亮度范围的像素会进行宽动态范围增益调整,位于第二亮度范围的像素进行曝光增益调整,而位于第三亮度范围的像素进行珈玛增益调整。第三调整强度可以是一个百分比值,例如90%,其中第一亮度范围是指最大亮度的30%〜90%的范围,第二亮度范围是指最大亮度的20%〜30%的范围,且第三亮度范围是指最大亮度的10%〜20%的范围。[0022] 上述宽动态范围影像方法可以应用于数位相机、智慧型手机相机、平板电脑或监控系统等,而无须改变感光元件的设计。上述宽动态范围影像方法更可以有效地将影像的画面中低亮度部分拉高,与将影像的画面中高亮度部分降低,从而提高影像的能见度,并避免边际效应。以下,将进一步地介绍上述宽动态范围影像方法的细节。[0023] 请参照图1,图1是本发明实施例的宽动态范围影像方法的流程图。所述宽动态范围影像方法可以执行于任何类型的影像撷取装置,且仅需要撷取一张影像,即可以对影像的画面中较亮与较暗的部分进行增强,从而增加影像的品质。所述宽动态范围影像方法具有步骤Sll〜S13,且说明如下。[0024] 首先,在步骤Sll中,依据影像的亮部平均值与暗部平均值的差异值得到第一调整强度,其细节说明如下。所述宽动态范围影像方法会对撷取的影像进行亮度分布统计,以获得影像的直方图。然后,所述宽动态范围影像方法将亮度值低于特定门槛值TH的多个亮度值进行平均运算,以获得暗部平均值ml,以及将亮度值未低于特定门槛值TH的多个亮度值进行平均运算,以获得亮部平均值m2。接着,所述宽动态范围影像方法会计算亮部平均值m2与暗部平均值ml的差异值,并透过特定映射关系,根据差异值获得对应的第一调整强度,其中第一调整强度可以例如是一个百分比值。[0025] 请参照图1、图2A与图2B,图2A与图2B分别是本发明实施例的两张不同影像的直方图,且步骤Sll中所获得的影像的直方图可以如图2A或图2B所示。于此实施例中,图2A的直方图对应一个高反差场景的影像画面中前景较暗而背景较亮,而图2B的直方图非对应一个高反差场景的影像。观察图2A与图2B的直方图,可以得知图2B的差异值低于图2A的差异值,因此,步骤Sll所计算出的差异值可以初步呈现高反差场景的程度,其中高反差场景的程度越大,则第一调整强度应该越大。[0026] 接着,请继续参照图1,在步骤S12中,所述宽动态范围影像方法会先进行了暗部程度加权处理如步骤S121,以调整第一调整强度,并产生第二调整强度,再进行中心亮度加权处理如步骤S122,以调整第二调整强度,并产生第三调整强度。[0027] 请同时参照图1、图2A与图2C,图2C是本发明实施例的另一影像的直方图。图2C的直方图并非对应于高反差场景的影像,然而,图2C的差异值却大致上与图2A的差异值相差不大。因此,考量到差异值虽大但影像的画面并非高反差场景的情况,则需要透过步骤S12对第一调整强度进行数次的加权处理,以避免将此种非高反差场景的影像进行强度较大的调整。[0028] 请继续参照图1,步骤S12包括步骤S121与S122,且细节说明如下。在步骤S121中,所述宽动态范围影像方法根据暗部像素数量与暗部平均值来调整第一调整强度,以产生二调整强度。请参阅图3,图3是本发明实施例的暗部程度加权处理的示意图。于步骤S121中,透过暗部画素数量与权重的映像曲线C31与暗部平均值与权重的映像曲线C31,第一调整强度会被调整为第二调整强度。一般来说,暗部画素数量越多或暗部平均值越小,则表示需要调整的强度越强。举例来说,第一调整强度为90%,但由于暗部画素数量未达第一特定值,故需要乘以第一比例例如0.8,且又因为暗部平均值大于第二特定值,故还得乘上第二比例例如0.9,如此将可得到第二调整强度为64.8%。[0029] 接着,请继续回到图1,于步骤S122中,所述宽动态范围影像方法会对影像划分为多个第一区域与多个第二区域,其中每一个第一区域与第二区域有对应的权重,多个第一区域与多个第二区域分别对应于影像的画面中可能的背景区域与前景区域。然后,所述宽动态范围影像方法依据多个第一区域对应的权重与亮度平均值计算亮部加权平均值,依据多个第二区域对应的权重与亮度平均值计算暗部加权平均值,且依据亮部与暗部加权平均值调整第二调整强度,以产生第三调整强度。另外,第一与第二区域的划分及其权重是相关于场景模式的选择。[0030] 请同时参照图4与图1,图4是本发明的影像划分为多个第一区域与多个第二区域的示意图。于步骤S122中,影像的多个第一区域Rll〜R15、R21、R25、R31、R35、R41、R45、R51与R55的权重分别为Wll〜W15、W21、W25、W31、W35、W41、W45、W51与W55,且其亮度平均值分别为All〜415、421325、431335、441345、451与455,故亮部加权平均值为Wll.A11+W12.A12+W15.A15+W21.A21+W25.Α25…+W55.Α5513;同样地,影像的多个第二区域R22〜R24、R32〜R34、R42〜R44与R52〜R54的权重分别为W22〜W24、W32〜W34、W42〜W44与W52〜W54,且其亮度平均值分别为A22〜A24、A32〜A34、A42〜A44与A52〜A54,故暗部加权平均值为W22.A22+W23.A23+W24.Α24+…+W54.Α5412。然后,计算暗部加权平均值与亮部加权平均值的差异值,以根据此差异值来调整第二调整强度。透过此中心亮度加权处理,前景亮而背景暗的非高反差场景的影像,暗部加权平均值减去亮部加权平均值会是正值,故需要将第二调整强度大幅地往下调,以避免将非高反差场景的影像进行强度较强的调整。[0031] 请继续回到图1,接着,在步骤S13中,所述宽动态范围影像方法依据第三调整强度分配影像各像素进行宽动态范围增益、曝光增益或珈玛增益调整,以产生与输出调整后的影像。更详细地说,第三调整强度可以决定亮度值小于某一门槛值的像素需要进行调整,以及根据依据选择的场景模式、硬件规格与第三调整强度的至少其中之一,位于第一亮度范围的像素会进行宽动态范围增益调整,位于第二亮度范围的像素进行曝光增益调整,而位于第三亮度范围的像素进行珈玛增益调整。[0032] 请同时参照图5与图1,图5是本发明实施例的分配影像各像素进行宽动态范围增益、曝光增益或珈玛增益调整的示意图。若完全地使用宽动态范围增益来调整全部需要进行调整像素,则影像可能会有颜色失真与边际效应边际不连续的现象的问题,故于步骤S13中,仅有亮度值位于两门槛值ΤΗ1、ΤΗ2之间的像素会进行宽动态范围增益调整,亮度值位于两门槛值ΤΗ2、ΤΗ3之间的像素会进行曝光增益调整,而亮度值位于两门槛值ΤΗ3、ΤΗ4之间的像素会进行珈玛增益调整。[0033] 在此请注意,门槛值THl是由第三调整强度所决定,而门槛值ΤΗ2〜ΤΗ4则可以由选择的场景模式、硬件规格与第三调整强度的至少其中之一决定。举例来说,第三调整强度可以是一个百分比,例如90%,门槛值THl〜ΤΗ4分别是最大亮度的90%、30%、20%与10%。另外,上述宽动态范围增益调整亦即现有技术中的宽动态范围影像方法针对像素的调整方式,上述曝光增益调整则是现有技术对像素的曝光时间进行调整的作法,且上述伽玛增益调整是现有技术透过伽玛映像曲线对像素进行调整的作法,故不赘述其细节。[0034] 总而言之,本发明实施例提供一种宽动态范围影像方法,所述宽动态范围影像方法可以增加影像整体的细节,特别是同时能够让影像中暗部区域与亮部区域的细节都能够明显显现。除此之外,所述宽动态范围影像方法还解决了影像经过调整后可能有颜色失真或边际效应的问题。另外,所述宽动态范围影像方法的计算复杂度不大,因此其运行时间快,且实现的硬件复杂度低,故特别可以实现于具有影像撷取功能的电子装置内,且无需变更感光元件的设计。[0035] 以上所述,仅为本发明最佳的具体实施例,惟本发明的特征并不局限于此,任何熟悉该项技艺者在本发明的领域内,可轻易思及的变化或修饰,皆可涵盖在以下本案的专利范围。

权利要求:1.一种宽动态范围影像方法,包括:根据一影像的一亮部平均值与一暗部平均值的一第一差异值获得一第一调整强度;依据该暗部平均值与一暗部像素数量,来调整该第一调整强度,以产生一第二调整强度;计算该影像中多个第一区域的一亮部加权平均值与该影像中多个第二区域的一暗部加权平均值,计算该暗部加权平均值与该亮部加权平均值之间的一第二差异值,并根据该第二差异值调整该第二调整强度,以产生该第三调整强度;以及使用该第三调整强度选择性地对该影像中的多个像素进行调整。2.根据权利要求1所述的宽动态范围影像方法,其中获取该影像的一直方图,根据该些像素的多个亮度值低于一第一门槛值者计算出该暗部平均值,根据该些像素的多个亮度值未低于该第一门槛值者计算出该暗部平均值。3.根据权利要求1所述的宽动态范围影像方法,其中该些第一区域对应于该影像的一背景,该些第二区域对应于该影像的一前景。4.根据权利要求3所述的宽动态范围影像方法,其中根据该些第一区域对应的多个权重与多个亮度平均值计算出该亮部加权平均值,以及根据该些第二区域对应的多个权重与多个亮度平均值计算出该暗部加权平均值。5.根据权利要求4所述的宽动态范围影像方法,其中该些第一区域与该些第二区域的划分与其该些权重是根据选择的一场景模式决定。6.根据权利要求1所述的宽动态范围影像方法,其中依据该第三调整强度选择性地对该影像中的该些像素进行一宽动态范围增益调整、一曝光增益调整或一珈玛增益调整,并输出调整后的该影像。7.根据权利要求6所述的宽动态范围影像方法,其中依据该第三调整强度决定一第一门槛值,其中针对该些像素的多个亮度值低于该第一门槛值者选择性地进行该宽动态范围增益调整、该曝光增益调整或该珈玛增益调整。8.根据权利要求7所述的宽动态范围影像方法,其中对该些像素的多个亮度值介于该第一门槛值与一第二门槛值者进行该宽动态范围增益调整,对于该些像素的多个亮度值介于该第二门槛值与一第三门槛值者进行该曝光增益调整,以及对于该些像素的多个亮度值介于该第三门槛值与一第四门槛值者进行该珈玛增益调整。9.根据权利要求8所述的宽动态范围影像方法,其中该第二至该第四门槛值由该第三调整强度、选择的一场景模式与一硬件规格的至少其中之一决定。10.根据权利要求1所述的宽动态范围影像方法,其中若该第一差异值越大,则该第一调整强度越大;若该暗部平均值越小或该暗部像素数量越多,则第二调整强度越大;若该第二差异值为一正值,则调降该第二调整强度,以产生该第三调整强度。

百度查询: 瑞昱半导体股份有限公司 宽动态范围影像方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。