トップ :: H 電気 :: H04 電気通信技術




【発明の名称】 ノイズ低減デジタル画像信号処理装置
【発明者】 【氏名】左川 学

【要約】 【課題】簡単にかつ安価な回路構成により画像圧縮符号化におけるモスキートノイズを低減するノイズ低減デジタル画像信号処理装置を提供する。

【構成】このノイズ低減デジタル画像信号処理装置は、受信したデジタル放送の放送信号を復調する復調器出力信号のノイズを低減する機能を有し、前記放送信号中のデジタル画像データの画素値に基づいてノイズが発生する箇所を特定するノイズ発生箇所特定手段と、前記ノイズ発生箇所特定手段で特定されたノイズ発生箇所のノイズを低減するフィルタ処理手段と、前記デジタル放送の番組のジャンルに基づいて、前記フィルタ処理手段を制御するフィルタ制御手段と、を備えるものである。例えば、前記フィルタ制御手段は、前記デジタル放送の番組に基づいて、ノイズを低減するフィルタ処理の範囲や強度を選択し、これらの選択データに基づいて前記フィルタ処理手段を制御する。
【特許請求の範囲】
【請求項1】
受信したデジタル放送の放送信号を復調する復調器出力信号のノイズを低減する機能を有するノイズ低減デジタル画像信号処理装置において、前記放送信号中のデジタル画像データの画素値に基づいてノイズが発生する箇所を特定するノイズ発生箇所特定手段と、前記ノイズ発生箇所特定手段で特定されたノイズ発生箇所のノイズを低減するフィルタ処理手段と、を備えることを特徴とするノイズ低減デジタル画像信号処理装置。
【請求項2】
受信したデジタル放送の放送信号を復調する復調器出力信号のノイズを低減する機能を有するノイズ低減デジタル画像信号処理装置において、前記放送信号中のデジタル画像データの画素値に基づいてノイズが発生する箇所を特定するノイズ発生箇所特定手段と、前記ノイズ発生箇所特定手段で特定されたノイズ発生箇所のノイズを低減するフィルタ処理手段と、前記デジタル放送の番組のジャンルに基づいて、前記フィルタ処理手段を制御するフィルタ制御手段と、を備えることを特徴とするノイズ低減デジタル画像信号処理装置。
【請求項3】
請求項2に記載のノイズ低減デジタル画像信号処理装置において、前記フィルタ制御手段は、前記デジタル放送の番組に基づいて、ノイズを低減するフィルタ処理の範囲を選択することを特徴とするノイズ低減デジタル画像信号処理装置。
【請求項4】
請求項2に記載のノイズ低減デジタル画像信号処理装置において、前記フィルタ制御手段は、前記デジタル放送の番組に基づいて、ノイズを低減するフィルタ処理の強度を選択することを特徴とするノイズ低減デジタル画像信号処理装置。
【請求項5】
請求項2に記載のノイズ低減デジタル画像信号処理装置において、前記フィルタ制御手段は、前記デジタル放送の番組に基づいて、ノイズを低減するフィルタ処理の範囲と強度とを記憶するテーブルを備えることを特徴とするノイズ低減デジタル画像信号処理装置。
【請求項6】
請求項2に記載のノイズ低減デジタル画像信号処理装置において、前記フィルタ制御手段は、前記デジタル放送の番組に基づいて、ノイズを低減するフィルタ処理の範囲と強度をユーザが任意に変更できること特徴とするノイズ低減デジタル画像信号処理装置。
【発明の詳細な説明】【技術分野】
【0001】
本発明は、ノイズ低減デジタル画像信号処理装置に関し、具体的には、MPEG(Moving Picture coding Experts Group)方式等によって圧縮符号化された画像が再生される場合に発生するノイズを低減する機能を有するノイズ低減デジタル画像信号処理装置に関する。
【背景技術】
【0002】
一般にデジタル画像データの圧縮に用いられるMPEG方式において、伝送ビットレートが不足する場合、画像のデータは高周波成分が削除されて圧縮される。この圧縮されたデータを伸張した場合、高周波成分が削除されているため画像のエッジ部分にモスキートノイズと呼ばれるノイズが発生する。モスキートノイズ(リンギングノイズとも呼ばれる)とは、画像のエッジ部分に蚊が飛んでいる様にチラチラと生じるノイズのことであり、MPEG方式による圧縮画像においては、非常に明るい場面や非常に暗い場面では目立ちにくく、中間の明るさのレベルから非常に明るいレベルへの画素値の変化があった場合にモスキートノイズが目立ちやすくなる。
【0003】
このノイズは、伝送ビットレートが低くなる(圧縮率が高い)につれてより多く発生する様になる。そこで、このノイズを低減する方法として、符号化情報を利用し符号化ノイズを検出してフィルタ処理を行う方法があり、例えば特許文献1、2で開示されている。
【0004】
特許文献1は、符号化時には、現フレームの各ブロックと前フレームの対応するブロック情報から動きベクトルを求めると共に該動きベクトルの信頼性を示すクラス情報を求め、該クラス情報を伝送データと共に伝送して、伝送データの増加を最小限とし復号の際の負担を最小限とする。復号化時には、クラス情報に基づいて、フレーム間の相関のないノイズを除去する巡回型フィルタのノイズリダクション係数を変化させ、高域のノイズを適応的にかつ効果的に低減する。
【0005】
また、特許文献2は、符号データから各ブロックについての動きベクトル等を抽出し、抽出された動きベクトルから各ブロックの参照領域を求める。そのブロックにおいて直交変換係数の各周波数成分の分布に基づいて低減すべき符号化ノイズを検出し、フィルタ処理を行い、ノイズを低減する方法である。
【特許文献1】特開平7−203442号公報
【特許文献2】特開2001−204029号公報
【発明の開示】
【発明が解決しようとする課題】
【0006】
しかしながら、特許文献1では、符号化装置と復号化装置が連動して処理される必要があるため特定のシステムでなければノイズ低減の効果は得られない。また、フレームメモリを用いた巡回型フィルタであるためフレームメモリが必要となりコストが嵩む問題点がある。
【0007】
また、特許文献2では、マクロブロックがフレーム内符号化(イントラ符号化)されているか、フレーム間符号化(非イントラ符号化)されているかで処理方法が異なるためフレームメモリが必要となり同様にコストが嵩むという問題点がある。
【0008】
本発明は、上述の実情を考慮してなされたもので、簡単にかつ安価な回路構成により画像圧縮符号化におけるモスキートノイズを低減するノイズ低減デジタル画像信号処理装置を提供することを目的とする。
【課題を解決するための手段】
【0009】
上記の課題を解決するために、本発明のノイズ低減デジタル画像信号処理装置は、
受信したデジタル放送の放送信号を復調する復調器出力信号のノイズを低減する機能を有し、前記放送信号中のデジタル画像データの画素値に基づいてノイズが発生する箇所を特定するノイズ発生箇所特定手段と、前記ノイズ発生箇所特定手段で特定されたノイズ発生箇所のノイズを低減するフィルタ処理手段と、前記デジタル放送の番組のジャンルに基づいて、前記フィルタ処理手段を制御するフィルタ制御手段と、を備えるものである。
【0010】
前記フィルタ制御手段は、ノイズを低減するフィルタ処理の範囲や強度をデジタル放送の番組に基づいてテーブルに記憶させておき、このテーブルを参照して、前記デジタル放送の番組に基づいたノイズを低減するフィルタ処理の範囲や強度を選択する。そして、このフィルタ処理の範囲や強度によって前記フィルタ処理手段を制御する。また、このテーブルは、ユーザが任意に変更することができる。
これにより、デジタル放送の番組に応じて良好なノイズ低減処理を行うことが可能となる。
【発明の効果】
【0011】
本発明によれば、伝送のビットレートが不足した場合に発生するモスキートノイズについて入力される画素データからモスキートノイズの発生する箇所が特定でき、フィルタ処理を行う画素についても、フィルタ処理方法を画素によって変えてフィルタ処理後の画質の低下を防ぐようにしている。
また、突発性のエラーで画素値が大きく変わるような箇所についても閾値を設け、過敏な反応を防ぎ余計なフィルタ処理がかからないようにしている。
【0012】
さらに、フィルタ処理を行う画素の範囲や強度を番組のジャンル毎に設定するテーブルを設けユーザが意識せず番組に適切なフィルタ処理が可能である。
また、フィルタ処理を行う画素の範囲設定は外部より可変可能であり、状況に応じて値を変えることでより適切なノイズ低減ができる。
これによって、大規模なメモリを必要とせず、単独でかつ簡単な回路が構成でき画質の劣化を極力抑え、モスキートノイズを低減することが可能となる。
【発明を実施するための最良の形態】
【0013】
以下、図面を参照して本発明のノイズ低減デジタル画像信号処理装置に係る好適な実施形態を説明する。
【0014】
図1は、本発明の実施形態に係るノイズ低減デジタル画像信号処理装置を適用したデジタル放送受信装置の構成を示すブロック図である。図1において、デジタル放送受信装置は、BSデジタル放送用のアンテナ101、地上デジタル放送用のアンテナ102、CSデジタル放送用のアンテナ103、110度CSデジタル放送用のアンテナ104、同調、復調を行うフロントエンド105、トランスポートデコーダ106、映像デコーダ107、ノイズ低減デジタル画像信号処理装置100、表示デバイス110から構成される。ノイズ低減デジタル画像信号処理装置100は、ノイズ低減フィルタ動作制御部108、フィルタ制御部109から構成される。
【0015】
以下、デジタル放送受信装置に用いられたノイズ低減デジタル画像信号処理装置の動作について説明する。
各アンテナ101,102,103,104で受信されたデジタル放送はフロントエンド105に入力される。フロントエンド105は目的の放送周波数に同調し、放送方式に対応した復調方式で復調を行う。
フロントエンド105から出力されたデータは、通常MPEG2−TS形式となっておりトランスポートデコーダ106に入力される。
トランスポートデコーダ106では、MPEG2−TSから目的の番組の映像ストリームが抽出され、出力される。トランスポートデコーダ106から出力された映像ストリームは映像デコーダ107に入力され、映像データとしてデコードされる。
映像デコーダ107から出力されたデータは、ノイズ低減フィルタ動作制御部108に入力され、映像データのエッジ部を検出し、このエッジ部の情報に基づいてフィルタ処理が行われ、ノイズが低減された映像を表示デバイス110に供給する。
【0016】
また、フィルタ制御部109は、フロントエンド105から現在受信している放送の番組についてどのようなジャンルなのか判断し、そのジャンルに応じたフィルタ動作を施すための制御信号CTLをノイズ低減フィルタ動作制御部108へ出力する。また、ユーザが任意にこの制御信号CTLを変更した場合、この情報がユーザ設定メモリに保持されるとともに、ノイズ低減フィルタ動作制御部108に出力される。
【0017】
図2は、ノイズ低減フィルタ動作制御部108の詳細な機能ブロック図であり、同図において、ノイズ低減フィルタ動作制御部108は、ノイズ発生箇所特定部130とフィルタ処理部131から構成される。
ノイズ発生箇所特定部130は、エッジ検出部111、高画素値検出部112、エッジ左方向画素フィルタ範囲設定部113、エッジ右方向画素フィルタ範囲設定部114からなり、映像デコーダ107から出力されたデータ(IN_DATA)の画素値に基づいてノイズが発生する箇所を特定する。フィルタ処理部131は、ノイズ低減フィルタ動作制御生成部115、ノイズ低減フィルタ116とからなり、ノイズ発生箇所特定手段130で特定されたノイズ発生箇所のノイズを低減させる。
【0018】
映像デコーダ107から出力されたデータ(IN_DATA)は、エッジ検出部111と高画素値検出部112に入力され、入力データのエッジを検出する。
エッジ検出部111は、入力信号IN_DATAに対して、IN_DATAとIN_DATAを1画素遅延したデータとの差分の絶対値を検出し、その絶対差分値が予め設定された閾値1(例えば、40)を超えた画素についてエッジであるとする。
高画素値検出部112は、入力されたIN_DATAについて予め設定された閾値2(例え、180)以上の画素を検出し、入力データIN_DATAの画素が閾値2より高い画素の区間を示すフラグ2を生成する。
【0019】
エッジ左方向画素フィルタ範囲設定部113は、エッジ検出部111で検出されたエッジの開始前の数画素(フィルタ処理する画素の候補)を示すフラグ1と、エッジの開始を示すF_EDGEをノイズ低減フィルタ動作制御部115に出力する。
エッジ右方向画素フィルタ範囲設定部114は、高画素値検出部112で検出されたフラグ2の区間の終了後の数画素(フィルタ処理する画素の候補)を示すフラグ3と、エッジの終了を示すB_EDGEをノイズ低減フィルタ動作制御部115に出力する。
ノイズ低減フィルタ動作制御生成部115は、エッジ左方向画素フィルタ範囲設定部113とエッジ右方向画素フィルタ範囲設定部114とから出力された制御信号と、高画素値検出部112から出力されたフラグ2とを入力し、これらの制御信号に基づいてノイズ低減フィルタ116を制御する制御信号EN_Pを出力する。
ノイズ低減フィルタ116は、ノイズ低減フィルタ動作制御生成部115から出力された制御信号EN_Pに基づいてフィルタ処理が実施される。
【0020】
図3は、ノイズ低減フィルタ動作制御部108のタイミング図である。入力データ(IN_DATA)が輝度信号であった場合を例にして説明する。
フラグ2は、入力データIN_DATAの画素の輝度レベルがある閾値2より高い画素のときの信号がHighとなり、低いときの信号はLowとなる。したがって、フラグ2の信号がHighの間が、入力データIN_DATAの画素の輝度レベルがある閾値2より高い画素の区間を示す。
フラグ1は、輝度レベルが閾値より高い画素の区間の開始前の数画素(フィルタ処理する画素の候補、図の例では4画素)のときHighとなる信号である。
F_EDGEは、画像エッジの開始のときにHighとなる信号である。
フラグ3は、輝度レベルが閾値より高い画素の区間の終了後の数画素(フィルタ処理する画素の候補、図の例では4画素)のときHighとなる信号である。
B_EDGEは、画像エッジの終了のときにHighとなる信号である。
EN_Pは、フィルタ処理を行う画素を制御する信号で、この例では、値が「1」の場合にフィルタ処理を行い、それ以外はフィルタ処理を行わないように制御する。
【0021】
図4は、フィルタ制御部109の内部構成を示すブロック図である。同図において、フィルタ制御部109は、番組ジャンルデコーダ117、分類デコーダ118、フィルタ範囲強度ユーザ設定部119、ユーザ設定メモリ120、制御信号生成部121とからなっている。
番組ジャンルデコーダ117は、フロントエンド105で抜き出された、電子番組表(EPG)などで使用する番組情報が入力され、入力された情報(現在の放送番組)がどのジャンルなのかを予め設定しておいたジャンルテーブルに基づきデコードし、それに相当するデータ(図5の例では、分類コード)を分類デコーダ118に出力する。図5は、ジャンルテーブルの例であり、各ジャンルごとに分類コードを対応付けて、記憶手段へ記憶されている。
【0022】
分類デコーダ118は、番組ジャンルデコーダ117で分類されたジャンルについて、ユーザ設定メモリ120を参照して、さらに詳細な分類分けを行う。
ユーザ設定メモリ120は、大分類のジャンルごとに、詳細なジャンルとその分類コード、フィルタ範囲、フィルタ強度とを対応付けて、記憶手段へ記憶されている。このうちジャンル分けとその分類コードについては予め設定されており、フィルタ範囲とフィルタ強度とは、フィルタ範囲強度ユーザ設定部119で設定されるものである。
【0023】
図6は、大分類のジャンル1が「スポーツ」について詳細分類した例で、さらにジャンル2として11種類に分類されており、この設定値を基本にフィルタ制御信号を出力する。この図6では、フィルタ範囲において「5」は最大の幅が選択され、「1」は最小の幅が選択されるようになる。同様に、フィルタ強度も「5」は最大強度で「1」は最小強度になる。このフィルタ範囲と強度の設定は、例えば画面の動きが大きいと思われる番組のジャンルに対しては大きく、静止画が多いと思われる番組のジャンルについては小さく設定する。
【0024】
フィルタ範囲強度ユーザ設定部119は、例えば、ユーザが画面を見ながらリモコンで、ジャンル毎のフィルタの範囲と強度を入力し、その入力された情報を各ジャンルに対応付けてユーザ設定メモリ120に記憶するとともに、分類デコーダ118に入力される。
フィルタ範囲強度ユーザ設定部119では、予め設定されている各ジャンルのフィルタの範囲と強度に修正を加えてユーザが好む設定に変更することができる。
【0025】
制御信号生成部121は、分類デコーダ118から出力された信号とユーザ設定メモリ120の内容によって、ノイズ低減フィルタ動作制御部108を制御する信号を生成し、出力する。ノイズ低減フィルタ動作制御部108は、フィルタ制御部109から出力された制御信号で設定されたフィルタ範囲とフィルタ強度に基づいてフィルタ処理を行う。
【0026】
次に、図7のフローチャートを用いて、入力されたデジタル放送に対してノイズ低減フィルタ動作制御部108の制御信号を生成するまでの処理手順について説明する。
ユーザが放送番組について手動でフィルタ範囲と強度の設定を選択した場合(ステップS1/NO)、ユーザが手動でフィルタ範囲と強度を設定する(ステップS16)。
【0027】
一方、自動設定が選択された場合(ステップS1/YES)、番組ジャンル情報を検出する(ステップS2)。
次に、検出された情報をもとにジャンルテーブル(図5)を参照して、どのジャンルであるか、さらにそのジャンルについてユーザ設定メモリ120(図6)を参照して詳細な分類を選択し(ステップS3からS14)、各ジャンルのフィルタ範囲と強度を選択し(ステップS16)、ステップS15へ移行する。
例えば、図6を参照すると、現在の番組がゴルフであった場合、ジャンル1は「スポーツ」、ジャンル2は「ゴルフ」、そのときのフィルタ範囲は「2」、フィルタ強度は「1」が選択される。
【0028】
次に、ユーザが手動でフィルタ範囲と強度の修正を選択しなかった場合(ステップS15/NO)、処理を終了し、他方、手動でフィルタ範囲と強度の修正を選択した場合(ステップS15/YES)、ユーザが手動で各番組ジャンルのフィルタ範囲と強度の初期設定を修正し(ステップS16)、ステップS15へ移行する。
ここで、初期設定に対してフィルタ制御部109から出力される「CTL」信号によりフィルタ範囲を広くする場合やフィルタ強度を小さくする場合に、ユーザが任意に値を修正し、反映させることができる。この修正された設定を初期値とすることも可能であり、その設定はユーザ設定メモリ120に保存される。
また、制御信号生成部121に情報が出力され、分類デコーダ118で設定される番組ジャンルによるフィルタ範囲と強度設定以外の設定も可能となる。
【0029】
次に、フィルタ処理の動作について図8乃至12を参照して説明する。
図12は、ある元画像(A)に対して低いビットレートで圧縮した場合、デコードされた画像は(B)のように画像のエッジの手前でリンギングが発生することを示した図である。このリンギングがモスキートノイズと呼ばれ、画面のエッジ部分に目立つノイズとなる。この図12では、エッジの手前について示しているが、エッジの後にも同じ様なノイズが発生する。
【0030】
図8および図9は、フィルタ範囲とフィルタ強度が適切でない場合のフィルタ処理前と処理後の波形を示している。
図8の(C)で示すようにフィルタ範囲は適切であるがフィルタ強度が不足しているため、図8の(D)のようにリンギングが残った状態となっている。
図9の(E)は、フィルタ範囲が狭く、フィルタ強度も不足しているため、図9の(F)のようにまったくフィルタ処理されない画素とフィルタ処理が不足している画素がある波形となってしまっている。
【0031】
このようなフィルタの調整不足は、ユーザが外部より調整できるようなっており、図10や図11に示したようにフィルタ範囲とフィルタ強度を最適な設定に修正することで、図10の(H)や図11の(K)のようにリンギングが減少した波形とすることができる。
【0032】
以上は、輝度データについての動作説明であるが色差データについても基本的な動作は同じである。この場合には、図2に示す回路が色差データCbとCrそれぞれに設けられ、フィルタ処理が実施される。
この様に本発明では、復号されたデータに対してモスキートノイズが目立ちやすい箇所にのみフィルタ処理を行うので、本来高周波成分が多い画素については余計なフィルタ処理は行われないので全体になまった様な画像になることはない。
【0033】
また、復号されたデータの画素値のみでノイズ検出およびノイズ低減を行うため、大規模なメモリを必要とせず、単独でかつ簡単な回路が構成できる。
また、本発明は水平方向の処理について説明してきたがラインメモリを数個持つことにより垂直方向の処理が可能となる。
また、垂直方向の処理も基本的に同じであり、数ライン分のデータをラインメモリに蓄え、同じ垂直方向の画素値を参照してエッジを検出後、前後数画素についてフィルタ処理を施すことで更なるモスキートノイズの低減が可能となる。
【0034】
また、本発明は上述した実施形態に限定されず、本発明の要旨を逸脱しない範囲内で各種の変形、修正が可能であるのは勿論である。
【図面の簡単な説明】
【0035】
【図1】本発明の実施形態に係るノイズ低減デジタル画像信号処理装置を適用したデジタル放送受信装置の構成を示すブロック図である。
【図2】本発明のノイズ低減フィルタ動作制御部の詳細な機能ブロック図である。
【図3】フィルタ処理を行う場合のタイミング図である。
【図4】本発明のフィルタ制御部の詳細な機能ブロック図である。
【図5】デジタル放送における番組のジャンルテーブルの例である。
【図6】ユーザ設定メモリの例である。
【図7】入力されたデジタル放送に対してノイズ低減フィルタ動作制御部の制御信号を生成するまでの処理手順について説明するフローチャートである。
【図8】モスキートノイズのフィルタ処理が適切でない場合を説明する図である。
【図9】モスキートノイズのフィルタ処理が適切でない場合を説明する図である。
【図10】モスキートノイズのフィルタ処理が適切な場合を説明する図である。
【図11】モスキートノイズのフィルタ処理が適切な場合を説明する図である。
【図12】モスキートノイズの発生を説明する図である。
【符号の説明】
【0036】
100…ノイズ低減デジタル画像信号処理装置、101…BSデジタル放送アンテナ、102…地上デジタル放送アンテナ、103…CSデジタル放送アンテナ、104…110度CSデジタル放送アンテナ、105…フロントエンド、106…トランスポートデコーダ、107…映像デコーダ、108…ノイズ低減フィルタ動作制御部、109…フィルタ制御部、110…表示デバイス、111…エッジ検出部、112…高画素値検出部、113…エッジ左方向画素フィルタ範囲設定部、114…エッジ右方向画素フィルタ範囲設定部、115…ノイズ低減フィルタ動作制御生成部、116…ノイズ低減フィルタ、117…番組ジャンルデコーダ、118…分類デコーダ、119…フィルタ範囲強度ユーザ設定、120…ユーザ設定メモリ、121…制御信号生成部、130…ノイズ発生箇所特定部、131…フィルタ処理部。
【出願人】 【識別番号】000005049
【氏名又は名称】シャープ株式会社
【出願日】 平成18年8月31日(2006.8.31)
【代理人】 【識別番号】100079843
【弁理士】
【氏名又は名称】高野 明近


【公開番号】 特開2008−60870(P2008−60870A)
【公開日】 平成20年3月13日(2008.3.13)
【出願番号】 特願2006−234807(P2006−234807)