トップ :: H 電気 :: H04 電気通信技術




【発明の名称】 画像信号処理装置及びその方法
【発明者】 【氏名】近藤 浩
【要約】 【課題】画質障害を起こすことなく、圧縮率を大幅に上げる画像信号処理装置及びその方法を提供。

【解決手段】画像処理部２は、Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、・・第ｎの画像からなる複数の画像に分解。分解された第１の画像からエッジ位置を検出し、第１の画像以外の画像からエッジ位置情報に対応した画素値を取得する。第１の画像から推定算出する画素値と取得した画素値との差分値を算出する。符号化処理部３は、差分値と、第１の画像とを取得して圧縮処理する。
【特許請求の範囲】
【請求項１】
入力された画像信号を画像処理する画像処理部と、画像処理された処理データを圧縮する符号化処理部と、該符号化処理されたデータを伸長する復号化処理部を備えた画像信号処理装置において、
前記画像処理部は、Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、第２の画像・・・第ｎの画像からなる複数の画像に分解する分解処理部と、前記分解処理部で分解された画像のうち、第１の画像からエッジ位置を検出し、そのエッジ位置情報を取得するエッジ位置情報取得部と、前記分解処理部で分解された画像のうち、前記第１の画像以外の画像から前記エッジ位置情報取得部により取得したエッジ位置情報に対応した画素値をそれぞれの画像から取得する画素値取得部と、前記エッジ位置情報取得部により取得したエッジ位置情報に対応する第１の画像以外の画像の画素値を第１の画像から推定算出する画素値推定算出部と、前記画素値推定算出部で推定算出した画素値と、前記画素値取得部により取得した画素値との差分値を算出する差分値算出部とからなり、
前記符号化処理部は、該差分値算出部で算出された差分値と、前記分解処理部で分解された第１の画像とを取得して圧縮処理して処理データを生成し、
前記復号化処理部は、前記符号化処理部から伝送された前記処理データを符号化処理部と同じルールに基づいて伸長し、
更に前記画像処理部は、前記復号化処理部で伸長されたデータのうち、第１の画像から該第１の画像以外の画像を推定・作成する推定画像作成部と、前記推定画像作成部で作成された画像に、前記伸長されたデータのうちの差分値を前記作成された画像のエッジに加算する加算処理部と、該加算処理部で加算された画像と前記伸長された第１の画像を合成して、復元画像を作成する復元画像生成部とを備えることを特徴とする画像信号処理装置。
【請求項２】
Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、第２の画像・・・第ｎの画像からなる複数の画像に分解する第１の工程と、
前記第１の工程により分解された画像のうち、第１の画像からエッジ位置を検出し、そのエッジ位置情報を取得する第２の工程と、
前記第１の工程により分解された画像のうち、第１の画像以外の画像から前記第２の工程により取得したエッジ位置情報に対応した画素値をそれぞれの画像から取得する第３の工程とを有することを特徴とする画像信号処理方法。
【請求項３】
Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、第２の画像・・・第ｎの画像からなる複数の画像に分解する第１の工程と、
前記第１の工程により分解された画像のうち、第１の画像からエッジ位置を検出し、そのエッジ位置情報を取得する第２の工程と、
前記第１の工程により分解された画像のうち、第１の画像以外の画像から前記第２の工程により取得したエッジ位置情報に対応した画素値をそれぞれの画像から取得する第３の工程と、
前記第２の工程により取得したエッジ部位置情報に対応する第１の画像以外の画像の画素値を第１の画像から推定算出する第４の工程と、
前記エッジ位置情報に対応した前記第４の工程により推定算出した推定画素値と、前記第３の工程により取得した画素値との差分値を算出する第５の工程とを有することを特徴とする画像信号処理方法。
【請求項４】
Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、第２の画像・・・第ｎの画像からなる複数の画像に分解する第１の工程と、
前記第１の工程により分解された画像のうち、第１の画像からエッジ位置を検出し、そのエッジ位置情報を取得する第２の工程と、
前記第１の工程により分解された画像のうち、第１の画像以外の画像から前記第２の工程により取得したエッジ位置情報に対応した画素値をそれぞれの画像から取得する第３の工程と、
前記第２の工程により取得したエッジ部位置情報に対応する第１の画像以外の画像の画素値を第１の画像から推定算出する第４の工程と、
前記エッジ位置情報に対応した前記第４の工程により推定算出した推定画素値と、前記第３の工程により取得した画素値との差分値を算出する第５の工程とを有し、
前記第５の工程で算出したエッジ位置情報に対応する差分値と、前記第１の画像をそれぞれ符号化処理部により圧縮して処理データを生成する第６の工程と、
前記第６の工程で圧縮された前記処理データを伝送する第７の工程と、
前記第７の工程で伝送されたデータを圧縮手段と同じルールに基づいて復号化処理部により伸長する第８の工程と、
前記第８の工程により、伸長されたデータのうち、第１の画像から前記第１の工程で分解された画像のうち第１の画像以外の画像を推定し、作成する第９の工程と、
前記第９の工程により作成された画像に、前記第８の工程で伸長されたデータのうちエッジ位置情報に対応する差分値を前記作成された画像のエッジ部に加算する第１０の工程と、
第１０の工程により加算された画像と第１の画像を合成して、復元画像を作成する第１１の工程とを有することを特徴とする画像信号処理方法。
【発明の詳細な説明】【技術分野】
【０００１】
本発明は、画像信号処理装置及びその方法に関し、詳しくは画像障害を起こすことなく画像圧縮率を上げる画像信号処理装置及びその方法に関する。
【背景技術】
【０００２】
従来、デジタル画像の普及は、目を見張るものがあり、携帯電話、インターネット等で1日に送信される画像は膨大な情報量となる。この送受信をストレスなく行うため種々の画像圧縮符号化法が開発された。
【０００３】
これらをまとめて世界標準としたのが、静止画ではＪＰＥＧ（特許文献１）、動画ではＭＰＥＧである。これらは安定性、効率の観点から選ばれたもので複数の手法を組み合わせたものである。このうち最も多用されている手法がＤＣＴ・サブブロック符号化法である。
【０００４】
これは殆どのデジタルカメラに内蔵されており、圧縮効率も高く安定性に優れた手法である。
【０００５】
しかしこれは圧縮率を上げると不自然なノイズブロックが現れる。このデジタル特有の劣化は視覚的に大きな画質障害となる。
【特許文献１】米国特許第４６９８６７２号
【発明の開示】
【発明が解決しようとする課題】
【０００６】
本発明者は、現在の圧縮率よりもさらに１／４の圧縮率を、画質障害を起こすことなく実現できる装置及び方法の開発を試み、同じ情報量で４倍の情報が送信できることになり、インターネットや携帯電話における膨大な情報量の送信ニーズに応えることが出来る画像信号処理装置及びその方法を完成し、本発明に至った。この発明はこの業界の市場にインパクトを与える非常に画期的なものである。
【０００７】
本発明の課題は、圧縮画像を作成する際、画質障害を起こすことなく、圧縮率を大幅に上げる画像信号処理装置及びその方法を提供することにある。
【０００８】
本発明の他の課題は以下の記載によって明らかとなる。
【課題を解決するための手段】
【０００９】
上記課題は、以下の発明によって解決される。
【００１０】
（請求項１）
入力された画像信号を画像処理する画像処理部と、画像処理された処理データを圧縮する符号化処理部と、該符号化処理されたデータを伸長する復号化処理部を備えた画像信号処理装置において、
前記画像処理部は、Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、第２の画像・・・第ｎの画像からなる複数の画像に分解する分解処理部と、前記分解処理部で分解された画像のうち、第１の画像からエッジ位置を検出し、そのエッジ位置情報を取得するエッジ位置情報取得部と、前記分解処理部で分解された画像のうち、前記第１の画像以外の画像から前記エッジ位置情報取得部により取得したエッジ位置情報に対応した画素値をそれぞれの画像から取得する画素値取得部と、前記エッジ位置情報取得部により取得したエッジ位置情報に対応する第１の画像以外の画像の画素値を第１の画像から推定算出する画素値推定算出部と、前記画素値推定算出部で推定算出した画素値と、前記画素値取得部により取得した画素値との差分値を算出する差分値算出部とからなり、
前記符号化処理部は、該差分値算出部で算出された差分値と、前記分解処理部で分解された第１の画像とを取得して圧縮処理して処理データを生成し、
前記復号化処理部は、前記符号化処理部から伝送された前記処理データを符号化処理部と同じルールに基づいて伸長し、
更に前記画像処理部は、前記復号化処理部で伸長されたデータのうち、第１の画像から該第１の画像以外の画像を推定・作成する推定画像作成部と、前記推定画像作成部で作成された画像に、前記伸長されたデータのうちの差分値を前記作成された画像のエッジに加算する加算処理部と、該加算処理部で加算された画像と前記伸長された第１の画像を合成して、復元画像を作成する復元画像生成部とを備えることを特徴とする画像信号処理装置。
【００１１】
（請求項２）
Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、第２の画像・・・第ｎの画像からなる複数の画像に分解する第１の工程と、
前記第１の工程により分解された画像のうち、第１の画像からエッジ位置を検出し、そのエッジ位置情報を取得する第２の工程と、
前記第１の工程により分解された画像のうち、第１の画像以外の画像から前記第２の工程により取得したエッジ位置情報に対応した画素値をそれぞれの画像から取得する第３の工程とを有することを特徴とする画像信号処理方法。
【００１２】
（請求項３）
Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、第２の画像・・・第ｎの画像からなる複数の画像に分解する第１の工程と、
前記第１の工程により分解された画像のうち、第１の画像からエッジ位置を検出し、そのエッジ位置情報を取得する第２の工程と、
前記第１の工程により分解された画像のうち、第１の画像以外の画像から前記第２の工程により取得したエッジ位置情報に対応した画素値をそれぞれの画像から取得する第３の工程と、
前記第２の工程により取得したエッジ部位置情報に対応する第１の画像以外の画像の画素値を第１の画像から推定算出する第４の工程と、
前記エッジ位置情報に対応した前記第４の工程により推定算出した推定画素値と、前記第３の工程により取得した画素値との差分値を算出する第５の工程とを有することを特徴とする画像信号処理方法。
【００１３】
（請求項４）
Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、第２の画像・・・第ｎの画像からなる複数の画像に分解する第１の工程と、
前記第１の工程により分解された画像のうち、第１の画像からエッジ位置を検出し、そのエッジ位置情報を取得する第２の工程と、
前記第１の工程により分解された画像のうち、第１の画像以外の画像から前記第２の工程により取得したエッジ位置情報に対応した画素値をそれぞれの画像から取得する第３の工程と、
前記第２の工程により取得したエッジ部位置情報に対応する第１の画像以外の画像の画素値を第１の画像から推定算出する第４の工程と、
前記エッジ位置情報に対応した前記第４の工程により推定算出した推定画素値と、前記第３の工程により取得した画素値との差分値を算出する第５の工程とを有し、
前記第５の工程で算出したエッジ位置情報に対応する差分値と、前記第１の画像をそれぞれ符号化処理部により圧縮して処理データを生成する第６の工程と、
前記第６の工程で圧縮された前記処理データを伝送する第７の工程と、
前記第７の工程で伝送されたデータを圧縮手段と同じルールに基づいて復号化処理部により伸長する第８の工程と、
前記第８の工程により、伸長されたデータのうち、第１の画像から前記第１の工程で分解された画像のうち第１の画像以外の画像を推定し、作成する第９の工程と、
前記第９の工程により作成された画像に、前記第８の工程で伸長されたデータのうちエッジ位置情報に対応する差分値を前記作成された画像のエッジ部に加算する第１０の工程と、
第１０の工程により加算された画像と第１の画像を合成して、復元画像を作成する第１１の工程とを有することを特徴とする画像信号処理方法。
【発明の効果】
【００１４】
本発明によれば、圧縮画像を作成する際、画質障害を起こすことなく、圧縮率を大幅に上げる画像信号処理装置及びその方法を提供できる。
【発明を実施するための最良の形態】
【００１５】
以下、本発明の好ましい実施の形態について説明する。
【００１６】
図１は、本発明の画像信号処理装置の一例を示す機能ブロック図であり、同図において、１は入力部、２は画像処理部、３は符号化処理部、４は伝送部、５は復号化処理部、６は出力部である。
【００１７】
入力部１は、カメラなどの撮影手段を用いることができる。カメラにより人物の顔や顔写真のような被写体を、撮像レンズを介して撮影し、ＣＣＤ（撮像素子）の撮像面上に結像し、ＣＣＤにより結像された光学像を画素単位で光量に応じた信号電荷に光電変換され、光電変換された信号はＡ／Ｄ変換器によりデジタル信号に変換される。
【００１８】
画像処理部２は、入力画像処理部と出力画像処理部に分けられ、入力画像処理部は、分解処理部２００、エッジ位置情報取得部２０１、画素値取得部２０２、画素値推定算出部２０３、差分値算出部２０４を少なくとも備えている。
【００１９】
分解処理部２００は、Ｎ×Ｎ画素の引き続くブロックからなる原画像信号を各ブロックの同一位置の画素を取り出して第１の画像、第２の画像・・・第ｎの画像からなる複数の画像に分解する。
【００２０】
本実施例では２×２画素の引き続くブロックからなる原画像信号を４分解する例について説明する。従って、原画像は第１の画像、第２の画像、第３の画像、第４の画像に分解される。
【００２１】
エッジ位置情報取得部２０１は、前記分解処理部２００で分解された画像のうち、第１の画像からエッジ位置を検出し、そのエッジ位置情報を取得する。取得したエッジ位置情報は、図示しないメモリーに一時的に保存する。
【００２２】
本発明では、画像の平坦部とエッジ部のうち、エッジ部位置のみを検出する点に特徴がある。エッジ部は画像の輪郭を表し、人間の目が敏感に反応する個所だからである。
【００２３】
画素値取得部２０２は、前記分解処理部２００で分解された画像のうち、前記第１の画像以外の画像、具体的には第２の画像、第３の画像、第４の画像から前記エッジ位置情報取得部２０１により取得したエッジ位置情報に対応した画素値をそれぞれの画像から取得する。取得した画素値は、図示しないメモリーに一時的に保存する。
【００２４】
画素値推定算出部２０３は、前記エッジ位置情報取得部２０１により取得したエッジ位置情報に対応する第１の画像以外の画像、具体的には第２の画像、第３の画像、第４の画像の画素値を第１の画像から推定算出する。推定算出の手法については、後述の処理フローで詳述する。推定算出された画素値は、図示しないメモリーに一時的に保存する。
【００２５】
差分値算出部２０４は、前記画素値推定算出部２０３で推定算出した画素値と、前記画素値取得部２０２により取得した画素値との差分値を算出する。
【００２６】
本発明では、図２に示すように、エッジ位置情報取得部２０１で取得したエッジ位置情報と、差分値算出部２０４で算出された差分値を関連付けてテーブルに保存することも好ましいことである。
【００２７】
前記符号化処理部３は、該差分値算出部２０４で算出された差分値と、前記分解処理部２００で分解された第１の画像とを取得して圧縮処理して処理データを生成する。圧縮処理の手法は後述する。
【００２８】
前記復号化処理部５は、前記符号化処理部３から伝送部４を介して伝送された前記処理データを符号化処理部３と同じルールに基づいて伸長する。ここで同じルールというのは、符号化手法と逆手法（可逆変換）を意味している。
【００２９】
前記画像処理部２における出力画像処理部は、推定画像作成部２０５と加算処理部２０６と復元画像生成部２０７とを少なくとも備えている。
【００３０】
推定画像作成部２０５は、前記復号化処理部５で伸長されたデータのうち、第１の画像から該第１の画像以外の画像、具体的には第２の画像、第３の画像、第４の画像に相当する画像を推定・作成する。
【００３１】
加算処理部２０６は、前記推定画像作成部２０５で作成された画像に、前記伸長されたデータのうちの差分値を前記作成された画像のエッジに加算する。
【００３２】
復元画像生成部２０７は、該加算処理部２０６で加算された画像と前記伸長された第１の画像を合成して、復元画像を作成する。
【００３３】
伝送部４としては、例えば伝送路や蓄積装置などを用いることができ、伝送路としては通信回線などが挙げられ、蓄積装置としてはハードディスクなどの補助記憶装置などが挙げられる。
【００３４】
出力部６は復元画像の出力部であり、例えばディスプレイを用いることができる。
【００３５】
次に、図２のフローチャートに基づいて本発明の画像信号処理方法の一例を説明する。
【００３６】
まず、図１に示す分解処理部２００で、画像分解工程を行う（Ｓ１）。ここでは図４に示す原画像を４分解して図５（ａ）〜図５（ｄ）の分解画像を得た場合の例で説明する。
【００３７】
原画像をｆ（ｉ，ｊ）とし、４分解した画像をＦ１（ｍ，ｎ）、Ｆ２（ｍ，ｎ）、Ｆ３（ｍ，ｎ）、Ｆ４（ｍ，ｎ）とした時の、画像を下記数式で示す。
【００３８】
（数１）
Ｆ１（ｍ，ｎ）＝ｆ（２ｍ，２ｎ）・・・・・・・（１）
Ｆ２（ｍ，ｎ）＝ｆ（２ｍ，２ｎ＋１）・・・・・（２）
Ｆ３（ｍ，ｎ）＝ｆ（２ｍ＋１，２ｎ）・・・・・（３）
Ｆ４（ｍ，ｎ）＝ｆ（２ｍ＋１，２ｎ＋１）・・・（４）
（ｍ＝０，１，２，… ｉ／２、ｎ＝０，１，２，… ｊ／２）
【００３９】
すなわち、原画像ｆ（ｉ，ｊ）をすべて２×２画素の引き続くブロックと考えて、各ブロックから０行０列目の画素だけ取り出して作った画像がＦ１（ｍ，ｎ）、０行１列目の画素のみから作られた画像がＦ２（ｍ，ｎ）、１行０列目の画素から作られる画像がＦ３（ｍ，ｎ）、残りの画素（１行１列目）から作られる画像がＦ４（ｍ，ｎ）である。
【００４０】
図５（ａ）〜図５（ｄ）に示す分解画像Ｆ１〜Ｆ４は、図４に示す原画像に対して１／２×１／２画素の画像となる。
【００４１】
つまりＦ１〜Ｆ４は、原画像に対して１／４のサイズの画像となる。一見すべてが同じように見える画像であるが、これらはすべて１画素分だけシフトした画像であり、微妙な差が存在する。
【００４２】
一般に、原画像ｆ（ｉ，ｊ）のサイズが大きければ大きいほど、分解画像Ｆ１〜Ｆ４の差は小さくなる。例えば、原画像が５１２×５１２画素の画像だとした場合、分解画像Ｆ１〜Ｆ４はそれぞれ２５６×２５６画素の画像になる。
【００４３】
次に、図１に示すエッジ位置情報取得部２０１で、エッジ情報取得工程を行う（Ｓ２）。この工程は、４分解した画像の一つ、例えばＦ１（ｍ，ｎ）画像からエッジ部（画像輪郭部）を検出して取得する工程である。
【００４４】
エッジ部を検出する手法としては、ラプラシアンフィルタやゾーベル、プレビッツフィルタ等があるが、ここではラプラシアンフィルタを用いて、エッジ部を検出する。
【００４５】
図６には、図５（ａ）をラプラシアンフィルタにより検出したエッジ部が示されている。なお、図６は、ラプラシアンフィルタリング後の数値を閾値処理し、二値化した画像の例である。
【００４６】
このエッジ部は、図５（ａ）〜（ｄ）のどのエッジ部も非常によく似ており、同じ手法で得られたエッジ部はほぼ同一場所となる。
【００４７】
即ち、このことは分解画像Ｆ２〜Ｆ４のエッジ部や平坦部の位置情報は分解画像Ｆ１から得られるということになる。
【００４８】
ここで、ラプラシアンフィルタとは、画像エッジ検出や先鋭化に用いられるフィルタリング処理方法で、その計算は２次微分を用いた方法で計算される。中心画素に対して近傍画素を以下のように係数をふってそれぞれ乗算して和を出す手法である。図７には４方向に対して行った場合、図８には８方向に対して行った場合の例が示されている。
【００４９】
次に、図１に示す画素値取得部２０２で、エッジ部の画素値取得工程を行う（Ｓ３）。この工程は、前記Ｓ２の処理により取得したエッジ部の位置情報を、前記Ｓ１の処理により分解された画像Ｆ２、Ｆ３、Ｆ４に対応するエッジ部の位置の画素値を取得する。
【００５０】
本発明の画像信号処理方法の第１の特徴は、以上のＳ１〜Ｓ３までの工程を少なくとも備えていることである。
【００５１】
以上のＳ１〜Ｓ３までの工程を備えていれば、従来のＪＰＥＧ基本方式を採用しても、画質障害を起こすことなく、圧縮率を大幅に上げることが可能となる。
【００５２】
次に本発明の画像信号処理方法の第２の特徴について説明する。第２の特徴は上記Ｓ１〜Ｓ３の処理に続いて、以下の処理を行うことである。
【００５３】
即ち、上記Ｓ１〜Ｓ３の処理に続いて、図１に示す画素値推定算出部２０３で、エッジ部の画素値推定工程を行う（Ｓ４）。この工程は、分解工程により分解されたＦ１以外の画像をＦ１から推定してエッジ部の画素値を推定算出する工程である。本発明の例では４分解した場合の処理方法であるため、１つの画像をＦ１（ｍ,ｎ）としたとき、推定画素は、Ｆ´２（ｍ,ｎ）, Ｆ´３（ｍ,ｎ）, Ｆ´４（ｍ,ｎ）とする。
【００５４】
このとき、推定画像は以下のような数式により算出することができる。
【００５５】
（数２）
Ｆ´２（ｍ,ｎ）＝（Ｆ１（ｍ，ｎ）＋Ｆ１（ｍ，ｎ＋１））／２
＝（ｆ（２ｍ，２ｎ）＋ｆ（２ｍ，２ｎ＋２））／２・・・（５）
Ｆ´３（ｍ,ｎ）＝（Ｆ１（ｍ，ｎ）＋Ｆ１（ｍ＋１，ｎ））／２
＝（ｆ（２ｍ，２ｎ）＋ｆ（２ｍ＋２，２ｎ））／２・・・（６）
Ｆ´４（ｍ,ｎ）
＝（Ｆ１（ｍ，ｎ）＋Ｆ１（ｍ，ｎ＋１）＋Ｆ１（ｍ＋１，ｎ）＋Ｆ１（ｍ＋１，ｎ＋１））／４
＝（ｆ（２ｍ，２ｎ）＋ｆ（２ｍ，２ｎ＋２）＋ｆ（２ｍ＋２，２ｎ）＋ｆ（２ｍ＋２，２ｎ＋２））／４・・・（７）
【００５６】
上記算出された式により、全てＦ１の画像により推定することができるということがわかる。ここでは、エッジ部位置の画素値を推定すれば足りる。
【００５７】
なお、本発明では、Ｓ３とＳ４の処理はいずれを先に行ってもよい。
【００５８】
次に、図１に示す差分値算出部２０４で、差分値算出工程を行う（Ｓ５）。この工程は、前記Ｓ３とＳ４の処理によりそれぞれ取得した画素値の差分値を算出する工程である。
【００５９】
この工程では、エッジ部とエッジ部以外の部分（平坦部）を考えたとき、Ｓ３の処理において、推定値のみで画像を表現した場合には、エッジ部も平坦部も推定値から求められてしまい、画像の劣化が激しくなってしまうため、エッジ部に関してだけは、推定値ではなく真値を用いることにしている点が特徴である。即ち、本発明において、このＳ５の処理を行うことにより、本発明の課題である画像劣化をなくすことが可能となる。
【００６０】
エッジ部は、以下の数式により算出することができる。
【００６１】
（数３）
Ｄ２（ｍ，ｎ）＝Ｆ２（ｍ，ｎ）−Ｆ´２（ｍ，ｎ）・・・（８）
Ｄ３（ｍ，ｎ）＝Ｆ３（ｍ，ｎ）−Ｆ´３（ｍ，ｎ）・・・（９）
Ｄ４（ｍ，ｎ）＝Ｆ４（ｍ，ｎ）−Ｆ´４（ｍ，ｎ）・・・（１０）
【００６２】
ここで、ｍ，ｎとしては、エッジ位置情報取得工程により取得した位置情報が用いられる。
【００６３】
算出されたＤ２、Ｄ３、Ｄ４は、図３に示すようなテーブルに、エッジ位置ｍ、ｎと関連付けて保存することもできる。
【００６４】
またこのＤ２〜Ｄ４の値は、バラツキが小さな値であるため、圧縮しやすい形になる。
【００６５】
以上のＳ５までの処理を行うのが、本発明の第２の特徴である。かかるＳ１〜Ｓ５までの処理を行うことにより、画質障害を起こすことなく、圧縮率を大幅に上げる効果が更に向上する。
【００６６】
次に、本発明の画像信号処理方法の第３の特徴について説明する。第３の特徴は上記Ｓ１〜Ｓ５処理に続いて、以下の処理を行うことである。
【００６７】
即ち、上記Ｓ１〜Ｓ５処理に続いて、図１に示す符号化処理部３において、圧縮工程を行う（Ｓ６）。この工程は、Ｓ１の処理で分解された画像のうち、Ｆ１画像と、Ｓ５の処理で算出された差分値を伝送に適した状態にする工程である。
【００６８】
Ｆ１画像は、復元画像の要となる画像であるため、劣化が少ない圧縮が必要である。
【００６９】
例えば、Ｆ１画像をＤＣＴ変換した後、エントロピー符号化で符号化して送るようにする。この場合、ほぼ可逆変換となるため、復号した場合、画像の劣化がなくなる。このため、本発明のＦ１画像を伝送する際に好ましい圧縮手法となる。
【００７０】
また、差分値の圧縮においては、差分値を１次元数列に構成することが好ましい。例えば、エッジ位置情報に対応する差分値Ｄ２を上から下に走査して１次元数列を構成する。この構成された数列を１次元ＤＣＴにより符号化しやすい形に変換する。変換されたものを符号化する。符号化する過程で、ＤＣＴ係数の出現確率を計測し、エントロピーテーブルを基に対応する符号を割り当てる。これにより、圧縮された処理データが出来上がる。
【００７１】
次に、圧縮された処理データを伝送部４（図１参照）で伝送する（Ｓ７）。また、このとき伝送路でなく蓄積装置を用いた場合は、例えばハードディスクに記憶しておくが好ましい。
【００７２】
次に、図１に示す復号化処理部５で、伸長工程を行う（Ｓ８）。この工程は、Ｓ６の処理で圧縮された処理データを圧縮された方法により、伸長する。伸長に際しては、前記処理データを符号化処理部３で圧縮するのと同じルールに基づいて伸長する。ここで同じルールというのは、符号化手法と逆手法（可逆変換）を採用することを意味している。
【００７３】
次に、図１に示す推定画像作成部２０５で、画像推定工程を行う（Ｓ９）。この工程は、Ｓ８の処理で伸長されたデータのうち、Ｆ１画像を基に、式（５）、（６）、（７）の手法により画像を推定する処理を行う。
【００７４】
これにより、分解された画像のうち、Ｆ１以外の画像を推定し、推定画像Ｆ´２, Ｆ´３, Ｆ´４が作成される。
【００７５】
次に、図１に示す加算処理部２０６で、差分値加算工程を行う（Ｓ１０）。この工程は、Ｓ９の処理により作成された推定画像Ｆ´２, Ｆ´３, Ｆ´４に、前記伸長されたデータのうち、差分値のデータを加算する。
【００７６】
つまり、Ｆ´２にはＤ２を加算し、Ｆ´３にはＤ３を加算し、Ｆ´４にはＤ４を加算する。エッジ部については、原画像とほぼ同様な鮮明さを持つように処理する。
【００７７】
次に、図１に示す復元画像生成部２０７で、画像復元を行う（Ｓ１１）。この工程は、Ｆ１画像と、Ｓ１０の処理により加算された３つの画像を合成し、復元画像を構成するものである。
【００７８】
この復元画像の例を図９（ａ）に示す。図９（ａ）には、本発明を用いた復元画像、図９（ｂ）には、同一ビットレートの場合のＪＰＥＧ手法を用いた復元画像、図９（ｃ）には、同一ノイズでの復元画像を示されている。図９（ａ）は、ビットレート１画素当り０．５ビット、ノイズ値（ＳＮ）＝３０ｄＢという結果であった。これに対し、図９（ｂ）は、ビットレート１画素当り０．５ビット、ノイズ値（ＳＮ）＝２６ｄＢという結果であり、図９（ｃ）は、ビットレート１画素当り１．７、ノイズ値（ＳＮ）＝３０ｄＢという結果であった。
【００７９】
つまり、同一ビットレート（圧縮率を同じにすること）の場合の復元画像では、本発明による復元画像とＪＰＥＧによる復元画像では、ＪＰＥＧ手法による復元画像のほうがノイズが目立つ。また、ＪＰＥＧ手法による復元画像のノイズを同一にしようとすると、ビットレートを上げなくてはならない（圧縮率を下げなければならない）。
【産業上の利用可能性】
【００８０】
本発明は、特に少ないメモリが要求される携帯端末等への画像伝送に適している。
【図面の簡単な説明】
【００８１】
【図１】本発明の画像信号処理装置の一例を示す機能ブロック図
【図２】本発明の画像信号処理方法の一例を説明するフローチャート
【図３】エッジ位置とＤ２、Ｄ３、Ｄ４を対応させたテーブル例を示す図
【図４】原画像の例
【図５】（ａ）〜（ｄ）は原画像を４分解して得られた分解画像の例
【図６】ラプラシアンフィルタリング後の数値を閾値処理し、二値化した画像の例
【図７】ラプラシアンフィルタリングを４方向に対して行った場合を示す例
【図８】ラプラシアンフィルタリングを４方向に対して行った場合を示す例
【図９】（ａ）は本発明を用いた復元画像、（ｂ）は同一ビットレートの場合のＪＰＥＧ手法を用いた復元画像、（ｃ）は同一ノイズでの復元画像
【符号の説明】
【００８２】
１：入力部
２：画像処理部
２００：分解処理部
２０１：エッジ位置情報取得部
２０２：画素値取得部
２０３：画素値推定算出部
２０４：差分値算出部
２０５：推定画像作成部
２０６：加算処理部
２０７：復元画像生成部
３：符号化処理部
４：伝送部
５：復号化処理部
６：出力部
【出願人】 【識別番号】５０４１７４１３５
【氏名又は名称】国立大学法人九州工業大学
【出願日】 平成１６年９月１０日（２００４．９．１０）
【代理人】 【識別番号】１００１０１３４０
【弁理士】
【氏名又は名称】丸山 英一
【公開番号】 特開２００６−８０９３３（Ｐ２００６−８０９３３Ａ）
【公開日】 平成１８年３月２３日（２００６．３．２３）
【出願番号】 特願２００４−２６３２４２（Ｐ２００４−２６３２４２）