トップ :: H 電気 :: H04 電気通信技術




【発明の名称】 アスペクト比変更映像送信方法、アスペクト比変更映像受信方法およびアスペクト比変更映像送信装置、アスペクト比変更映像受信装置ならびにアスペクト比変更映像送信プログラム、アスペクト比変更映像受信プログラム
【発明者】 【氏名】成田 長人

【氏名】井口 和久
【要約】 【課題】映像制作者が意図する構図に適合したアスペクト比の映像を制作し、表示することができ、送信する際の伝送路の通信情報量以内に切り出した映像を送信、受信することができるアスペクト比変更映像送信方法、受信方法、送信装置、受信装置、送信プログラム、受信プログラムを提供する。

【解決手段】表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に変更した映像を生成し送信するアスペクト比変更映像送信装置３は、映像信号入手手段（７、９）と、アスペクト比設定情報生成手段（１３）と、アスペクト比変更映像生成手段（１１）と、アスペクト比設定情報多重映像生成手段（１７）と、アスペクト比設定情報多重映像送信手段（１９）とを備えた。
【特許請求の範囲】
【請求項１】 表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に変更した映像を生成し送信するアスペクト比変更映像送信方法であって、前記表示画像を描画する映像信号を入手する映像信号入手ステップと、この映像信号入手ステップにおいて入手した映像信号が表示される際の表示画像のアスペクト比を任意に設定するアスペクト比設定情報を生成するアスペクト比設定情報生成ステップと、このアスペクト比設定情報生成ステップにおいて生成したアスペクト比設定情報に基づいて、前記映像信号が表示される際のアスペクト比を変更したアスペクト比変更映像を生成するアスペクト比変更映像生成ステップと、このアスペクト比変更映像生成ステップにおいて生成したアスペクト比変更映像と前記アスペクト比設定情報とを多重化したアスペクト比設定情報多重映像を生成するアスペクト比設定情報多重映像生成ステップと、このアスペクト比設定情報多重映像生成ステップにおいて生成したアスペクト比設定情報多重映像を送信するアスペクト比設定情報多重映像送信ステップと、を含むことを特徴とするアスペクト比変更映像送信方法。
【請求項２】 表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に変更した映像を生成し送信するアスペクト比変更映像送信装置であって、前記表示画像を描画する映像信号を入手する映像信号入手手段と、この映像信号入手手段で入手した映像信号が表示される際の表示画像のアスペクト比を任意に設定するアスペクト比設定情報を生成するアスペクト比設定情報生成手段と、このアスペクト比設定情報生成手段で生成したアスペクト比設定情報に基づいて、前記映像信号が表示される際のアスペクト比を変更したアスペクト比変更映像を生成するアスペクト比変更映像生成手段と、このアスペクト比変更映像生成手段で生成したアスペクト比変更映像と前記アスペクト比設定情報とを多重化したアスペクト比設定情報多重映像を生成するアスペクト比設定情報多重映像生成手段と、このアスペクト比設定情報多重映像生成手段で生成したアスペクト比設定情報多重映像を送信するアスペクト比設定情報多重映像送信手段と、を備えることを特徴とするアスペクト比変更映像送信装置。
【請求項３】 前記アスペクト比変更映像生成手段は、生成される映像を任意映像フォーマットに適合するように変換する映像フォーマット変換手段を備えることを特徴とする請求項２に記載のアスペクト比変更映像送信装置。
【請求項４】 前記アスペクト比変更映像生成手段は、受信側において設定される受信装置と視聴者との視聴距離に基づいて、アスペクト比を変換した映像を表示させるように設定するアスペクト比変換表示設定手段を備えることを特徴とする請求項２または請求項３に記載のアスペクト比変更映像送信装置。
【請求項５】 前記アスペクト比変換表示設定手段は、アスペクト比の変換に伴う表示画像の総画素数を一定に保つことを特徴とする請求項４に記載のアスペクト比変更映像送信装置。
【請求項６】 表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に変更した映像を生成し送信する装置を、前記表示画像を描画する映像信号を入手する映像信号入手手段、この映像信号入手手段で入手した映像信号が表示される際の表示画像のアスペクト比を任意に設定するアスペクト比設定情報を生成するアスペクト比設定情報生成手段、このアスペクト比設定情報生成手段で生成したアスペクト比設定情報に基づいて、前記映像信号が表示される際のアスペクト比を変更したアスペクト比変更映像を生成するアスペクト比変更映像生成手段、このアスペクト比変更映像生成手段で生成したアスペクト比変更映像と前記アスペクト比設定情報とを多重化したアスペクト比設定情報多重映像を生成するアスペクト比設定情報多重映像生成手段、このアスペクト比設定情報多重映像生成手段で生成したアスペクト比設定情報多重映像を送信するアスペクト比設定情報多重映像送信手段、として機能させることを特徴とするアスペクト比変更映像送信プログラム。
【請求項７】 表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に設定するアスペクト比設定情報と、このアスペクト比設定情報に基づいてアスペクト比が変更されたアスペクト比変更映像とを多重化したアスペクト比設定情報多重映像を受信するアスペクト比変更映像受信方法であって、前記アスペクト比設定情報多重映像を受信するアスペクト比設定情報多重映像受信ステップと、このアスペクト比設定情報多重映像受信ステップにおいて受信したアスペクト比設定情報多重映像から前記アスペクト比設定情報を抽出するアスペクト比設定情報抽出ステップと、このアスペクト比設定情報抽出ステップにおいて抽出したアスペクト比設定情報に基づいて、前記アスペクト比変更映像を再生出力するアスペクト比変更映像再生出力ステップと、を含むことを特徴とするアスペクト比変更映像受信方法。
【請求項８】 表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に設定するアスペクト比設定情報と、このアスペクト比設定情報に基づいてアスペクト比が変更されたアスペクト比変更映像とを多重化したアスペクト比設定情報多重映像を受信するアスペクト比変更映像受信装置であって、前記アスペクト比設定情報多重映像を受信するアスペクト比設定情報多重映像受信手段と、このアスペクト比設定情報多重映像受信手段で受信したアスペクト比設定情報多重映像から前記アスペクト比設定情報を抽出するアスペクト比設定情報抽出手段と、このアスペクト比設定情報抽出手段で抽出したアスペクト比設定情報に基づいて、前記アスペクト比変更映像を再生出力するアスペクト比変更映像再生出力手段と、を備えることを特徴とするアスペクト比変更映像受信装置。
【請求項９】 送信側で生成されたアスペクト比変更映像が任意映像フォーマットである場合、前記アスペクト比変更映像再生出力手段が任意映像フォーマットを再生出力することを特徴とする請求項８に記載のアスペクト比変更映像受信装置。
【請求項１０】 前記アスペクト比変更映像を表示する際に、当該アスペクト比変更映像を表示する表示部と、当該アスペクト比変更映像を視聴する視聴者との視聴距離を設定する視聴距離設定手段と、この視聴距離設定手段によって設定された視聴距離に基づいて、前記アスペクト比変更映像再生出力手段が前記アスペクト比変更映像を再生出力することを特徴とする請求項８または請求項９に記載のアスペクト比変更映像受信装置。
【請求項１１】 前記視聴距離設定手段によって設定された視聴距離に基づいて、前記アスペクト比変更映像再生出力手段が前記アスペクト比変更映像を再生出力する場合に、アスペクト比の変換に伴う表示画像の総画素数を一定に保つことを特徴とする請求項１０に記載のアスペクト比変更映像受信装置。
【請求項１２】 前記アスペクト比設定情報に基づいて、前記アスペクト比変更映像を表示させる表示領域の形状を変形させることを特徴とする請求項８から請求項１１のいずれか１項に記載のアスペクト比変更映像受信装置。
【請求項１３】 前記アスペクト比設定情報に基づいて、前記アスペクト比変更映像を表示させる表示領域の位置を変更させることを特徴とする請求項８から請求項１２のいずれか１項に記載のアスペクト比変更映像受信装置。
【請求項１４】 表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に設定するアスペクト比設定情報と、このアスペクト比設定情報に基づいてアスペクト比が変更されたアスペクト比変更映像とを多重化したアスペクト比設定情報多重映像を受信する装置を、前記アスペクト比設定情報多重映像を受信するアスペクト比設定情報多重映像受信手段、このアスペクト比設定情報多重映像受信手段で受信したアスペクト比設定情報多重映像から前記アスペクト比設定情報を抽出するアスペクト比設定情報抽出手段、このアスペクト比設定情報抽出手段で抽出したアスペクト比設定情報に基づいて、前記アスペクト比変更映像を再生出力するアスペクト比変更映像再生出力手段、として機能させることを特徴とするアスペクト比変更映像受信プログラム。
【発明の詳細な説明】【０００１】
【発明の属する技術分野】本発明は、アスペクト比の異なる複数の映像を生成し送信する、或いは、アスペクト比の異なる複数の映像を受信して表示するアスペクト比変更映像送信方法、アスペクト比変更映像受信方法およびアスペクト比変更映像送信装置、アスペクト比変更映像受信装置ならびにアスペクト比変更映像送信プログラム、アスペクト比変更映像受信プログラムに関する。
【０００２】
【従来の技術】従来、テレビや映画等に利用される映像を作成し表示する場合、当該映像をブラウン管やスクリーンに表示させる表示画像の横寸法と縦寸法との比率である画面アスペクト比（以下、アスペクト比という）は固定されている。通常のテレビ放送であるＮＴＳＣでは、４：３であり、ハイビジョンでは、１６：９であり、ビスタビジョンでは、１：１．８５であり、ワイドスクリーン映画の一つであるシネマスコープ（シネスコ）では１：２．３５である。
【０００３】
【発明が解決しようとする課題】しかしながら、従来のテレビや映画等に利用される映像では、アスペクト比が固定であるため、映像を制作する側（放送局、映像制作プロダクション等：以下、映像制作者）では、ある被写体（例えば、ドラマの主人公）のみをクローズアップしたい場合に当該被写体を撮影しているカメラを操作（ズーミング等）して、当該被写体をアスペクト比が固定されている表示画像（表示画面）内に収まるようにして、映像が制作されている。つまり、従来の映像制作の方式では、映像を制作する際の規定の映像フォーマットが設定されており、この規定の映像フォーマットに合致するアスペクト比の映像を制作しなければならないという問題がある。
【０００４】また、このような映像制作の方式では、映像制作者が固定されたアスペクト比の制約の中で映像の構図を練らなくてはならず、映像制作者の意図する被写体以外の冗長な部分（不必要な映像）が制作する映像に入り込んでしまうという問題がある。
【０００５】さらに、映像制作者が制作した映像を送信する際の伝送路に、伝送可能な通信情報量に制限がある場合、この通信情報量の制限以内になるように、制作した映像の中で必要部分のみを切り出して送信したいとの要請がある。
【０００６】そこで、本発明の目的は前記した従来の技術が有する課題を解消し、映像制作者が意図する構図に適合したアスペクト比の映像を制作（生成）し、表示することができ、送信する際の伝送路の通信情報量以内に切り出した映像を送信、受信することができるアスペクト比変更映像送信方法、アスペクト比変更映像受信方法およびアスペクト比変更映像送信装置、アスペクト比変更映像受信装置ならびにアスペクト比変更映像送信プログラム、アスペクト比変更映像受信プログラムを提供することにある。
【０００７】
【課題を解決するための手段】前記した目的を達成するため、以下に示す構成とした。請求項１記載のアスペクト比変更映像送信方法は、表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に変更した映像を生成し送信するアスペクト比変更映像送信方法であって、前記表示画像を描画する映像信号を入手する映像信号入手ステップと、この映像信号入手ステップにおいて入手した映像信号が表示される際の表示画像のアスペクト比を任意に設定するアスペクト比設定情報を生成するアスペクト比設定情報生成ステップと、このアスペクト比設定情報生成ステップにおいて生成したアスペクト比設定情報に基づいて、前記映像信号が表示される際のアスペクト比を変更したアスペクト比変更映像を生成するアスペクト比変更映像生成ステップと、このアスペクト比変更映像生成ステップにおいて生成したアスペクト比変更映像と前記アスペクト比設定情報とを多重化したアスペクト比設定情報多重映像を生成するアスペクト比設定情報多重映像生成ステップと、このアスペクト比設定情報多重映像生成ステップにおいて生成したアスペクト比設定情報多重映像を送信するアスペクト比設定情報多重映像送信ステップと、を含むことを特徴とする。
【０００８】この方法によれば、まず、映像信号入手ステップにおいて入手された映像信号を表示する際の表示画像のアスペクト比を設定するアスペクト比設定情報が、アスペクト比設定情報生成ステップにおいて生成される。次に、生成されたアスペクト比設定情報に基づいてアスペクト比が変更されたアスペクト比変更映像がアスペクト比変更映像生成ステップにおいて生成され、このアスペクト比変更映像とアスペクト比設定情報とを多重化したアスペクト比設定情報多重映像がアスペクト比設定情報多重映像生成ステップにおいて生成される。そして、生成されたアスペクト比設定情報多重映像がアスペクト比設定情報多重映像送信ステップにおいて送信される。
【０００９】なお、映像信号入手ステップでは、映像信号が入手されればよく、映像信号が作成された場合でもよいし、作成された映像信号を受信する場合であってもよい。また、アスペクト比設定情報には、表示画像の横寸法と縦寸法との比率であるアスペクト比の情報と、アスペクト比設定情報多重映像を受信した側で、当該アスペクト比変更映像を表示する際の表示画素数に関する情報も含まれている。
【００１０】また、請求項２記載のアスペクト比変更映像送信装置は、表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に変更した映像を生成し送信するアスペクト比変更映像送信装置であって、前記表示画像を描画する映像信号を入手する映像信号入手手段と、この映像信号入手手段で入手した映像信号が表示される際の表示画像のアスペクト比を任意に設定するアスペクト比設定情報を生成するアスペクト比設定情報生成手段と、このアスペクト比設定情報生成手段で生成したアスペクト比設定情報に基づいて、前記映像信号が表示される際のアスペクト比を変更したアスペクト比変更映像を生成するアスペクト比変更映像生成手段と、このアスペクト比変更映像生成手段で生成したアスペクト比変更映像と前記アスペクト比設定情報とを多重化したアスペクト比設定情報多重映像を生成するアスペクト比設定情報多重映像生成手段と、このアスペクト比設定情報多重映像生成手段で生成したアスペクト比設定情報多重映像を送信するアスペクト比設定情報多重映像送信手段と、を備えることを特徴とする。
【００１１】かかる構成によれば、まず、映像信号入手手段で入手された映像信号を表示する際の表示画像のアスペクト比を設定するアスペクト比設定情報が、アスペクト比設定情報生成手段で生成される。次に、生成されたアスペクト比設定情報に基づいてアスペクト比が変更されたアスペクト比変更映像がアスペクト比変更映像生成手段で生成され、このアスペクト比変更映像とアスペクト比設定情報とを多重化したアスペクト比設定情報多重映像がアスペクト比設定情報多重映像生成手段で生成される。そして、生成されたアスペクト比設定情報多重映像がアスペクト比設定情報多重映像送信手段で送信される。
【００１２】また、請求項３記載のアスペクト比変更映像送信装置は、請求項２に記載のアスペクト比変更映像送信装置において、前記アスペクト比変更映像生成手段は、生成される映像を任意映像フォーマットに適合するように変換する映像フォーマット変換手段を備えることを特徴とする。
【００１３】かかる構成によれば、アスペクト比変更映像生成手段に備えられる映像フォーマット変換手段によって、生成される映像が任意映像フォーマットに適合するように変換される。なお、任意映像フォーマットとは、例えば、ＭＰＥＧ−４映像フォーマットである。また、映像フォーマット変換手段は水平画素数と垂直画素数とが輝度信号では８または１６の倍数に、色差信号では８の倍数になるように変換することができるように構成してもよい。この場合、生成される映像の水平画素数と垂直画素数の積が一定であれば、ＭＰＥＧ−４による符号化により、伝送路へ送信することが可能である。つまり、生成される映像は、ＭＰＥＧ−４による符号化映像のフォーマットに適合している。
【００１４】また、請求項４記載のアスペクト比変更映像送信装置は、請求項２または請求項３に記載のアスペクト比変更映像送信装置において、前記アスペクト比変更映像生成手段は、受信側において設定される受信装置と視聴者との視聴距離に基づいて、アスペクト比を変換した映像を表示させるように設定するアスペクト比変換表示設定手段を備えることを特徴とする。
【００１５】かかる構成によれば、アスペクト比変換表示設定手段によって、アスペクト比変更映像が、受信側において設定される受信装置の表示部と、視聴者との視聴距離に基づいて、変換される。この視聴距離とは、受信側の視聴者（観視者）との受信装置の表示部との距離（観視距離）であり、視聴距離が異なれば、アスペクト比変更映像の表示面積（総画素数）を受信側で変化させた方がよい。（詳しくは、成田長人 他、「高精度・大画面映像システムにおける画素数の検討」、２００１信学総大、Ｄ−１１−６１、または、特願２０００−３８８０７５「映像情報量算出装置」参照）。
【００１６】また、請求項５記載のアスペクト比変更映像送信装置は、請求項４に記載のアスペクト比変更映像送信装置において、前記アスペクト比変換表示設定手段は、アスペクト比の変換に伴う表示画像の総画素数を一定に保つことを特徴とする。かかる構成によれば、アスペクト比変換表示設定手段によって変換されたアスペクト比変更映像の表示画像の総画素数が一定に保たれる。
【００１７】さらに、請求項６記載のアスペクト比変更映像送信プログラムは、表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に変更した映像を生成し送信する装置を、以下に示す手段として機能させることを特徴とする。すなわち、当該装置を機能させる手段は、前記表示画像を描画する映像信号を入手する映像信号入手手段、この映像信号入手手段で入手した映像信号が表示される際の表示画像のアスペクト比を任意に設定するアスペクト比設定情報を生成するアスペクト比設定情報生成手段、このアスペクト比設定情報生成手段で生成したアスペクト比設定情報に基づいて、前記映像信号が表示される際のアスペクト比を変更したアスペクト比変更映像を生成するアスペクト比変更映像生成手段、このアスペクト比変更映像生成手段で生成したアスペクト比変更映像と前記アスペクト比設定情報とを多重化したアスペクト比設定情報多重映像を生成するアスペクト比設定情報多重映像生成手段、このアスペクト比設定情報多重映像生成手段で生成したアスペクト比設定情報多重映像を送信するアスペクト比設定情報多重映像送信手段、である。
【００１８】かかる構成によれば、まず、映像信号入手手段で入手された映像信号を表示する際の表示画像のアスペクト比を設定するアスペクト比設定情報が、アスペクト比設定情報生成手段で生成される。次に、生成されたアスペクト比設定情報に基づいてアスペクト比が変更されたアスペクト比変更映像がアスペクト比変更映像生成手段で生成され、このアスペクト比変更映像とアスペクト比設定情報とを多重化したアスペクト比設定情報多重映像がアスペクト比設定情報多重映像生成手段で生成される。そして、生成されたアスペクト比設定情報多重映像がアスペクト比設定情報多重映像送信手段で送信される。
【００１９】或いは、請求項７記載のアスペクト比変更映像受信方法は、表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に設定するアスペクト比設定情報と、このアスペクト比設定情報に基づいてアスペクト比が変更されたアスペクト比変更映像とを多重化したアスペクト比設定情報多重映像を受信するアスペクト比変更映像受信方法であって、前記アスペクト比設定情報多重映像を受信するアスペクト比設定情報多重映像受信ステップと、このアスペクト比設定情報多重映像受信ステップにおいて受信したアスペクト比設定情報多重映像から前記アスペクト比設定情報を抽出するアスペクト比設定情報抽出ステップと、このアスペクト比設定情報抽出ステップにおいて抽出したアスペクト比設定情報に基づいて、前記アスペクト比変更映像を再生出力するアスペクト比変更映像再生出力ステップと、を含むことを特徴とする。
【００２０】この方法によれば、まず、アスペクト比設定情報多重映像受信ステップにおいて、アスペクト比設定情報多重映像が受信される。このアスペクト比設定情報多重映像からアスペクト比設定情報がアスペクト比設定情報抽出ステップにおいて抽出される。そして、アスペクト比変更映像再生出力ステップにおいて、抽出されたアスペクト比設定情報に基づいて、アスペクト比変更映像が再生出力される。
【００２１】或いはまた、請求項８記載のアスペクト比変更映像受信装置は、表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に設定するアスペクト比設定情報と、このアスペクト比設定情報に基づいてアスペクト比が変更されたアスペクト比変更映像とを多重化したアスペクト比設定情報多重映像を受信するアスペクト比変更映像受信装置であって、前記アスペクト比設定情報多重映像を受信するアスペクト比設定情報多重映像受信手段と、このアスペクト比設定情報多重映像受信手段で受信したアスペクト比設定情報多重映像から前記アスペクト比設定情報を抽出するアスペクト比設定情報抽出手段と、このアスペクト比設定情報抽出手段で抽出したアスペクト比設定情報に基づいて、前記アスペクト比変更映像を再生出力するアスペクト比変更映像再生出力手段と、を備えることを特徴とする。
【００２２】かかる構成によれば、まず、アスペクト比設定情報多重映像受信手段で、アスペクト比設定情報多重映像が受信される。このアスペクト比設定情報多重映像からアスペクト比設定情報がアスペクト比設定情報抽出手段で抽出される。そして、アスペクト比変更映像再生出力手段で、抽出されたアスペクト比設定情報に基づいて、アスペクト比変更映像が再生出力される。
【００２３】また、請求項９記載のアスペクト比変更映像受信装置は、請求項８に記載のアスペクト比変更映像受信装置において、送信側で生成されたアスペクト比変更映像が任意映像フォーマットである場合、前記アスペクト比変更映像再生出力手段が任意映像フォーマットを再生出力することを特徴とする。かかる構成によれば、アスペクト比変更映像再生出力手段によって、任意映像フォーマットであるアスペクト比変更映像が再生出力される。
【００２４】また、請求項１０記載のアスペクト比変更映像受信装置は、請求項８または請求項９に記載のアスペクト比変更映像受信装置において、前記アスペクト比変更映像を表示する際に、当該アスペクト比変更映像を表示する表示部と、当該アスペクト比変更映像を視聴する視聴者との視聴距離を設定する視聴距離設定手段と、この視聴距離設定手段によって設定された視聴距離に基づいて、前記アスペクト比変更映像再生出力手段が前記アスペクト比変更映像を再生出力することを特徴とする。かかる構成によれば、視聴距離設定手段によって設定された視聴距離に基づいて、アスペクト比変更映像再生出力手段によりアスペクト比変更映像が再生出力される。
【００２５】また、請求項１１記載のアスペクト比変更映像受信装置は、請求項１０に記載のアスペクト比変更映像受信装置において、前記視聴距離設定手段によって設定された視聴距離に基づいて、前記アスペクト比変更映像再生出力手段が前記アスペクト比変更映像を再生出力する場合に、アスペクト比の変換に伴う表示画像の総画素数を一定に保つことを特徴とする。かかる構成によれば、アスペクト比変更映像再生出力手段によって再生出力されるアスペクト比変更映像の表示画像の総画素数が一定に保たれる。
【００２６】また、請求項１２記載のアスペクト比変更映像受信装置は、請求項８から請求項１１のいずれか１項に記載のアスペクト比変更映像受信装置において、前記アスペクト比設定情報に基づいて、前記アスペクト比変更映像を表示させる表示領域の形状を変形させることを特徴とする。かかる構成によれば、アスペクト比変更映像再生出力手段によって、アスペクト比変更映像の表示される表示領域の形状が変形される。
【００２７】また、請求項１３記載のアスペクト比変更映像受信装置は、請求項８から請求項１２のいずれか１項に記載のアスペクト比変更映像受信装置において、前記アスペクト比設定情報に基づいて、前記アスペクト比変更映像を表示させる表示領域の位置を変更させることを特徴とする。かかる構成によれば、アスペクト比変更映像再生出力手段によって、アスペクト比変更映像の表示される表示領域の位置が変更される。
【００２８】さらにまた、請求項１４記載のアスペクト比変更映像受信プログラムは、表示画像の横寸法と縦寸法との比率であるアスペクト比を任意に設定するアスペクト比設定情報と、このアスペクト比設定情報に基づいてアスペクト比が変更されたアスペクト比変更映像とを多重化したアスペクト比設定情報多重映像を受信する装置を、以下に示す手段として機能させることを特徴とする。すなわち、当該装置を機能させる手段は、前記アスペクト比設定情報多重映像を受信するアスペクト比設定情報多重映像受信手段、このアスペクト比設定情報多重映像受信手段で受信したアスペクト比設定情報多重映像から前記アスペクト比設定情報を抽出するアスペクト比設定情報抽出手段、このアスペクト比設定情報抽出手段で抽出したアスペクト比設定情報に基づいて、前記アスペクト比変更映像を再生出力するアスペクト比変更映像再生出力手段、である。
【００２９】かかる構成によれば、まず、アスペクト比設定情報多重映像受信手段で、アスペクト比設定情報多重映像が受信される。このアスペクト比設定情報多重映像からアスペクト比設定情報がアスペクト比設定情報抽出手段で抽出される。そして、アスペクト比変更映像再生出力手段で、抽出されたアスペクト比設定情報に基づいて、アスペクト比変更映像が再生出力される。
【００３０】
【発明の実施の形態】以下、本発明の一実施形態を図面に基づいて詳細に説明する。（アスペクト比変更映像送受信システムの構成）図１にアスペクト比変更映像送受信システムのブロック図を示す。この図１に示すように、アスペクト比変更映像送受信システム１は、アスペクト比変更映像送信装置３とアスペクト比変更映像受信装置５とを備えている。
【００３１】アスペクト比変更映像送受信システム１は、アスペクト比を任意に変更したアスペクト比変更映像をアスペクト比を設定したアスペクト比設定情報と共に、アスペクト比変更映像送信装置３から送信し、受信側のアスペクト比変更映像受信装置５において、自在に再生させるシステムである。
【００３２】まず、アスペクト比変更映像送信装置３の構成から説明する。アスペクト比変更映像送信装置３は、映像信号作成部７と、映像信号受信部９と、切り出し部１１と、切り出し情報設定部１３と、切り出し情報抽出部１５と、映像フォーマット変換部１７と、伝送部１９と、記憶部２１とを備えている。映像信号作成部７は、映像信号を作成するものであって、例えば、ＣＧ映像等を作成するものである。
【００３３】映像信号受信部９は、映像信号を受信するものであって、例えば、撮影カメラで撮影された映像やＶＴＲ映像を受信するものである。また、撮影カメラで被写体や風景等を撮影する際に、広角レンズを使用して、広視野、多画素の映像が得られている場合には、最終的に生成される（制作される）アスペクト比変更映像の解像度を高くすることが可能になる。
【００３４】なお、これら映像信号作成部７または映像信号受信部９で得られる映像（映像信号）は、通常、アスペクト比が一定の映像であり、例えば、通常のテレビ放送であるＮＴＳＣのように、アスペクト比が４：３の映像である。ただし、これら映像信号作成部７または映像信号受信部９で得られた映像（映像信号）がすでにアスペクト比が変更された映像であった場合には、映像信号作成部７または映像信号受信部９で得られた映像は、切り出し部１１に入力されず、切り出し情報抽出部１５に入力され、この切り出し情報抽出部１５で切り出し情報が抽出される。また、映像信号作成部７および映像信号受信部９が請求項に記載した映像入手手段に相当するものである。
【００３５】切り出し部１１は、切り出し情報設定部１３によって設定された切り出し情報に基づいて、映像信号作成部７および映像信号受信部９で得られた映像の一部分を切り出すものである。なお、「切り出す」とは、切り出し情報に含まれている切り出し位置情報に指定された部分の映像を、アスペクト比の横寸法と縦寸法とを備えるように取り出すことである。この切り出し部１１で切り出された映像をアスペクト比変更映像と呼称する。
【００３６】例えば、伝送部１９から送出される伝送路がＭＰＥＧ−４を対象としたものであれば、この切り出し部１１で切り出される映像は、総画素数の標準をＳＩＦサイズ（Ｓｏｕｒｃｅ Ｉｎｐｕｔ Ｆｏｒｍａｔ、ソース入力フォーマット ３５２×２４０画素）或いはＱＳＩＦサイズ（Ｑｕａｒｔｅｒ Ｓｏｕｒｃｅ Ｉｎｐｕｔ Ｆｏｒｍａｔ １７６×１２０画素）とする。それゆえ、切り出し部１１で切り出された映像は、アスペクト比を保持したまま、総画素数をＳＩＦサイズまたはＱＳＩＦサイズになるように画素数を変換し（画素数変換）連続した同一のアスペクト比変更映像のシーケンスとし、このシーケンスを１つのビジュアルオブジェクト（Ｖｉｓｕａｌ Ｏｂｊｅｃｔ）として取り扱う。さらに、ＭＰＥＧ−４による符号化を想定していれば、必要に応じてダミーデータ（例えば、Ｙ：１６、ｕ，ｖ：１２８）を切り出し部１１で切り出した映像に挿入するなどして水平・垂直の画素数を輝度信号では８または１６の倍数、色差信号では８の倍数となるようにする。画素数変換は従来用いられている方法、例えば、標本化周波数変換手法を適用することができる。
【００３７】また、この切り出し部１１は、切り出されたアスペクト比変更映像が受信側のアスペクト比変更映像受信装置５において表示される際に、当該装置５と装置５のユーザ（視聴者）との視聴距離にアスペクト比を変換した映像を表示させるように設定するアスペクト比変換表示設定手段（図示せず）を備えている。さらに、このアスペクト比変換表示設定手段は、受信側のアスペクト比変更映像受信装置５の表示画面にアスペクト比変更映像を表示させる際に、アスペクト比の変換に伴う表示画像の総画素数を一定に保つ機能を有している。またさらに、必要に応じてフレームレートの削減を行うフレームレート削減手段（図示せず）も備えている。例えば、ＳＩＦではフレームレートは３０Ｈｚである。
【００３８】切り出し情報設定部１３は、アスペクト比変更映像送信装置３のユーザによって、切り出し情報を設定するものであって、この切り出し情報は、得られた映像の中から当該ユーザの意図する構図を切り出すための情報であり、得られた映像の中の切り出す部分を指定する切り出し位置情報と、アスペクト比を設定したアスペクト比設定情報と、切り出す画像の画素数に関する画素数情報と、送信する伝送路に応じたフォーマットを設定する映像フォーマット情報とを含むものである。なお、この切り出し情報が請求項に記載したアスペクト比設定情報に相当するものである。
【００３９】切り出し情報抽出部１５は、映像信号作成部７および映像信号受信部９で得られた映像（映像信号）の中に、切り出し情報が含まれている場合に、この切り出し情報を抽出するものである。この切り出し情報抽出部１５は、例えば、撮影カメラで撮影された映像信号（映像信号受信部９で受信）を実時間で処理し、伝送部１９から伝送させる場合、すなわち、生放送の場合に利用される。
【００４０】映像フォーマット変換部１７は、切り出し部１１で切り出された映像（アスペクト比変更映像）、または切り出し情報抽出部１５で切り出し情報が抽出された映像（すでに切り出されている）を、切り出し情報に含まれている映像変換フォーマット情報に基づいて、送信する伝送路の映像フォーマットに変換するものである。この映像フォーマット変換部１７で変換された映像をフォーマット変換映像と呼称することとする。なお、伝送路の映像フォーマットとは、任意映像フォーマットであり、任意映像フォーマットとは、例えば、ＭＰＥＧ−４映像フォーマットである。
【００４１】また、この実施の形態では、映像フォーマット変換部１７は水平画素数と垂直画素数とが輝度信号の１６の倍数に、色差信号が８の倍数になるように変換することができるように構成されている。この場合、生成される映像の水平画素数と垂直画素数とが、輝度信号においては８または１６の倍数、色差信号においては８の倍数に変換されているので、ＭＰＥＧ−４による符号化映像のフォーマットに適合している。
【００４２】伝送部１９は、映像フォーマット変換部１７で変換されたフォーマット変換映像と切り出し情報とを多重化したアスペクト比設定情報多重映像を変調し伝送路に送出するものである。記憶部２１は、ハードディスク等によって構成され、切り出し情報と、この切り出し情報と映像信号との関連（切り出し情報映像信号関連データ）とを記憶するものである。
【００４３】次に、アスペクト比変更映像受信装置５の構成を説明する。アスペクト比変更映像受信装置５は、信号情報復調部２３と、画素数変換部２５と、映像再生制御部２７と、映像再生部２９と、記憶部３１とを備えている。信号情報復調部２３は、アスペクト比変更映像送信装置３から変調された後、送信されたアスペクト比設定情報多重映像を受信し、復調し、この復調したアスペクト比設定情報多重映像をフォーマット変換映像と切り出し情報とに分離するものである。
【００４４】画素数変換部２５は、切り出し情報に含まれている画素数情報に基づいて、フォーマット変換映像を送信側で切り出されている画素数の映像（映像信号）に変換し、映像再生部２９に出力するものである。映像再生制御部２７は、切り出し情報に含まれているアスペクト比設定情報と切り出し位置情報とに基づいて、画素数変換部２５で得られた映像から映像再生部２９にてアスペクト比変更映像を生成させる制御信号を生成し、映像再生部２９に出力するものである。
【００４５】映像再生部２９は、映像再生制御部２７から送信された制御信号に基づいて、アスペクト比変更映像を生成し出力映像信号としてモニター等に出力し、アスペクト比変更映像を当該モニターにて再生させるものである。なお、このように映像のアスペクト比を変更しながら映像を表示する方式としては、再生には、例えば、ＭＩＫＳＳ（井口和久 他、「オブジェクトベース映像制作に用いるシーン記述言語の検討」、２００１信学総大、Ｄ−１１−１５３）に示されている映像再生プレイヤを利用することができる。記憶部３１は、大容量のハードディスク等によって構成され、信号情報復調部２３で受信されたアスペクト比設定情報多重映像を記憶しておくものである。
【００４６】（アスペクト比変更映像送信装置の動作）次に、図１と、図２に示すフローチャートとを参照して、アスペクト比変更映像送信装置３の動作を説明する。まず、アスペクト比変更映像送信装置３は、映像信号作成部７または映像信号受信部９で伝送する映像信号がすでに得られているかどうかを判断する（Ｓ１）。例えば、撮影カメラで撮影した映像信号や、ＶＴＲ映像信号、ＣＧ映像信号が得られているかである。これらの映像信号において、撮影カメラで撮影された映像信号の場合、撮影カメラのビューファインダーをスライドＳＷによって任意のアスペクト比に設定できるようにし、被写体等を撮影した際のアスペクト比等を切り出し情報抽出部１５で抽出できるようにしておく。
【００４７】Ｓ１にて伝送する映像がすでに得られていると判断された場合（Ｙｅｓ）には、得られている映像に切り出し情報が含まれているかどうかが判断される（Ｓ２）。切り出し情報が含まれていると判断された場合（Ｙｅｓ）には、後記するＳ８の処理に進む。Ｓ２にて切り出し情報が得られていると判断されない場合（Ｎｏ）には、切り出し情報設定部１３で、当該装置３のユーザによって、画素数情報、アスペクト比設定情報、映像フォーマット情報等を含む切り出し情報が設定される（Ｓ３）。
【００４８】Ｓ１にて伝送する映像がすでに得られていると判断されない場合（Ｎｏ）には、映像信号受信部９に入力される映像信号を実時間で処理し、伝送部１９から送信するかどうか、つまり、生放送であるかどうかが判断される（Ｓ４）。生放送であると判断された場合（Ｙｅｓ）には、図示を省略した撮影カメラによって撮影されたアスペクト比の異なる映像が映像信号受信部９に入力され、切り出し情報設定部１３で、当該装置３のユーザによって、画素数情報、アスペクト比設定情報、映像フォーマット情報等を含む切り出し情報が設定される（Ｓ５）。
【００４９】また、Ｓ４にて生放送であると判断されない場合（Ｎｏ）には、図示を省略した撮影カメラによって広視野、長画面の映像が撮影され（Ｓ６）、この映像が映像信号受信部９に入力され、切り出し情報設定部１３で、当該装置３のユーザによって、画素数情報、アスペクト比設定情報、映像フォーマット情報等を含む切り出し情報が設定される（Ｓ７）。
【００５０】そして、Ｓ３、Ｓ５、Ｓ７にて、切り出し情報の設定された映像が、映像フォーマット変換部１７に入力され、画素数情報および映像フォーマット情報に基づいて、切り出し情報に設定された映像の画素数変換比が算出され（Ｓ８）、続いて、映像フォーマットが変換される（Ｓ９）。この映像フォーマット変換部１７で映像フォーマットが変換されたフォーマット変換映像が伝送部１９に出力される。すると、伝送部１９では、フォーマット変換映像と切り出し情報とが多重化され、アスペクト比設定情報多重映像とされた後、符号化され、変調されて送信される（Ｓ１０）。
【００５１】このアスペクト比変更映像送信装置３の動作において説明したように、アスペクト比変更映像送信装置３では、映像信号作成部７または映像信号受信部９により得られた映像信号にアスペクト比設定情報を含んだ切り出し情報を多重化し、アスペクト比設定情報多重映像として送信しているので、このアスペクト比設定情報多重映像を受信した受信側の装置（この実施の形態ではアスペクト比変更映像受信装置５）では、切り出し情報に基づいて、映像信号のアスペクト比が自在に変更された映像を再生出力することができる。
【００５２】（アスペクト比変更映像受信装置の動作）次に、図１と、図３に示すフローチャートに基づいて、アスペクト比変更映像受信装置５の動作を説明する。まず、アスペクト比変更映像受信装置５は、信号情報復調部２３でアスペクト比設定情報多重映像を受信し、復調する（Ｓ１１）。そして、この信号情報復調部２３で復調したアスペクト比設定情報多重映像を復号しフォーマット変換映像と切り出し情報とに分離し（Ｓ１２）、画素数変換部２５にフォーマット変換映像と切り出し情報に含まれている画素数情報と映像フォーマット情報とを出力すると共に、映像再生制御部２７に切り出し情報に含まれている。アスペクト比設定情報と切り出し位置情報とを出力する。
【００５３】すると、画素数変換部２５では、画素数情報と映像フォーマット情報とに基づいて、フォーマット変換映像の映像フォーマットが当該装置５に接続されている出力モニター（図示せず）に適合するように且つ送信側で切り出されている画素数の映像（映像信号）に変換され、この映像信号が映像再生部２９に出力される（Ｓ１３）。
【００５４】一方、映像再生制御部２７では、アスペクト比設定情報と切り出し位置情報とに基づいて、画素数変換部２５から出力された映像信号から映像再生部２９にてアスペクト比変更映像を生成させる制御信号が生成され、映像再生部２９に出力される（Ｓ１４）。そして、映像再生部２９では、映像再生制御部２７から出力された制御信号に基づいて、アスペクト比変更映像を生成し出力映像信号としてモニター等に出力され（Ｓ１５）、アスペクト比変更映像が当該モニターにて表示（再生）される（Ｓ１６）。
【００５５】このアスペクト比変更映像受信装置５の動作において説明したように、アスペクト比変更映像受信装置５では、送信側の装置（この実施の形態では、アスペクト比変更映像送信装置３）から送信されたアスペクト比設定情報多重映像が、信号情報復調部２３で受信され、このアスペクト比設定情報多重映像に多重化されているフォーマット変換映像が画素数変換部２５で映像信号に変換され、当該アスペクト比設定情報多重映像に多重化されている切り出し情報に基づいて、映像再生部２９で、映像信号のアスペクト比が自在に変更された映像を再生出力することができる。
【００５６】（アスペクト比変更映像の例１［表示領域、表示位置について］）次に、図４を参照して、アスペクト比変更映像の表示領域、表示位置について説明する。図４は、アスペクト比変更映像受信装置５に接続されるモニター（図示せず）の表示画面を図示したものであり、図４（ａ）、（ｂ）、（ｃ）中、ハッチング部分Ａ１、Ａ２、Ａ３がアスペクト比変更映像であり、その他の部分Ｂ１、Ｂ２、Ｂ３が黒色の画面（映像信号のない部分）である。
【００５７】図４（ａ）では、図中、左上部すなわち当該モニターの左上部の表示位置に、アスペクト比変更映像Ａ１の表示領域が横長の小画面として確保されており、図４（ｂ）では、図中、右側部寄りすなわち当該モニターの右側部寄りの表示位置に、アスペクト比変更映像Ａ２の表示領域が縦長の中画面として確保されており、図４（ｃ）では、図中、右側上部すなわち当該モニターの右側上部の表示位置に、アスペクト比変更映像Ａ３の表示領域が横長の小画面として確保されている。
【００５８】これらのアスペクト比変更映像は、アスペクト比変更映像受信装置５の信号情報復調部で受信されたアスペクト比設定情報多重映像に、多重化されている切り出し情報のアスペクト比設定情報と切り出し位置情報とに基づいて、アスペクト比変更映像が表示されたものである。
【００５９】（アスペクト比変更映像の例２［切り出しについて、野球と陸上競技］）次に、図５を参照して、アスペクト比変更映像の切り出しについて、説明する。図５は、アスペクト比がａ：ｂの映像の一部を切り出す「切り出し」について図示した説明図であり、図５（ａ）は、“野球”について、図５（ｂ）は、“陸上競技”について説明したものである。図５（ａ）では、野球場の中継席側（バックグラウンド側）から攻撃側のバッターと、守備側のピッチャーおよびキャッチャーとが撮影された映像の中から、攻撃側のバッターの膝下を下限にした当該バッターのほぼ全身が収まり且つ、ピッチングポジションに離れて位置する守備側のピッチャーの全身が収まるように切り出し部分（アスペクト比はａ１：ｂ１）が点線で設定されている。
【００６０】つまり、この切り出し部分は、アスペクト比変更映像として、アスペクト比変更送信装置３のユーザ（映像制作者）の意図する演出により必要なところだけ、すなわち、“バッター対ピッチャーの息詰まる対決”の映像が適度な大きさで切り出されていることになる。
【００６１】また、図５（ｂ）は、陸上競技における短距離走のスタート地点付近が撮影された映像の中から、当該スタート地点に位置し出走の構えをする選手と、その選手にスタートの合図をするスターターとだけが含まれるように切り出し部分（アスペクト比はａ２：ｂ２）が点線で設定されている。
【００６２】つまり、この切り出し部分は、アスペクト比変更映像として、アスペクト比変更送信装置３のユーザ（映像制作者）の意図する演出により必要なところだけ、すなわち、“スタート直前の短距離走の選手達”の映像が適度な大きさで切り出されていることになる。
【００６３】（アスペクト比変更映像の例３［“野球”］）次に、図６、図７、図８を参照して、複数のアスペクト比変更映像の再生出力例を説明する（適宜、図１を参照）。この説明では、具体的な“野球”映像をサンプルとしている。図６（ａ）は、野球場に配置されている４台の撮影カメラ（Ｃａ１〜Ｃａ４）のおおよその位置を模式的に描いたものである。この図６（ａ）に示した４台の撮影カメラ（Ｃａ１〜Ｃａ４）の位置（役割）は、撮影カメラＣａ１が、ピッチャーの背後からキャッチャーとバッターとが収められる映像を撮影できる位置に設置されており、撮影カメラＣａ２が、バッターの全身（打撃姿勢）が収められる映像を撮影できる位置に設置されている。また、撮影カメラＣａ３が、一塁手の全身および一塁ベースに向かう走者が収められる映像を撮影できる位置に設置されており、撮影カメラＣａ４が、バックグラウンド側から守備につく選手全てが収められる映像を撮影できる位置に設置されている。
【００６４】つまり、この例では、撮影カメラ（Ｃａ１〜Ｃａ４）で撮影された映像がアスペクト比変更映像送信装置３によって、アスペクト比が変更され、このアスペクト比が変更された映像（アスペクト比設定情報多重映像）がアスペクト比変更映像受信装置５に受信される。
【００６５】そして、これらの撮影カメラ（Ｃａ１〜Ｃａ４）によって撮影したアスペクト比を変更させたアスペクト比変更映像を、図６（ｂ）、図７（ａ）、図７（ｂ）、図（８）に図示した。図６（ｂ）は、撮影カメラＣａ１で撮影された映像を図示したものであり、撮影カメラＣａ１で撮影された映像は、ピッチャーＰが放ったボールをバッターＢが空振りし、空振りしたボールをキャッチャーＣが受け取ろうとしているものである。この図６（ｂ）のアスペクト比はｙａ１：ｙｂ１であり、ｙａ１＞ｙｂ１である。
【００６６】また、図７（ａ）は、撮影カメラＣａ２で撮影された映像を図示したものであり、撮影カメラＣａ２で撮影された映像は、ボールを空振りするバッターＢを、バッターＢの正面から捉えたものである。この図７（ａ）のアスペクト比はｙａ２：ｙｂ２であり、ｙａ２＜ｙｂ２である。またさらに、図７（ｂ）は撮影カメラＣａ３で撮影された映像を図示したものであり、撮影カメラＣａ３で撮影された映像は、バッターＢが空振りしたボールをキャッチャーＣ（図６（ｂ）参照）が取り損ねて後方に逸らしてしまい、バッターＢが振り逃げして走者Ｒとなって走っていると共に、キャッチャーＣが後方に逸らしてしまったボールを自らカバーして（取りに行って）送球したボールを一塁手Ｆが今まさに受け取ろうとしている瞬間を捉えたものである。この図７（ｂ）のアスペクト比はｙａ３：ｙｂ３であり、ｙａ３＞ｙｂ３である。
【００６７】そして、図８は、撮影カメラＣａ４で撮影された映像を図示したものであり、図７（ｂ）に図示した一塁手Ｆがボールを受け取ったタイミングと、走者Ｒが一塁ベースを踏んだタイミングとを比較し、「アウト」と審判した一塁側の審判員に対し、攻撃側のチーム（バッターＢ側）の監督（図示せず）が、クレームをつけて球場が騒然とし始めたところを捉えたものである。
【００６８】これによれば、図６（ｂ）、図７（ａ）、図７（ｂ）、図８に図示したそれぞれの映像において、アスペクト比の横寸法をｙａ１、ｙａ２、ｙａ３、ｙａ４と次々に変化させ、アスペクト比の縦寸法をｙｂ１、ｙｂ２、ｙｂ３、ｙｂ４と次々に変化させることで、アスペクト比変更映像受信装置５のユーザに対し、注目して欲しい部分のみに、制作者側（アスペクト比変更映像送信装置３の映像制作者）の意図（映像上の演出）が付加されたアスペクト比変更映像を視聴させることができる。つまり、この“野球”の例では、特にボールに直接関わる選手のみの映像が抽出され、その場面に応じて（制作者の意図に添う形式で）、この抽出された映像のアスペクト比が自在に変更される。
【００６９】（アスペクト比変更映像の例４［“舞台”］）次に、図９、図１０を参照して、複数のアスペクト比変更映像の再生出力例を説明する（適宜、図１を参照）。この説明では、具体的な“舞台”映像をサンプルとしている。図９（ａ）は、１台の撮影カメラ（図示せず）で撮影した“舞台”の映像を図示したものであり、この“舞台”の映像は、主役の女性ＦＭが舞台袖の出場口から両手を広げて出場し、この主役の女性ＦＭが自分の姿を見ていた男性Ｍに話しかけており、この場面を観衆Ａｕが観ているところを捉えたものである。この図９（ａ）のアスペクト比は、ｂａ１：ｂｂ１である。そして、図９（ｂ）は、図９（ａ）に図示した“舞台”の映像に含まれている主役の女性ＦＭのみを切り出したものであり、この図９（ｂ）のアスペクト比は、ｂａ２：ｂｂ２である。
【００７０】一方、図１０（ａ）は、図９（ａ）に図示した“舞台”の映像に含まれている男性Ｍのみを切り出したものであり、この図１０（ａ）のアスペクト比は、ｂａ３：ｂｂ３である。また、図１０（ｂ）は図９（ａ）に図示した“舞台”の映像に含まれている主役の女性ＦＭの手ＦＭ−Ｈのみを切り出したものであり、この図１０（ｂ）のアスペクト比は、ｂａ４：ｂｂ４である。
【００７１】これによれば、図９（ａ）、図９（ｂ）、図１０（ａ）、図１０（ｂ）に図示したそれぞれの映像において、アスペクト比の横寸法をｂａ１、ｂａ２、ｂａ３、ｂａ４と次々に変化させ、アスペクト比の縦寸法をｂｂ１、ｂｂ２、ｂｂ３、ｂｂ４と次々に変化させることで、アスペクト比変更映像受信装置５のユーザに対し、注目して欲しい部分のみに、制作者側（アスペクト比変更映像送信装置３の映像制作者）の意図（映像上の演出）が付加されたアスペクト比変更映像を視聴させることができる。つまり、この“舞台”の例では、特にセリフを喋っている人物のみの映像が抽出され、その場面に応じて（制作者の意図に添う形式で）、この抽出された映像のアスペクト比が自在に変更される。
【００７２】この実施の形態では以下の効果を奏す。アスペクト比変更映像送信装置３とアスペクト比変更映像受信装置５によれば、被写体或いはシーン毎に映像制作者が意図する構図に適合した種々のアスペクト比の映像（アスペクト比変更映像）を生成し、アスペクト比変更映像受信装置５のユーザに視聴させることができる。例えば、従来の固定のアスペクト比で制作された映像を表示させる場合の表現上の制約を取り除くことができ、写真、絵画、漫画等のアスペクト比による制約が少ない表現に映像表現を近づけることができ、新規の映像作りを期待することができる。
【００７３】更に、映像信号作成部７または映像受信部９で入手される映像の注目領域だけの映像を制作することができるため、帯域が固定された伝送路を用いて映像を送信する場合、例えば、符号化の圧縮率を高めることができると共に、解像度の低下を軽減することができる。
【００７４】すなわち、アスペクト比変更映像送信装置５では、まず、映像信号作成部７または映像信号受信部９で入手された映像信号を表示する際の表示画像のアスペクト比を設定するアスペクト比設定情報を含む切り出し情報が、切り出し情報設定部１３で生成される。次に、生成された切り出し情報に基づいてアスペクト比が変更されたアスペクト比変更映像が切り出し部１１で生成され、このアスペクト比変更映像とアスペクト比設定情報とが伝送部１９で多重され、アスペクト比設定情報多重映像とされ、このアスペクト比設定情報多重映像が伝送部１９で送信される。
【００７５】そして、アスペクト比変更映像受信装置５では、まず、信号情報復調部２３で、アスペクト比設定情報多重映像が受信される。このアスペクト比設定情報多重映像からアスペクト比設定情報が抽出される。そして、映像再生部２９で、抽出された切り出し情報に基づいて、アスペクト比変更映像が再生出力される。このため、映像制作者が意図する構図に適合したアスペクト比の映像をアスペクト比変更映像送信装置３で制作（生成）し、アスペクト比変更映像受信装置５で表示することができる。また、切り出される映像（アスペクト比設定情報多重映像）は、切り出し情報によって送信する際の伝送路の通信情報量以内に収めることができる。
【００７６】また、映像フォーマット変換部１７によって、生成される映像が任意映像フォーマットに適合するように変換されるので、受信側のアスペクト比変更映像受信装置５に対応させることができる。
【００７７】また、切り出し部１１に備えられているアスペクト比変換表示設定手段（図示せず）によって、アスペクト比変更映像が、受信側において設定されるアスペクト比変更映像受信装置５の表示モニターと視聴者との視聴距離に基づいて、変換される。このため、送信側のアスペクト比変更映像送信装置３のユーザ（映像制作者）の意図した映像を受信側のアスペクト比変更映像受信装置５のユーザ（視聴者）に視聴させることができると共に、視聴者側でも、視聴距離の設定を変更することで、視聴者が見やすい映像を視聴することができる。
【００７８】また、アスペクト比変換表示設定手段によって変換されたアスペクト比変更映像の表示画像の総画素数が一定に保たれるので、送信側（アスペクト比変更映像送信装置３）から送信される際の通信情報量を一定に保つことができる。またさらに、アスペクト比変更映像受信装置５では、映像再生部２９によって、アスペクト比変更映像の表示される表示領域の形状が変形されたり、アスペクト比変更映像の表示される表示領域の位置が変更されたりするので、当該装置５のユーザは、送信側（アスペクト比変更映像送信装置５）の意図する構図の映像を視聴することができる。
【００７９】以上、一実施形態に基づいて本発明を説明したが、本発明はこれに限定されるものではない。アスペクト比変更映像送信装置３およびアスペクト比変更映像受信装置５の各構成の処理を各過程とみなしたアスペクト比変更映像送信方法、アスペクト比変更映像受信方法と捉えることも可能である。この場合、アスペクト比変更映像送信装置３およびアスペクト比変更映像受信装置５と同様の効果を得ることができる。
【００８０】また、アスペクト比変更映像送信装置３およびアスペクト比変更映像受信装置５の各構成の処理を汎用的なコンピュータ言語で記述したアスペクト比変更映像送信プログラム、アスペクト比変更映像受信プログラムと捉えることも可能である。この場合も、アスペクト比変更映像送信装置３およびアスペクト比変更映像受信装置５と同様の効果を得ることができる。
【００８１】
【発明の効果】請求項１記載の発明によれば、映像信号入手ステップ、アスペクト比設定情報生成ステップ、アスペクト比変更映像生成ステップにおいてアスペクト比変更映像が生成され、これにアスペクト比設定情報が多重され、アスペクト比設定情報多重映像とされ、送信される。このため、映像制作者が意図する構図に適合した種々のアスペクト比に変更したアスペクト比変更映像を生成し、送信することができる。
【００８２】請求項２記載の発明によれば、映像信号入手手段、アスペクト比設定情報生成手段、アスペクト比変更映像生成手段においてアスペクト比変更映像が生成され、これにアスペクト比設定情報が多重され、アスペクト比設定情報多重映像とされ、送信される。このため、映像制作者が意図する構図に適合した種々のアスペクト比に変更したアスペクト比変更映像を生成し、送信することができる。
【００８３】請求項３記載の発明によれば、アスペクト比変更映像生成手段に備えられる映像フォーマット変換手段によって、生成される映像が任意映像フォーマットに適合するように変換されるので、様々な映像フォーマットの映像を表示可能な受信側の複数の装置に対応させることができる。
【００８４】請求項４記載の発明によれば、アスペクト比変換表示設定手段によって、アスペクト比変更映像が、受信側において設定される受信装置つまり受信装置の表示部と視聴者との視聴距離に基づいて、変換される。このため、送信側の映像制作者の意図した映像を受信側の視聴者に視聴させることができる。
【００８５】請求項５記載の発明によれば、アスペクト比変換表示設定手段によって変換されたアスペクト比変更映像の表示画像の総画素数が一定に保たれるので、送信側（アスペクト比変更映像送信装置３）から送信される際の通信情報量を一定に保つことができる。
【００８６】請求項６記載の発明によれば、アスペクト比変更映像送信プログラムにおいて、映像信号入手手段、アスペクト比設定情報生成手段、アスペクト比変更映像生成手段においてアスペクト比変更映像が生成され、これにアスペクト比設定情報が多重され、アスペクト比設定情報多重映像とされ、送信される。このため、映像制作者が意図する構図に適合した種々のアスペクト比に変更したアスペクト比変更映像を生成し、送信することができる。
【００８７】請求項７記載の発明によれば、アスペクト比設定情報多重映像受信ステップ、アスペクト比設定情報抽出ステップにおいて、受信された後、抽出されたアスペクト比設定情報に基づいて、アスペクト比変更映像再生出力ステップにおいて、アスペクト比変更映像が再生出力される。このため、映像制作者が意図する構図に適合したアスペクト比の映像を、アスペクト比設定情報に基づいて、表示することができる。
【００８８】請求項８記載の発明によれば、アスペクト比設定情報多重映像受信手段、アスペクト比設定情報抽出手段で、受信された後、抽出されたアスペクト比設定情報に基づいて、アスペクト比変更映像再生出力手段で、アスペクト比変更映像が再生出力される。このため、映像制作者が意図する構図に適合したアスペクト比の映像を、アスペクト比設定情報に基づいて、表示することができる。
【００８９】請求項９記載の発明によれば、アスペクト比変更映像再生出力手段によって、任意映像フォーマットであるアスペクト比変更映像が再生出力されるので、様々な映像フォーマットの映像を、送信側の映像制作者の意図する構図に従って視聴することができる。
【００９０】請求項１０記載の発明によれば、視聴距離設定手段によって設定された視聴距離に基づいて、アスペクト比変更映像再生出力手段によりアスペクト比変更映像が再生出力されるので、送信側の映像制作者の意図する構図に従ったアスペクト比変更映像を、受信側の視聴者が見やすい映像として視聴することができる。
【００９１】請求項１１記載の発明によれば、アスペクト比変更映像再生出力手段によって再生出力されるアスペクト比変更映像の表示画像の総画素数が一定に保たれ、送信側から送信される際の通信情報量を一定に保つことができる。
【００９２】請求項１２記載の発明によれば、アスペクト比変更映像再生出力手段によって、アスペクト比変更映像の表示される表示領域の形状が変形されるので、当該装置の視聴者は、送信側の意図する構図の映像を視聴することができる。
【００９３】請求項１３記載の発明によれば、アスペクト比変更映像再生出力手段によって、アスペクト比変更映像の表示される表示領域の位置が変更されるので、当該装置の視聴者は、送信側の意図する構図の映像を視聴することができる。
【００９４】請求項１４記載の発明によれば、アスペクト比変更映像受信プログラムにおいて、アスペクト比設定情報多重映像受信手段、アスペクト比設定情報抽出手段で、受信された後、抽出されたアスペクト比設定情報に基づいて、アスペクト比変更映像再生出力手段で、アスペクト比変更映像が再生出力される。このため、映像制作者が意図する構図に適合したアスペクト比の映像を、アスペクト比設定情報に基づいて、表示することができる。
【出願人】 【識別番号】０００００４３５２
【氏名又は名称】日本放送協会
【出願日】 平成１３年１２月７日（２００１．１２．７）
【代理人】 【識別番号】１０００６４４１４
【弁理士】
【氏名又は名称】磯野 道造
【公開番号】 特開２００３−１７４６３４（Ｐ２００３−１７４６３４Ａ）
【公開日】 平成１５年６月２０日（２００３．６．２０）
【出願番号】 特願２００１−３７３８０４（Ｐ２００１−３７３８０４）