文化遺産デジタルアーカイブとデジタル再現池内克史東京大学大学院情報学環(生産技術研究所).docVIP

文化遺産デジタルアーカイブとデジタル再現 池内克史 *東京大学大学院情報学環（生産技術研究所） Digital Archival and Digital Restoration of Cultural Heritage Katsushi Ikeuchi Interfaculty Initiative of Information Studies (Institute of Industrial Science) The University of Tokyo ki@iis.u-tokyo.ac.jp http://www.cvl.iis.u-tokyo.ac.jp Keyword: Computer Vision, Computer Graphics, Cultural Heritage, Great Buddha １　はじめに 近年のエレクトロニクス技術の急激な発達により、高性能で広いメモリ領域を持つ計算機、高分解能のデジタルカメラやテレビカメラ、高精度３次元距離センサーなどが広く使用可能となってきた。これらを用いて、デジタル的な文化財の記録?保存や再現が注目されてきた。我々のグループでも、科学技術振興事業団CRESTプロジェクトを通して、鎌倉大仏や奈良大仏あるいは唐招提寺金堂などといった国宝級の歴史文化遺産の3次元形状や見えをデジタルデータとして半永久的に保存する技術を開発している。本稿では、このプロジェクトを中心に、画像処理技術を用いた文化遺産のデジタルアーカイブ研究動向を概説する。 この分野は大きく分けて、幾何情報のアーカイブ、光学情報のアーカイブ、環境情報のアーカイブといった３つほどの要素技術分野に分類できる（図１）[1]。 図１　デジタルアーカイブのための三要素技術 幾何情報－対象物体の全体的な形状データを得るための技術。距離センサーなどから得られる形状データは対象の一部にすぎない。文化財のデジタル化は全体のデータが得られている方が良い。各方向からの部分観測情報をつなぎ合わせる手法や欠損データの補完の方法などが研究テーマとなる。 光学情報－文化財のモデル化のためには、形状データだけでは不十分である。カラーカメラ等で撮ったカラー画像を幾何情報の上に貼り付けて最終的なコンテンツを作る必要がある。この際、出きるだけ情報を圧縮する必要がある。さらに、色合わせや光源色の除去なども技術開発仮題となる。 環境情報－通常コンテンツは単独で表示されることはまれである。何かのバックグラウンドの画像とコンテンツをマージして表示画像とすることが多い。その場合に両者の関係の整合性をとるための技術開発が必要になる。 本稿では、幾何情報、光学情報、環境情報の取得法を順を追って概説し、その後これらの要素技術を用いた文化財のコンテンツライブラリ作成についても説明を行う。 ２　幾何学情報の取得 ２．１　重ね合わせと統合 本章では、幾何形状情報の取得を考える。一般に、幾何形状の入力手段としては、2台以上のテレビカメラで画像を得、これらの画像間での対応点のずれから奥行きを測定する両眼立体視や写真測量が伝統的に使用されてきた。これらの技術は、手作業がはいったり、得られるデータが特徴のある部分のみであるといった限界があった。 近年、エレクトロ二クス技術の進歩により、レーザーパルスを測定したい対象に投影し反射パルスの時間遅れから距離を測定したり、投射レーザ光にＡＭやＦＭ変調をかけ投射光と反射光との間の位相の差から距離を測定するレーザーセンサーが広く使用されるようになってきた。レーザーセンサーは、レーザー光があたった対象物体の部分からその点までの距離が得られる。対象物体全体から距離データを得るため、レーザ光の投射方向を変化させることで各方向での距離分布が得られる。これから得られるデータは、図2に示すように2次元アレー上で各要素に対応する方向での距離を測定し、これを先のアレー上に蓄えた形となる。これを距離画像と呼ぶ。一般の濃淡画像では、各要素に対応する視線方向の明るさ情報を蓄えているのに対し、距離画像では対応する視線方向での距離（あるいは3次元位置）が蓄えられている。 一方向から得られた距離画像は、レーザー光があたる部分のみの距離情報である。全体的な距離情報を得るためには、多方向から測定を繰り返す。例えば、図３(a)中央に示す鎌倉大仏を測定した際には、24の異なった方向から測定を繰り返し、24枚の距離画像を得た。図3(a)には、24枚の距離画像のうちの一部を示す。いろいろな方向からの距離画像が得られていることがわかる。 これらの距離画像から全体的な幾何形状モデルを得るためには、１）距離画像間の相対関係の決定（アラインメント）と２）位置合わせされた距離画像間の張り