マルチメディア技術

要点と定義

マルチメディアは、文字・音声・画像など複数のメディアを統合して扱う考え方です。メディアを編集・統合する作業をオーサリングといい、利用者の操作に応じて内容が変わるインタラクティブ性も特徴です。

静止画の表現には、画素の集まりで表すラスター形式と、図形の形状情報で表すベクター形式があります。過去の出題で扱った補足として、SVGは図形や文字をXMLで記述し、Webページでの描画にも使えるベクター画像形式です。

過去の出題で扱った補足として、SMILは動画や音声などの配置や再生タイミングを記述するXML形式の言語です。複数メディアの同期やレイアウトを扱う点が、図形を記述する画像形式との違いです。

動画はフレームを時間順に表示して表現し、フレームレートは1秒当たりのフレーム数です。過去の出題で扱った補足として、非圧縮動画の1秒当たりのデータ量は、横画素数×縦画素数×1画素当たりのビット数×フレームレートで見積もれます。

圧縮・伸長は、保存効率やネットワーク負荷などの目的に応じて使います。メディアの種類や用途によって適した方式は異なり、圧縮の有無や方式を確認せずにデータ量を決めることはできません。

過去の出題で扱った補足として、コンピュータグラフィックスでは、モデリングで形状を作り、レンダリングで形状・材質・光源などをもとに表示画像を生成します。レンダリングは形状を定義する段階ではなく、画面に表示する画像を作る処理です。

過去の出題で扱った補足として、ラジオシティ法は拡散反射面どうしの相互反射を考慮して輝度を求める手法です。面の間で光が反射して届く効果を扱うことが、手法を見分ける手掛かりです。

適用条件と例

写真のように画素ごとの色を記録したいときはラスター形式、拡大して使う案内図の線や輪郭を保ちたいときはベクター形式が候補になります。図形単体の表現と、音声・動画を含む複数メディアの同期では、必要な記述対象が異なります。

たとえば、幅320画素、高さ200画素、1画素8ビット、毎秒12フレームの非圧縮動画なら、320×200×8×12＝6,144,000ビット毎秒、約6.14 Mビット毎秒です。この値は音声や通信上の付加情報を含まず、圧縮も行わない場合の見積もりです。条件が変われば必要なデータ量も変わります。

研修コンテンツで、利用者が選んだ項目に応じて次の説明を変えるなら、操作に応じて内容を変えるインタラクティブ性を利用します。音声に合わせて図を表示するなど、素材の編集や統合が中心ならオーサリングの作業として考えます。

誤りやすい点

XMLを使うというだけで、SVGとSMILを同じ用途だと判断しないようにします。SVGは図形などの画像表現、SMILは過去の出題で扱った補足として、複数メディアの配置や再生タイミングに関するものです。