六、多媒体基础知识 _多媒体

多媒体：对多种媒体的融合，能够同时采集、处理编辑、存储、展示2个及以上不同类型信息媒体的技术。这些信息媒体包括：文字、声音、图形、图像、动画、活动影像……
1.多媒体的基本概念
媒体：1.信息的物理载体（存储、传递信息的实体）；2.承载信息的载体（信息的表现形式、传播形式）。即CCITT定义的存储媒体、表示媒体
分类：视觉类媒体、听觉类媒体、触觉类媒体。视觉、听觉是信息传播的内容；触觉是人机交互的内容。
CCITT（国际电报电话咨询委员会）分类：感觉媒体、表示媒体、表现媒体、存储媒体、传输媒体
超媒体：为了使不同的媒体能够有机地链接起来，往往按照实际需要建立的一种链接机制、结构。信息存储、检索系统。文本、图形、影视、动画、音乐……其他媒体
超文本：如果信息主要是以文字的表示形式。
多媒体特征：多样性；集成性；交互性；非线性；实时性；信息使用的方便性；信息结构的动态性；
虚拟现实（VR）：运用计算机对现实世界进行全面仿真，创建、实现社会类似的环境，通过多种传感设备使用户“投入”到该环境中，实现用户与该环境直接进行自然交互。
将现实世界的多位信息映射到计算机的数字空间生成相应的虚拟世界
主要特征：多感知；沉浸（临场感）；交互；
感官认知：视觉感知；听觉感知；力觉、触觉感知；
根本目标：达到真实体验和基于自然技能的人机交互。能够达到、部分达到这样的目标就称为虚拟现实技术。
分类：桌面虚拟现实、完全沉浸的虚拟现实；增强现实性的虚拟现实；分布式虚拟现实
2.声音
声音：通过空气传播的一种连续的波，声波。
模拟声音（音频）信号：声波在时间、幅度上都是连续的模拟信号。人耳可以听到的音频范围：20~20kHz
声音指标：音量（响度，幅度）、音调（频率）、音色（谐波丰富度）
声音信号：幅度（分贝）、频率（亚音信号[次音信号]、音频信号、超声波）
数字化：取样-量化法（采样、量化、编码）

文章插图
波形声音：表示声音振幅的数据序列，是便于计算机存储、处理的数据格式
未经压缩的数字音频数据传输率（数据传输率）=采样率*量化位数*声道数
波形声音经过数字化后所需的存储空间（声音信号数据量）=数据传输率*持续时间/8（B）
数据压缩算法：压缩倍数高，信号失真小，算法执行快，成本低
示例：单位转换

文章插图
数字语音压缩方法：波形编码、参数编码（模型编码）、混合编码
数字语音、全频带声音（感知声音编码）
声音合成：
1.语音合成（文语转换）：1.将文字玉莲转换为音韵序列（语言学处理）；3.由语音生成器生成语音波形（语音合成技术：发音参数合成、声道模型参数合成、波形编辑合成）。

文章插图
2.音乐合成：基本单元：音符；要素。音调、音色、响度、持续时间。
MIDI（乐器数字接口）：数字音乐的国际标准，解决不同电子乐器之间不兼容的问题。
MIDI文件：计算机中用于存储、交换MIDI消息的一种数据文件，由一系列的MIDI消息组成。
包含：1.与音乐演奏有关的消息（音符、速度、表情……），2.与音响有关的控制信息（声像、效果、均衡）。