本书讲述多媒体情报处理的技术和方法。全书共分6章,主要内容包括绪论、图像情报的处理、视频情报的处理、音频情报的处理、多源情报的融合处理以及多媒体情报检索。本书首先从图像、视频、音频等典型多媒体情报的角度讲述多媒体情报处理基本概念和技术方法,在此基础上介绍如何进行多媒体情报的融合处理以及多媒体情报检索应用。 本书可作为情报处理以及计算机应用类教材,也可供从事多媒体情报处理、多媒体信息系统等计算机应用类
相关专业技术人员学习参考。
全部显示 ∨
全部显示 ∨
前言0
第1章 绪论11.1 情报基础11.1.1 情报的定义及属性1
1.1.2 情报分类8
1.1.3 情报作用13
1.2 多媒体情报概念141.2.1 多媒体情报的定义与分类14
1.2.2 多媒体情报的特征15
1.3 多媒体情报处理161.3.1 多媒体情报处理的流程17
1.3.2 多媒体情报处理的研究内容与关键技术20
第2章 图像情报处理242.1 图像情报处理基础242.1.1 图像情报的概念24
2.1.2 图像情报处理的内容24
2.1.3 图像情报处理的应用领域26
2.2 图像特征提取272.2.1 图像基础27
2.2.2 颜色特征提取29
2.2.3 形状特征提取35
2.2.4 纹理特征提取38
2.2.5 空间关系特征提取44
2.2.6 局部不变特征提取45
2.2.7 语义特征提取50
2.3 图像分类522.3.1 图像分类面临的技术挑战53
2.3.2 图像分类方法54
2.4 图像识别582.4.1 字幕检测与识别58
2.4.2 人脸检测与识别63
第3章 音频情报处理733.1 音频情报处理基础733.1.1 数字音频相关概念73
3.1.2 音频情报的特点及分析77
3.2 音频特征提取783.2.1 音频短时处理技术78
3.2.2 线性预测技术84
3.2.3 同态处理与倒谱分析85
3.2.4 音频特征87
3.3 音频分段与分类923.3.1 音频的类型及特征93
3.3.2 语音的物理特征及判别算法94
3.3.3 音乐的物理特征及判别算法97
3.3.4 噪声的特征及判别98
3.3.5 静音的物理特征及判别算法99
3.3.6 含背景声音的语音判别100
3.4 语音识别101
3.5 语音合成103
3.6 音频情报处理特殊应用106
第4章 视频情报处理1084.1 视频情报处理基础1084.1.1 视频的基本概念108
4.1.2 视频的参数108
4.1.3 视频文件格式110
4.1.4 视频处理的术语111
4.2 新闻视频处理1134.2.1 视频分割114
4.2.2 视频摘要134
4.2.3 故事关联分析139
4.3 监控视频处理1544.3.1 运动目标检测154
4.3.2 运动目标跟踪155
4.3.3 运动目标分类158
第5章 多源情报融合处理1645.1 情报的多源性分析164
5.2 信息融合技术概述1655.2.1 信息融合的基本概念165
5.2.2 信息融合的基本原理166
5.2.3 信息融合的技术和方法169
5.3 多种媒体融合的内容分析1705.3.1 多媒体融合分析的方法论170
5.3.2 多媒体融合分析系统的体系结构172
5.3.3 多媒体融合分析模型175
5.3.4 多媒体融合分析若干问题的讨论179
5.4 多源情报的特征融合处理1815.4.1 文本情报融合处理181
5.4.2 视频多模态特征融合处理183
5.5 多源情报的组织1855.5.1 分类组织法185
5.5.2 统计分析技术188
5.5.3 数据可视化技术188
第6章 多媒体情报检索1916.1 基于内容检索1916.1.1 基于内容检索的概念191
6.1.2 基于内容检索系统的一般结构193
6.1.3 基于内容检索的过程及指标195
6.2 语义鸿沟问题198
6.3 图像情报检索2026.3.1 图像检索的语义模型203
6.3.2 基于颜色的检索205
6.3.3 基于形状的检索209
6.3.4 基于纹理的检索211
6.3.5 相关反馈技术211
6.4 视频情报检索2126.4.1 基于框架的查询213
6.4.2 基于浏览的方法214
6.5 音频情报检索2186.5.1 基于声学特征的声音检索219
6.5.2 基于逻辑特征的声音检索220
6.5.3 基于模板的音频检索221
参考文献226