基于Bayes算法实现图像语义分类

介绍了根据图像的逻辑特征和抽象属性进行检索的基于语义分类的图像检索技术,并用Bayes分类算法设计了一个语义分类器,该语义分类器通过计算用户要查询图像的后验概率,对被查询的图像进行语义分类。     

面向交互式快速动画制作的素材标注与检索系统

交互式快速动画制作需要丰富的动画素材库作为支撑,因此,有必要研究动画素材的标注与检索技术,为动画素材的重用提供支持.研究并实现了交互式快速动画制作素材标注与检索系统,首先建立丰富的动画素材库,然后研究动画场景和形象等素材的语义标注方法,最后在此基础上实现对动画素材的颜色分块特征、局部不变特征、形状等多种特征的浏览与检索.系统具有良好的可扩展性、交互性以及快速检索能力,其关键技术已在动画制作企业得到实际应用,并取得了良好的应用效果.     

增量学习语义属性的图像内容检索系统增强

大规模图像内容检索是实现图像语义信息获取的重要手段, 其首要需解决图像低层特征与用户高层语义间的语义鸿沟问题。针对该问题, 引入图像语义属性, 并结合增量分类学习方法(online core vector machine, OCVM), 提出了一种增量构建大规模图像内容检索系统的新方法。该方法借助检索反馈学习机制可以提升图像语义属性的辨别准确性, 能在扩张图像库规模的同时, 提升图像内容检索的可靠性。实验结果表明了上述方法的有效性, 其检索性能可逐步地达到离线构建方法的最佳性能, 但具有更好的可扩展性和自提升能力。     

图像的语义关联与图像索引

基于内容图像检索的主要挑战在于不断变化的图像检索要求、难于表达的图像内容以及图像表达的数字阵列与通常可以被人类所接受的概念化内容之间的语义鸿沟.提出了一个基于语义关联的图像检索方法,在语义关联的基础上形成一个场景类别的语义表达,以便用户可以将感知上相似的图像组织在一起,形成概念上下文,使得用户可以解释和标记图像而无需给...     

基于GIS语义的遥感图像检索

语义图像检索为填补图像低层视觉特征和用户高层语义之间的鸿沟而产生,图像语义描述和提取是其关键。提出了一种基于G IS语义的遥感图像检索(G IS sem antics-based remote sensing im age retrieval,简称G ISSB IR)方法,主要涉及空间对象的语义表达和语义匹配两方面内容。利用面向对象G IS语义模型和概念语义网络共同表达空间对象的语义,设计了语义调解器处理用户与系统之间的语义不一致。通过对G IS原子查询结果进行布尔运算得到矢量查询结果,在此基础上得到与G IS数据具有统一坐标框架的遥感图像检索结果。实验结果表明G ISSB IR方法是有效的。     

手机动画空间布局规划的设计与实现

手机3D 动画自动生成系统是要实现从用户发送信息给服务器,经过信息抽取、情节规划、场景规划等一系列的处理,最终生成与短信内容相关的视频动画并发送给接收方这一过程。其中场景规划模块是在情节定性规划的基础上确定情节的各个细节,并将其量化到三维动画场景文件中。在动画情节规划的基础上,对动画场景规划模块中的三维场景空间布局问题进行研究,将三维场景可用空间根据物体的语义信息进行布局,基于语义网技术设计和实现三维场景的布局知识库,最终实现了三维物体的合理摆放,系统不仅保证了物体的无遮挡、无碰撞摆放,也实现了同一物体添加多个的情况,使物体的摆放具有多样性同时也体现了物体的语义信息。     

利用相关反馈技术的图像检索研究

介绍了一种支持语义的图像检索系统——PICsearch(PICTURE Search),该系统获取图像低层特征(颜色)时采用基于区域的主颜色提取算法,综合考虑了图像的像素统计特征和空间位置信息同时节省存储空间和计算时间.提出了高级视觉特征的语义查询.在图像库上构建一个可扩展的语义网络,利用一种基于用户相关反馈的机器学习策略来改进这种语义网络,以解决低层特征向高层语义特征的过渡问题,使检索能够体现高层次语义属性.实验证明,PICsearch能有效通过人机协同工作,弥补了计算机理解能力的不足,提高了检索效率.     

基于多特征融合的图像检索技术研究

提出了一种基于多特征融合的图像搜索算法。该算法将不同特征作为图像不同侧面的属性,构建多模式语义空间,将潜伏语义检索(Latent Semantic Indexing-LSI)技术应用于图像检索过程,挖掘图像之间的潜伏语义联系,并结合有效的用户反馈信息,从而大大提高了图像搜索的性能。对准确率(Presion Rate)、回想率(Recall Rate)以及匹配时间等指标的统计分析,充分证明了多特征融合的潜伏语义检索在CBIS领域的优势。     

交互式检索的用户模拟器研究综述

随着检索技术的发展,交互式检索在信息检索领域中变得尤为重要。交互式检索在传统检索模式下增加了捕捉用户细粒度行为的功能,以便通过用户模拟器提升检索引擎性能。基于规则的用户模拟器缺乏个性化用户特征,适应性较差。基于模型的用户模拟器能够学习到更多的用户个性化行为特征,可以有效提升交互式检索引擎的性能。阐述了用户模拟器与检索引擎的交互过程,对基于规则的用户模拟器和基于模型的用户模拟器的构建方法以及近年来用户模拟器的评价方法进行了归纳总结,并重点介绍了基于模型的用户模拟器。最后对比了面向交互式检索的用户模拟器和传统的用户模拟器的差异,并以交互式学位论文检索场景为例,通过此检索场景对用户模拟器的应用进行了展望。     

语义图像检索研究进展

语义图像检索已成为解决图像简单视觉特征和用户检索丰富语义之间存在的“语义鸿沟”问题的关键。从图像语义描述方式、图像语义抽取方法和语义检索系统设计3个方面对语义图像检索的研究状况进行了分析和研究;讨论了面向对象的图像内容模型和图像语义表示问题;对利用系统知识的提取、根据用户交互的提取和利用外部信息源的语义生成等具有代表性的语义处理方法进行了阐述;介绍了系统设计中用户界面和语义处理的不同方式,最后从对象识别、语义抽取规则、用户检索模型和图像检索性能评价标准4个方面剖析了实现图像语义处理所面临的困难,并提出了一些初步解决思路。     

MPEG-7标准在电影动画素材检索中的应用

在电影动画的制作过程中,会产生各种类别的素材资料,如果能充分地利用这些现有的资料进行新的电影制作,将会大大缩短制作周期、提高工作效率、减少投资。在制作电影的过程中,能快速检索找到所需要的素材是非常必要的。对MPEG-7标准中的颜色特征如何在电影素材库中进行检索进行了研究,并给出一套实验系统。     

MPEG-7标准在电影动画素材检索中的应用

在电影动画的制作过程中，会产生各种类别的素材资料，如果能充分地利用这些现有的资料进行新的电影制作，将会大大缩短制作周期、提高工作效率、减少投资。在制作电影的过程中，能快速检索找到所需要的素材是非常必要的。时MPEG-7标准中的颜色特征如何在电影素材库中进行检索进行了研究，并给出一套实验系统。     

基于范例匹配的卡通形象设计方法研究

针对动画卡通形象的特点,选取典型卡通形象范例,并分割出范例图元形成图元库。利用傅里叶形状描述方法统一描绘用户输入草图和范例图元的轮廓特征,用输入草图的特征检索图元库,得到相似的范例图元,通过交互方式调整和修改图元,进而生成个性化的卡通形象。实验结果表明,该方法生成的卡通形象基本符合用户的设计意图。     

The SUN Attribute Database: Beyond Categories for Deeper Scene Understanding

In this paper we present the first large-scale scene attribute database. First, we perform crowdsourced human studies to find a taxonomy of 102 discriminative attributes. We discover attributes related to materials, surface properties, lighting, affordances, and spatial layout. Next, we build the “SUN attribute database” on top of the diverse SUN categorical database. We use crowdsourcing to annotate attributes for 14,340 images from 707 scene categories. We perform numerous experiments to study the interplay between scene attributes and scene categories. We train and evaluate attribute classifiers and then study the feasibility of attributes as an intermediate scene representation for scene classification, zero shot learning, automatic image captioning, semantic image search, and parsing natural images. We show that when used as features for these tasks, low dimensional scene attributes can compete with or improve on the state of the art performance. The experiments suggest that scene attributes are an effective low-dimensional feature for capturing high-level context and semantics in scenes.     

A novel multi-focus image fusion approach based on image decomposition

Multi-focus image fusion is an effective technique to integrate the relevant information from a set of images with the same scene, into a comprehensive image. The fused image would be more informative than any of the source images. In this paper, a novel fusion scheme based on image cartoon-texture decomposition is proposed. Multi-focus source images are decomposed into cartoon content and texture content by an improved iterative re-weighted decomposition algorithm. It can achieve rapid convergence and naturally approximates the morphological structure components. The proper fusion rules are constructed to fuse the cartoon content and the texture content, respectively. Finally, the fused cartoon and texture components are combined to obtain the all-in-focus image. This fusion processing can preserve morphological structure information from source images and performs few artifacts or additional noise. Our experimental results have clearly shown that the proposed algorithm outperforms many state-of-the-art methods, in terms of visual and quantitative evaluations.     

基于XMT的MPEG-4场景视频制作及系统设计

介绍了MPEG-4标准中的二进制格式的场景描述，基于XML的两种可扩展文本格式的描述框架：XMT-A和XMT-Ω及其支持的节点、属性、域与BIFS流的映射关系；给出了MPEG-4标准场景视频制作及发布系统的功能结构和基于XMT的系统层次分析。利用该系统制作和发布的多媒体交互式场景视频，可以进行网上教学的节目制作和远程点播。系统建立在MPEG-4标准上，提高了远程教学的质量，满足了用户与场景视频的交互需求；利用XMT作为中间描述格式，满足了相同场景在MPEG-4、SMIL、VRML等标准间的内容交换及互操作功能。     

基于特征知识库的动漫视频暴力场景检测方法

针对海量动漫视频剪辑中可能包含不符合观众认知或接收程度的内容,为观众带来不愉快体验的问题,提出了基于知识库的卡通视频暴力场景检测方法;首先,利用低级特征(RBG颜色、亮度、色调)开发连续函数,进行场景中镜头边界识别;然后,利用运动信息,计算视频帧中的运动;接着,使用空间信息和运动信息进行分割处理,并使用欧氏距离方法进行对象识别;最后,利用包含所有常见物品、卡通角色及其视觉特征和行为特征的知识库,计算场景的暴力概率;实验结果表明,该系统能够成功检测到卡通视频中的暴力场景。     

AniDiary: Daily Cartoon-Style Diary Exploits Bayesian Networks

AniDiary (Anywhere Diary) uses Bayesian networks to automatically detect landmark events and summarize a user's daily life in a cartoon-style diary. Our goal was to summarize a given user's daily life with a cartoon-style diary based on information collected from mobile devices such as smart phones. Our system, AniDiary (Anywhere Diary), addresses two main problems of typical diary systems-the huge number of events originating from the real-life log and the awkward presentation of the output. Using modular Bayesian networks, AniDiary can detect and visualize landmarks (relevant or novel events) and transform numerous logs into user-friendly cartoon images. The cartoons provide a good starting point for fine-grained searches of detailed information. For example, users can link each cartoon to rich media (photos or videos) that offer more details, reducing the search space and letting users easily recall the linked details.     

湖南动漫设计艺术人才培养创新教育几种途径

动漫创新型人才的缺乏与当今湖南不合理的动漫设计艺术教育密不可分,湖南动漫教育教学存在专业方向模糊,人才定位缺乏层次差异感,人才培养模式单一等诸多问题。湖南动漫创新性人才培育有几条基本的途径:一是改变湖南动漫教育的体制建设问题;二是科学解决动漫课程建设问题;三是产学研互动发展的途径。如何解决创新性动漫人才培育问题,将决定湖南动漫设计艺术教育发展方向,乃至于湖南动漫未来的走向。