acm-header
登录

ACM通信

ICT的结果

用于语义搜索的软件注释图像


戴珍珠耳环的女孩

IMAGINATION应用程序自动向图像添加“imagenotions”或注释,为语义搜索做好准备。

信贷:ImageNotion

欧洲开发的一款创新软件很快就能提供给媒体机构、摄影师,以及任何想要和喜欢拍照的Facebook或Flickr朋友保持联系的人。这款软件可以更容易地组织、搜索和导航数字图像集合。ImageNotion软件预计将于明年上市,它采用了一种用户友好的方法对语义图像进行注释和搜索,这是一种将照片内容与概念联系起来的技术,从而使图像能够被计算机理解。

这类系统通常要求终端用户使用手动开发的本体(一种预定义概念的词典,用于为信息赋予机器可读的语义含义),然后训练软件正确标注不同的图像。例如,需要在水果本体中定义一个苹果,然后将苹果树的照片标记为苹果。

ImageNotion系统为终端用户消除了许多复杂性,将语义注释与各种其他技术相结合,从文本挖掘和对象识别到人脸检测和人脸识别,以便在很少或不需要用户干预的情况下,对更多的图像进行准确注释。

“当你向大多数人提到本体论时,他们就会闭门不出。摄影师、图像机构雇员或网络用户不需要也不应该学习这项技术是如何工作的,他们只是想能够使用它,”Gabor Nagypal解释道,他作为欧盟资助的技术和科学协调员监督ImageNotion软件的开发想象力的项目.他补充道:“正因为如此,我们的目标是让这项技术变得透明和直观。”

人脸检测和识别等其他技术的加入,意味着用户在确保照片被正确标记上所做的工作要少得多。纳格帕尔说,人脸检测系统可以识别照片中人物的存在,其功能的准确性约为80%。

与此同时,人脸识别——一项更难完善的技术——在一个人的5到10张图片被标记后,开始产生一致的结果。

节省时间和金钱

德国软件公司disy的开发人员Nagypal解释说:“在现实环境中,准确性会因各种因素而异,尽管对于专业图像机构或摄影师来说,要处理数千张照片,任何人工注释数量的减少都会在时间和成本方面产生巨大的差异。”

另一个关键的创新是本体元素的创建,IMAGINATION团队将其称为“imagenotions”,它是软件不可分割的一部分,而不是作为一个单独的过程来处理。因此,最终用户可以随时轻松地更改和更新图像。

“如果他们意识到一个概念并不存在于特定的人或物体,他们可以很容易地将其添加到系统中。例如,该系统会自动识别它看到的第一张安格拉·默克尔(Angela Merkel)的照片是男是女。然后,用户可以说明自己的职业是德国总理,并说明照片是在某个欧盟会议上拍摄的。然后,只需点击几下,就可以使用这些术语调出会议上的其他照片列表,并连接到与会其他人的信息,”Nagypal解释道。

对于一些照片,比如已经存档的图片,文本挖掘软件从标题中提取大部分信息,并自动将其与面部检测和识别系统的输出连接起来。

嵌入链接的系统简化了在图片之间的导航,点击默克尔总理的脸,用户就会直接进入她的其他图片。

该软件目前正在接受法国图片社Photo12和意大利近现代历史国家图书馆的测试,这两个机构都是IMAGINATION项目的合作伙伴,还有几位德国摄影师。的网站上也有一个基于Web的测试版可供测试ImageNotion有限公司该公司是由一些项目成员成立的,目的是开始将该软件商业化。

“我们目前正在完善这款软件,但我们希望明年能将其作为独立产品或基于网络的产品销售。首先,我们将瞄准专业用户,主要是图片社、档案馆和图书馆,他们需要一种更快速、更简单的方式来注释和查找图像,然后我们将把它作为一种软件服务提供给个人摄影师,最后,作为一种嵌入式应用程序,可以在Facebook或Flickr等其他网站上使用,”Nagypal解释道。

他补充称:“我们正在寻找投资者和合作伙伴,帮助我们启动这项计划。”

IMAGINATION获得了欧盟第六个研究框架计划ICT部分的资助。

看视频教程ImageNotion应用程序的运行。

ICT的结果


没有发现记录

登录为完全访问
»忘记密码? »创建ACM Web帐号
Baidu
map