首页> 关于我们> 东芝期刊> 当前期刊> 创新前沿> 东芝开发高速对照大数据技术 比传统处理技术快50倍
东芝开发高速对照大数据技术 比传统处理技术快50倍

6月,东芝开发出了可高速对照大数据、大规模媒体数据的数据处理技术。此技术以高维矢量表现人物的面部、销售数据等,通过预先将类似的矢量群索引化处理,可实现高速对照。利用此技术从1000万张人物的面部图像数据中提取指定人物的实验中,仅8.31毫秒(1毫秒=1/1000秒)即可完成处理。比传统的处理速度高出约50倍。

近年来,大数据的分析、活用技术不断用于机械学习或机器故障预测等领域,大幅提高了故障的预测精度,给人们的生活带来诸多便利的同时,分析的数据量也比人们预想的更快实现了大容量化、大规模化,寻求计算处理的高速化需求日益凸显。

东芝开发的高速对照技术,结合了“矢量符号技术” (以尽量维持矢量间的距离的状态进行压缩)、“矢量索引技术” (不计算矢量间的距离而是预先索引化处理距离比较近的矢量群)、“管道搜索技术” (将粗略搜索和详细搜索进行阶段性组合)这3项技术,从而实现了计算处理的高性能化、高速化。其中,“矢量索引技术”是东芝最先开发的技术,摆脱了逐一对照咨询数据的矢量,而是对照已经过索引化处理的类似的矢量群,使得处理速度大幅提高。

东芝以模式挖掘、媒体识别的强化、大数据分析三个领域为中心,将此技术向解决方案服务领域推广应用。例如,可通过在大范围内设置的监控摄像头的影像瞬时发现指定人物,可使用机场等的水域监控高速对照国际通缉犯的人脸照片列表。

今后,东芝还将把此技术应用于深度学习,扩大与提高人工智能等相关的应用领域,为企业创造全新的价值。

此外,东芝已将此技术与向外扩展型数据库“GridDB®”组合,建立了可高速处理大数据、大规模媒体数据的世界首个适用高维矢量对照的数据库,计划将于2016年制作成产品。

返回 >>