美国间谍实验室希望在社交媒体上为每一张户外照片做地理标记

想象一下,如果有人可以扫描Facebook、Twitter和Instagram上的每个图像,然后立即确定每个图像的拍摄地点。将这些位置数据与照片中出现的人的信息结合起来的能力——以及与他们相关的任何社交媒体联系人——将使政府机构能够快速跟踪张贴宣传照片的恐怖组织。(而且,真的,几乎是其他人。)

这正是Finder的目标,Finder是情报高级研究项目署( IARPA )的一个研究项目,是国家情报专门研究机构主任办公室。

对于使用智能手机(以及某些消费类相机)拍摄的许多照片,默认情况下,地理位置信息与图像一起保存。除非地理定位服务关闭,否则该位置将存储在照片本身的Exif (可交换图像文件格式)数据中。如果你使用过苹果的iclood照片商店或Google照片,你可能已经通过地理标记元数据创建了丰富的生活模式地图。然而,当图像上传到一些社交媒体服务时,出于隐私原因,此位置数据被删除,并且隐私意识较强的摄影师(尤其是那些担心无人机可能攻击的摄影师)将故意禁用其设备和社交媒体账户上的地理标记。IARPA对Finder程序的描述指出,

进一步准备联邦调查局如何利用互联网搜索发现5名儿童色情受害者,这对情报分析人员来说是一个问题,因为试图在没有地理位置元数据的情况下识别照片位置的工作可能非常费时费力。过去的研究项目试图从大量现有的地理标志照片中估计拍摄图像的位置。这样的研究已经产生了像Google s PlaNet这样的系统——一个基于神经网络的系统,训练了1.26亿张带有Exif地理定位标签的图像。但这种系统在地理位置打开的情况下拍摄的照片并不多的地方崩溃了——游客倾向于不去的地方,比如叙利亚东部。进一步阅读:挖掘Apple服务、数据设备有多容易?Finder计划旨在填补照片和视频地理定位的空白,方法是开发基于分析师自身地理定位技能的技术,从各种公开来源获取图像,以识别地形要素或可见天际线。除了照片,系统还将从商业卫星和正交图像等来源提取图像。项目承包商——应用研究协会、BAE系统、Leidos (以前称为科学应用公司)和目标视频——的目标是能够识别照片或视频在任何室外地面位置的位置的系统。

Finder只是IARPA正在进行的几个图像处理项目之一。另一个叫阿拉丁视频的人试图从社交媒体视频片段中提取情报信息,给它们贴上关于内容的元数据。另一种称为深度联运视频分析( DIVA )的方法,侧重于检测视频中的活动,例如以可定义为危险或可疑的方式行事的人,从而可以同时监控大量监控视频。