面部识别软件可帮助识别美国内战士兵

科学家开发了一种软件，该软件使用众包来帮助算法识别照片中的面孔，从而可以揭示历史记录中可能存在的近400万张内战时期图像照片的奥秘。

美国弗吉尼亚理工大学助理教授库尔特·路德 (Kurt Luther) 在参观亨氏历史中心在宾夕法尼亚州匹兹堡举行的名为 “宾夕法尼亚州内战” 的展览时，受到启发开发了内战照片侦探软件。

在那里，他偶然发现了内战时期奥利弗·克罗克斯顿 (Oliver Croxton) 的肖像，他的曾曾在宾夕法尼亚州第134号公司E服役，身穿下士制服。

路德说: “历史照片不仅可以告诉我们很多关于我们自己的家族历史的信息，而且可以更广泛地告知当时的历史记录，而不仅仅是阅读历史书中的事件。”

内战照片侦探项目允许用户上传照片，用视觉提示标记它们，并将它们连接到具有详细军事历史记录的内战士兵的个人资料。

photo Sleuth的初始参考数据库包含来自美国军事历史研究所和其他私人收藏等公共领域来源的15,000多个确定的内战士兵肖像。

在发布后的第一个月，有600多个用户向该网站贡献了2,000多张内战照片，其中大约一半的照片是身份不明的。

这些未知的照片中有100以上与特定士兵有关，专家分析发现，这些提议的身份中有85% 以上可能或绝对正确。

目前，数据库已经发展到4,000多个注册用户和8,000多个照片。

路德说: “通常，如果用户对主题领域没有具体知识，像这样的众包研究对新手来说是具有挑战性的。”

他说: “标记视觉线索并应用与兵役记录相关的搜索过滤器的逐步过程使这项侦探工作更容易获得，即使对于那些可能对内战军事历史没有更深入了解的人来说也是如此。”

在较大的候选池中，人员识别任务可能具有挑战性，因为存在较大的误报风险。

内战照片侦探背后的新颖方法是基于在大海捞针中找到针头的类比。数据管道有三个与干草堆相关的组件: 构建干草堆、缩小干草堆和在干草堆中找到针。

当结合在一起时，它们允许用户识别未知的士兵，同时降低误报的风险。

每当用户上传照片以识别照片时，照片都会添加到网站的数字档案或 “干草堆” 中，以便将来搜索。

上传后，用户会标记与照片相关的元数据，例如照片格式或铭文，以及视觉线索，例如外套颜色，人字形，肩带，衣领徽章和帽子徽章。

这些标签链接到搜索过滤器，以优先考虑最可能的匹配项。例如，一个标有 “猎角” 帽子徽章的士兵会暗示在步兵中服役的潜在比赛，同时隐藏骑兵或大炮的结果。

接下来，该网站使用最先进的人脸识别技术来消除外观非常不同的人脸，并通过相似性对剩余的人脸进行排序。标签和人脸识别步骤都缩小了干草堆。

最后，用户通过更详细地探索最高概率匹配来找到大海捞针。

带有平移和缩放控件的比较工具可帮助用户仔细检查可能的匹配项，如果他们确定匹配项，则将以前未知的照片链接到其新身份和传记详细信息。

通过诸如photo Sleuth之类的面部识别软件追溯历史内战照片，除了识别历史照片外，还具有广泛的应用。

该软件有可能产生新的方式来思考构建超越人脸识别的人识别系统，并利用人类和人工智能的互补优势