CMU设计了一个名叫reCAPTCHA的强大系统,让他们的电脑去向人类求助。具体做法是:将
OCR软件无法识别的文字扫描图传给世界各大网站,用以替换原来的
验证码图片;那些网站的用户在正确识别出这些文字之后,其答案便会被传回CMU。
根据Science的介绍,reCAPTCHA是利用CAPTCHA的原理(CAPTCHA的中文全称是
全自动区分计算机和人类的图灵测试),借助于人类大脑对难以识别的字符的辨别能力,进行对古旧书籍中难以被
OCR识别的字符进行辨别的技术。也就是说,reCAPTCHA不仅可以反spam,而且同时还可以帮助进行古籍的数字化工作(可以称为人工OCR)。不知道他们的灵感是否来自于
分布式计算的想法?据称正施用于 4 万多个网站,并已经帮助解决了来自扫描
文本文件的约 4 亿 4 千万个字词。
reCAPTCHA使用起来并不复杂,大多数独立
blogger所用的
wordpress,MT都有相应的插件支持。在注册一个
用户名后,输入你的blog域名(只支持域名和
子域名),就会的到一个Public Key,把他用在你所用的reCAPTCHA插件上。reCAPTCHA也支持多个站点。
安装成功后,用户评论就有了
CAPTCHA功能。每次CAPTCHA会显示两个单词让人来识别,其中一个是需要用户识别的难认词,另外一个是答案已知的真正的CAPTCHA 词。软件将能够正确识别CAPTCHA词的用户看作是人类,当CAPTCHA 词被正确识别出来后,程序会纪录用户对无法阅读的词的回答并将其添加到它的数据库中。这样就完成了一次人工的OCR识别。
为了改善软件的
精确性, reCAPTCHA 会将最困难的词发送给多个用户并挑选其中有相同答案的作为正确的答案。据说
准确率能够达到99%。
用户每使用一次这个程序,实际上就是在帮助数字重现1908年《
纽约时报》上的某一页,或者其它古书中的一页,这对
考古学具有重大的意义。
您肯定上过论坛吧?几乎所有正规的论坛都要求注册时输入
验证码,这是为了防止乱发垃圾广告的家伙用
注册机来恶意注册。这个源自美国卡内基-梅隆大学的发明被称为
CAPTCHA(用于区分
人类与电脑的
全自动图灵测试),因为
注册者需要辨识图片上七歪八扭的文字,而这项工作只有真正的人类才能完成。
要知道,全世界的
网络用户数以亿计,对个人来说,辨认文字所花的几秒时间微不足道,但如果将所有网民的力量利用起来,那便能完成难以想象的浩大工程,而这正是美国
宾夕法尼亚州匹兹堡市的
CMU研究小组正在做的事。
该小组受一家名为“
互联网档案馆”的
非营利组织委托,要将海量的古老书籍和手稿通过OCR(
光学字符识别)软件转化为电子文本,以方便电脑储存和查询。然而,由于原稿的质量太差,可怜的电脑每扫描十个单词就会错读一个,唯一解决的办法就是人工核对,而这样的工作显然不是一个人或一个小组可以胜任的。
为了提高用户辨识文字的正确率,他们往往被要求辨认两个单词,其中一个的答案已经知晓。这样以来,正确辨认出有答案的那个单词的用户,很有可能也会正确辨认另一个单词。有时候,CMU也会将一个未经辨认的单词提交给不同的用户,如果得到的是相同的答案,那这个答案便可以肯定是正确的。
由于许多人气极高的网站,如
Facebook、
Twitter和
StumbleUpon等,都采用了reCAPTCHA,CMU每天都可以处理大约一百万个单词。不过,按照这个速度,要电子化“
互联网档案馆”提供的所有文本,估计还需要400年。