Argyle：用Facebook和NSA的“间谍”工具打击网络欺诈

Tom Ryan想要打造能在大规模移动网络、股票交易服务、电子商务网站和其他在线服务中识别犯罪行为的产品。于是他向两个家喻户晓的组织求助：Facebook和NSA。

他并没能敲开Facebook的大门，更不用说NSA了。但他确实采用了由这两个组织开发的两个软件。这两个软件曾帮助Facebook和NSA在流向其数据中心的海量数字信息中畅游。

Ryan采用的NSA工具名为Accumulo，极有可能在NSA以国家安全的名义广泛监控互联网流量的活动中扮演了关键角色；他还配合了名为Presto的Facebook工具来使用，该工具曾被用来快速分析人、广告以及其他所有事情在Facebook上的行为。Facebook和NSA都开源了自己的软件，意味着这些工具可以无限制地向全世界提供。

Ryan在硅谷创办了一家名为Argyle Data的小创业公司，他担任CEO。在过去16个月中，他和他的工程师团队使用Accumulo和Presto开发了能从海量在线操作中揪出欺诈行为的软件，而且已经部署在了不少公司中，比如在欧洲运营移动电话网络的英国电信巨头沃达丰。

Argyle Data是驱动现代商业的数据挖掘技术最近发展的缩影。在过去数年间，Google和Facebook等大互联网公司以及NSA等打造了一系列新软件，能在数十、数百乃至数千台机器中存储和分析数据。现在，这些软件公司开始流向商业世界的其他部分。Ryan表示：“作为一家创业公司，我们想要在新的工具而不是旧的工具上打造软件。”

这一运动的典范是名为Hadoop的软件系统，该软件最初由Google完成。但现在Hadoop已经让位给能以更快速度运行的工具了。Hadoop是一个“批处理”系统，你给它一个任务，等一段时间后就能知道答案。更新的系统在速度上更快。

Argyle Data的软件就是最好的例子。通过使用机器学习和深度包检查技术，它能分析流经一个网络的所有数据包，而如果一块数据符合特定指标，它就能把这块数据存入海量数据库Accumulo中。“它能让我们每秒扫描数千万到数亿笔交易”，Ryan说道。随后，各个公司可以使用Presto来进一步分析数据，近乎实时地进行特定检索。

数据分析创业公司Adatao的CEO Christopher Nguyen曾经在Google内部参与过类似的“大数据”软件。他表示，Arygle的方法并不是快速分析如此海量信息最好的方法。但他同意，这是朝“实时”大数据工具前进的一部分，这些工具也包括由加州大学伯克利分校开发的Spark以及其他诸多软件。

同时，Argyle的故事强调了这一运动的另一面。比如，NSA很有可能用Accumulo来监控我们的在线隐私，而随着类似工具让收集和分析海量数据变得更容易，隐私可能会进一步被侵犯。毕竟，沃达丰就在使用Argyle的软件分析欧洲无线网络中的数据流。

电子前哨基金会的助理技术人员Seth Schoen表示，法律通常允许公司同时使用Argyle和其他工具来打击欺诈。但最终，这些工具对隐私的影响要看每个公司的政策。好消息是，各个组织可以密切控制Accumulo，能清楚地知道谁访问了哪些数据。Ryan表示道：“有得必有失。隐私如此重要。但数据越多，分析的结果就越好。”

via wired