クリス・ホワイトがジハード主義者の金融ネットワークを破壊し、武器市場を壊滅させ、ダークウェブを掘り出す検索ツールを使って性奴隷組織を壊滅させる前に、彼はまず、銀行のブラックホークヘリコプターの開いた銃扉から落ちないようにする方法を考え出さなければならなかった。
戦場で手を引いて助け合う必要はない、と彼は思った。
それは2010年9月のことでした。ホワイトは秘密諜報部隊の一員として、タリバンとアルカイダに対抗し、彼らの暗号化されたオンライン資金の流れを壊滅させ、アフガニスタン国民の心を掴むために、カブール本部郊外の前進基地に向かっていました。
細身でひょろ長い28歳のホワイトは、扱いにくいボディアーマーと、前面にダクトテープにマーカーで「ホワイト博士」と殴り書きされた膨らんだヘルメットをかぶった自分が、まるでデュカキスの滑稽な姿のようだと感じていた。離陸時の埃で、息苦しくなっていた。慣れないシートベルトにまだ苦労しているうちに、操縦桿が操作され、ホワイトはドアの熱い四角と、200フィート下の砂漠へと滑り落ちていった。
アフガニスタンは、ほぼすべての人にとって混沌とした危険な場所だった。米国主導の戦争が10年近く続き、米軍の死者は1000人に達し、民間人の犠牲者も計り知れないほどに増えた。オバマ大統領による3万人の増派が同年春の戦闘を激化させたのだ。事態は悪化の一途を辿るばかりだと多くの人が懸念していた。米国はパキスタン国境を越えたドローン攻撃をエスカレートさせていた。増派の立案者であるスタンリー・マクリスタル将軍は、スタッフと共に音楽雑誌で司令官を侮辱する発言をした後、失職に追い込まれ、米軍司令部は批判にさらされていた。
ほんの数週間前まで、ホワイトはケンブリッジでの夏を楽しみに、ビーチサンダルを履いた、ありえないほど若々しいハーバード大学のポスドク研究員の一人だったとは、今では想像もつかない。ヘリコプターの攻撃や戦場など、彼の頭の中にはなかった。広場ではラテを飲み、ロッククライミングに興じ、キャンパスの反対側では、工学応用科学学部の名誉あるフェローシップを得て、ビッグデータ、統計学、機械学習の交差点で研究していた。彼は学問の世界でトップの座を獲得し、それが永遠に続くと期待されていた。教授になり、研究室を立ち上げ、終身在職権を持つ象牙の塔からホワイトペーパーを盗み出す。
しかし、指導者からDARPAの週末カンファレンスに出席するよう依頼された。ホワイトは、DARPAが国防高等研究計画局（DARPA）の名称をアルファベット順に並べた羅列だと知っていた。国防総省の科学イノベーション部門であるDARPAは、バイオニック外骨格、暗視装置、M16、枯葉剤、GPS、ステルス技術、気象衛星、そしてインターネットを開発した人々だ。DARPAのプロジェクトは、優秀な人材、壮大なアイデア、そして巨額の政府資金を結集して生まれた。彼らの目標は、国家が技術革新による奇襲攻撃に備え、5年から10年ごとに戦略的優位性を備えた世界を変えるような技術を生み出すことだった。
ホワイトは渋々参加した。パワーポイントのプレゼンテーションと採用スピーチ、そして「DARPAらしい理論的な質問、例えば巨大レーザーを作れるかとか」くらいだろうと予想していた。ところが実際には、世界情勢の最高レベルからの説明を受けた。闇の勢力が存在することを知った。彼らの行為は残忍だったが、戦術と官僚機構は洗練されていた。彼らは殺戮と恐怖を振りまく一方で、勢力を拡大し、勝利を収めていた。さらに、ビッグデータを使ってこれらの勢力に対抗できる可能性もあると聞き、アメリカは一刻も早くその優位性を手に入れたいと切望していた。
丸一日が終わる頃には、天才博士課程のホワイトは、自分が恥ずかしいほど世間知らずであることを痛感していた。
戦争のことなんて何も知らない、と彼は思った。ホワイトは実務的な、作戦的な観点から、その詳細を知ったことは一度もなかった。その視点は、生々しく一見無関係に見える膨大な氷山のようなデータの意味を理解し、凍りついた情報の山から計画や方針を引き出す必要性をますます高めていた。
結局、アメリカは戦地でホワイトのような人物を必要としていた。
だがまず、ヘリコプターのドアから落ちてしまわないように、体を支えなければならなかった。ホワイトはなんとか座席に戻り、ベルトを掴んで、開いたドアにしゃがみこんで地上からの攻撃を睨みつける砲兵たちをじっと見つめた。このベテラン戦士たちはまるで『ミッション：インポッシブル』の登場人物のようだ、とホワイトは思った。
ホワイトも彼らのチームにいたが、役割は違っていた。DARPAの機密プログラム「ネクサス7」のオタクAチームの一員だったのだ。10年近くもの間、米軍はアフガニスタンで諜報活動を行っていた。提供元はCIA、国家安全保障局、GPS衛星、携帯電話の記録、戦場の報告書、デジタル金融ストリーム、監視カメラ、外国の傍受データ、あらゆるオンラインソーシャルネットワークからの大量の情報だとされている。こうした情報は、例えば標的型ドローン攻撃には役立ったが、ほとんどはデータの山でしかなかった。そして、アフガニスタンの国民が何を望み、何を必要としているのかを理解するために米国が活用していない情報は、さらにたくさんあった。当時アフガニスタンの米情報局長だったマイケル・フリン少将の言葉を借りれば、これらの見落とされた手がかりは「膨大だが正当に評価されていない情報」だった。
この問題を解決するため、DARPAはホワイト氏と他の12名の技術者を戦闘部隊に派遣し、この膨大なデータ資源をより有効に活用させました。技術者の中には、衛星データや地上監視データなどを融合させ、交通の流れを可視化する者もいました（あるいは、交通の流れが悪く、近くにタリバンの検問所や路肩爆弾がある可能性を示唆するデータも）。ホワイト氏のチームの任務は、タリバンとアルカイダの資金源のデジタル痕跡を突き止めることです。
彼らのデータマイニングツールは戦争のニーズに特化しており、昇進、勲章、表彰状を獲得するほどの成功を収めた。ホワイトは最終的にこれらのツールとそこから得た教訓を母国に持ち帰り、犯罪捜査に革命をもたらし、パナマ文書のような大量ダウンロードを調査するジャーナリストの力となり、麻薬、銃、そして人間が売買され、違法なビットコインが数十億ドルも流通する暗黒のデータ領域に光を当てることになる。近い将来、これらのツールは、より情報に通じた民主主義への道を切り開くかもしれない。
ブラックホークの開いたドアに向かって滑りながら、ホワイトはこれで終わりだと思った。しかし、それは始まりに過ぎなかった。
ホワイトは吃音症のようなビューティフル・マインドタイプの天才ではない。むしろ、ひっそりと隠れたオタクだ。私が初めて彼に会ったのは昨年の11月、シアトルのダウンタウンにあるホテルのロビーだった。フロントデスクで見かけた、鮮やかなブルーのパタゴニアのウィンドブレーカーを着た、しなやかで黒髪のハンサムなオクラホマ出身の彼は、どこか小柄で寡黙なヒップスター、カール・セーガンのような印象だった。つまり、彼は聡明で情熱的なだけでなく、親切で不思議なほど普通でもあるのだ。こうした資質は、天賦の才を持つ天才少年という彼の役割とは相容れないように見えるかもしれない。しかし、この見かけ上の矛盾こそが、ホワイトの秘訣なのだ。彼は熟練したアシュタンガヨガの実践者で従軍経験もあり、著名な仏教徒や伝説のハッカーたちとファーストネームで呼び合う仲の元政府職員であり、そしてコンピュータースクリーンをじっと見つめる孤独な座り込みの科学に身を捧げる熟練の武道家でもあるのだ。
こうした一見矛盾する状況だからこそ、現在34歳のホワイトは、専門家同士の架け橋となることができる。彼は、コードをひたすら書き上げる天才でも、次の大型IPOを模索するアナリストでも、握手を交わすCEOでも、山積みの情報から計画を立てる戦時中の将軍でもない。彼は、こうしたあらゆる人々と対話し、理解し、それぞれの強みを組み合わせ、個々では誰も想像できなかったようなマトリックスを作り上げることができる人物なのだ。
現在、そのマトリックスは、インターネットをデータ宇宙を探索するための、より興味深く、便利で、民主的なツールにすることに関係しています。そして、それは彼が計画していたキャリアではなかったことが判明しました。高校卒業後、ホワイトはハードサイエンスの分野に転向し、クラスメートを驚かせました。その後、医学部進学を諦めて電気工学に転向したことで、家族と自身を驚かせました。統計学とコンピューターサイエンスの才能でさらに彼らを驚かせ続け、機械学習とビッグデータが人間の言語と交差する、稀有な学問の道へと進みました。
「私たちの世代の優秀な人材の中には、インターネットを使って広告主を豊かにしている人もいます」とホワイトは言う。「しかし、インターネットの繋がりは、思いやり、互い、自分自身、そして世界を理解するための、前例のないメカニズムでもあります。これ以上に興味深いことがあるでしょうか？」
しかし、ホワイト氏がハーバード大学のポスドク研究員を終えてDARPAのブリーフィングに赴く頃には、オクラホマ州立大学で電気工学の学位を取得し、国土安全保障省のフェローシップを獲得し、ジョンズ・ホプキンス大学の言語音声処理センターで博士号を取得していた。さらに、マイクロソフト、MIT、IBM、そしてグーグルでも働いた経験があった。しかし、ホワイト氏によれば、これらの経験はどれも、アフガニスタンでの任務の「冗談抜きの厳しさ」に備えるためのものではなかったという。
「本当に驚きました」とホワイトは言う。「怖かったし、ストレスも溜まりました。でも、仕事にすごく集中していました。何か重要なことに貢献しているってことは分かっていました。でも、人生が劇的に変わるなんて、全く気づいていませんでした。」
当時、DARPAも変化の真っ只中にあった。新長官のレジーナ・デュガンは、国防総省の官僚機構を率いてNexus 7を指導していた。彼女は複雑な問題をクラウドソーシングで解決する力を信じ、10年後に軍を一変させる可能性のある技術を空想するのではなく、DARPAがより積極的な戦時中の役割を担うことを望んでいた。議会委員会で述べたように、彼女は軍の指導者たちにDARPAが戦場に参戦していることを知ってほしいと考えていた。
Nexus 7はその先端となる。この取り組みは、DARPAのプロジェクトマネージャーであるランディ・ギャレットが設計し、デューガンが監督し、デビッド・ペトレイアス将軍が承認した。チームは2つのグループに分かれ、それぞれ約100人のコンピューター科学者、社会科学者、諜報専門家が参加した。大きなグループは米国に留まり、コードの作成や軍事データセットのマッシュアップ作業に取り組んだ。ホワイトは小さなグループに所属し、アフガニスタンの軍司令部テントで肩越しに監視していた。
タリバンとアルカイダはアッラーの名の下に残虐行為を犯す軍事組織でしたが、宗教ではなく金銭で動く犯罪組織の様相を呈するようになっていきました。金銭はあらゆる弾丸や爆弾の費用を賄い、兵士たちの結束を強め、村々の友好関係を維持し、情報や防衛、車両や燃料、そして時には人々の心、そして時には知性までも買い取っていました。
他の犯罪行為と同様に、その資金のほとんどは、物理的な窃盗、武器や麻薬などの商品の販売、そして身代金、奴隷、性的行為を目的とした人間の売買といった犯罪行為から得られたものです。
これらの取引とそこから得られる利益は、合法的な企業やダミー会社を通じて隠蔽され、マネーロンダリングされていました。こうした行為の一部は現実世界で行われていました――実際の薬物、実際の人物、実際の札束などです。しかし、ダークウェブやソーシャルメディアを通じた商品の売買から、ビットコイン取引や暗号化アカウントを通じた収益のフィルタリングに至るまで、こうした犯罪行為はすべて、ホワイト氏がキャリアをかけて研究してきたまさにそのデジタル世界であるオンラインで、より容易に実行されるようになってきています。
アフガニスタンに駐留する連合軍の将軍たちは長年この事実を知っていたが、だからといって細部まで全てを把握していたわけではない。ネクサス7のより大きな役割は、膨大な米国諜報情報の中から有用な針を見つけることだった。将軍たちがアフガニスタン国民のニーズをより深く理解するのに役立つあらゆる情報も含まれる。ホワイトのチームは、資金、銃、麻薬、そして人身売買の出所に焦点を当て、これらの取引がどこで、なぜ行われ、誰が関与していたのかを解明した。ホワイトは、米国本土でコーディング作業を行うDARPAチームと、アフガニスタン駐留軍司令官のニーズとの仲介役を務めた。
「残念ながら、それは多くの営業電話をかけ、大物司令官たちに何度も会談を申し込むことを意味しました。本当にストレスでした」とホワイトは言う。「私はあまり社交的ではありません。でも、それが仕事だから、我慢するしかないと分かっていました。」
ホワイトがなぜ仕事を邪魔しているのかも知らず、気にも留めない戦地の人々と会話を交わすのは、ブラックホークの離陸よりも険しい訓練であり、不安に苛まれる悪夢だった。ホワイトはくだらない話もスポーツの話もできず、正直言って、最初は特に人付き合いが好きでもなかった。最悪なのは、彼が民間人だったことだ。軍服も、軍事訓練も、階級も持っていなかった。階級とは、誰が誰のために時間を割く必要があるかを、襟や袖に簡潔に記す記号のようなものだった。
「戦争に関して一つ言えることは、人々が本当に忙しいということだ」とホワイト氏は言う。
彼は特に軍人らしい風格も持っていなかった。他の連中が筋トレに励んでいる間、ドクター・スパゲッティマンと呼ばれた小柄なヨガの男はレスリングマットの上でストレッチと呼吸に励んでいた。まるで、ブーヤの世界でダウンドッグをこなすアイビーリーグ出身者のようだった。滞在期間が9日から90日に延長され、その後1年余りかけてさらに国内での任務に就くうちに、彼はDARPAのネクサス7を担当する国内シニアリーダーとなり、この軍の世界の住人となった。彼は早くから「ドクター」を頻繁に呼ぶようになり、父親からもらった恥ずかしいほど派手な腕時計が、政府の服装規定では星条旗のように機能することを学んだ。そして、レクリエーションの時間に格闘技のスキルを使って大男を尻もちにさせることが好印象を与え、戦士たちを友人にすることを学んだ。それはまた、ホワイトと彼のチームが仕事をする上でも役立っていた。具体的な評価基準は機密扱いだが、大統領の報告書と引用文は明確だ。Nexus 7 は、人々の心と精神、そして命を守る戦いに意義ある貢献を果たした。
アフガニスタンでの任務を終える頃には、ネクサス7は指揮官たちからも尊敬を集め、スパゲッティマン博士はDARPAで1つ星将軍に相当する階級に就いていました。ネクサス7の功績は、国防総省と財務省からも表彰状や勲章を授与されました。中でもホワイト氏のチームは、「主要な戦略および作戦上の課題に対する独自の価値ある洞察」をもたらした「大規模データ分析フレームワーク」の構築が称賛されました。ホワイト氏自身もDARPAの功績として認められました。
しかし、その漆とリボンには代償があった。クリス・ホワイトは、カブール行きのジェット機に乗った時の、目を輝かせた大学院生とはもはや違っていた。「結局、ハーバード大学を中退し、長年の恋人も失いました」とホワイトは言う。しかし、最も変わったのは彼の世界観だった。
ホワイトは砲弾ショックを受けたとは言わなかった。ドアを叩き壊したり、爆発物が散乱した奇妙な地面を踏んだりしたわけではない。しかし、初めて敵が、そして人間が、何を成し遂げられるのかを目の当たりにしたのだ。
任務は終わり、戦争から一歩踏み出す時が来た。しかしホワイトは、すべての戦いを後にする覚悟はまだできていないと感じていた。間もなく、戦争の境界を越えた戦いに挑む機会が訪れるだろう。
ホワイト氏が追跡に協力したデータは、命を危険にさらした人々を、女性や子供が商品として売買される場所へと導いた。そしてホワイト氏は、それらの女性や子供たちがいかに脆弱であるかを目の当たりにした。彼はまた、こうした犯罪がアフガニスタンだけに存在していたわけではないことを知った。そして、彼らを見つけるのに飛行機は必要なかった。モデムが必要だったのだ。
あなたが知っているインターネットは、インターネットそのものではありません。あるいは、インターネットのすべてではありません。まず、Bing、Google、Firefox、Siriといったインターネットがあります。Gmailやブックマークが置かれ、猫砂やフットボールのスコア情報も掲載されている場所です。そのデータ量は200テラバイトを超えると言われており、これは米国議会図書館の印刷資料をすべてデジタル化した量よりも大きいです。膨大な量の情報ですが、インターネットそのものではありません。それはインターネットのほんの一部に過ぎません。
推定値は様々ですが、「表層」ウェブ、つまりオープンウェブは、ウェブ上のデータの5～20%を占めています。残りは、ほとんどのクローラーがアクセスしたりインデックス化したりできない場所に存在します。一部のデータは「ディープ」で、ソーシャルメディアや掲示板などのパスワード保護された場所、あるいはKayakのようにユーザーインタラクションに応じて変化する動的ウェブサイト（本のページというよりはアプリのようなウェブサイト）などにあります。残りのウェブは「ダーク」です。
しかし、ダークウェブはamazon.comへ行く途中で通り抜け忘れたような道ではありません。主なアクセスツールはTor（元々はThe Onion Routerの略称）です。オニオンルーティングは、安全な諜報通信を確保するために米国海軍研究所によって開発されました。暗号化された情報を一連の匿名ノードに中継することで、事実上追跡不可能な状態を実現し、Cookieやターゲット広告に追跡されたくないウェブを閲覧できるようにします。そして、監視や権威主義的な支配を恐れる人々にとっての安息の地となっています。
ダークウェブは、政府関係者、サイバーリバタリアンの知識人、ISISの計画委員会、内部告発を行うハクティビスト、アラブの春の計画者など、誰をも差別しません。ダークウェブの自由市場は規制されておらず、匿名で売買される商品に特化しています。ダークウェブでは、違法、不快、暴力的な商品からわずか3クリックで、あるいは多くの場合、サブウェイのジャレッドと同じ牢獄に閉じ込められることさえあります。おそらく、中国産ホワイトヘロイン、偽造EUおよび米国パスポート、不規則なスーパーノートベンジャミン、ペルー産フレーク、DMT、ハードキャンディー、ピンクメス、そしてハッキングされた有名人のヌードセルフィーの投棄サイトなども見つかるでしょう。
あなたがこの闇の世界を毎日訪れる推定 250 万人のうちの 1 人なら、冷笑しているでしょう (または、この説明をオンラインで非難しているでしょう)。ダークウェブのカタログに完全または正しいものなどあり得ません。このモグラ叩きゲームは、ある人には解放感を与え、他の人にはフラストレーションを与えます。また、犯罪組織やテロ組織にとっては、コミュニケーション、宣伝、または人間を含むあらゆるものの売買を行うのに最適な環境です。あなたがこれを読んでいる今も、世界中で推定 2,100 万人が人身売買の被害に遭っています。その半数以上が女性と女児です。100 万人以上が子供です。約 4 分の 1 が性奴隷として売買されています。人身売買の被害者のうち救出されるのは 100 人に 1 人だけです。これは急成長しているビジネスです。利益率が高くリスクが低いため、人身売買は地球上で最も急速に増加し、最も儲かる犯罪の 1 つです。国連は最近、人身売買で年間 1,500 億ドルの利益が上がると推定しました。
ビジネスとして見れば、猫砂やクルーネックセーターなどの販売とほとんど変わりません。消費者が商品を購入するには、見つけられる必要があります。「Tidy Cats」のメーカーは看板を出せるかもしれませんが、人身売買業者は顧客が見つけられるほど目立つ存在でありながら、当局に追跡されないほど隠れている必要があります。当然のことながら、性売買データの大部分はディープウェブやダークウェブ、あるいはテラバイト単位の表層ウェブに隠されています。これは、消費者向けのウェブ検索エンジンで見つけられることを望む合法的なビジネスとは全く異なる方法です。
BingやGoogleなどの検索エンジンが結果をランク付けする正確な公式は、一般の人には知ることが許されていない秘密のアルゴリズムによって支配されています。しかし、2つの要素が支配的です。他のページからリンクされているページは上位にランク付けされ、検索用語と一致するキーワードを含むページも上位にランク付けされます。これが、WikipediaのページがほとんどのGoogle検索で上位に表示される理由です。これらのページは、他の多くの重要でないソース（ブログなど）を引用し、また引用されています。しかし、性的人身売買業者はWeb検索で見つかったくありません。インデックスを混乱させるために、彼らは他のリンクから外れた1回限りの広告で宣伝します。彼らはチャットルームの奥深くやクロールできないソーシャルメディアの投稿に隠れます。彼らは検索エンジン最適化を避けます。キーワードの代わりに、写真やコードワードを使用します。現時点では、インターネット上には売春の性的広告が数十万件あると考えられます。通常の検索エンジンを使用する刑事にとって、これらの広告を見つけたり、Googleのルールに従わない犯罪者を立件するのは非常に困難です。
クリス・ホワイトにルールを変えるチャンスが与えられた。
かつてホワイトは、安全な学問の道を捨て、知的な軍事冒険へと身を投じた。2年後、その両方が終わりを迎え、30歳になった彼は新たな道を切り開かなければならなかった。傍から見れば、彼の人生は理にかなった進歩に見えたかもしれない。しかしホワイトにとっては、まるでウサギの穴に落ちて、そこから這い出てきたかのようだった。そして、DARPAからプログラムマネージャーの職をオファーされた。彼はまさにワンダーランドを見つけたのだ。
「かつては『何かになりたい』と思っていました」とホワイト氏は言う。医師や主任研究者といった、尊敬される立場に就きたいと思っていた。「でも今は、『何かを成し遂げたい』と気づいたんです」
DARPAのプログラムマネージャーとして、ホワイトはプロジェクトに名前をつけることができた。そして彼が作りたかった「もの」とは、インターネット全体をマイニングできる新しいタイプの検索エンジンだった。
アフガニスタンでは、ビッグデータのマイニングやその結果の可視化のための既製のツールはほとんどなく、それらは主に専門家や特定のプロジェクト向けに開発されていました。しかし、もし既製の部品を誰でも使えるようにできたらどうなるでしょうか？スーパー検索エンジンの部品を組み立てる「エレクターセット」のようなもので、様々な方法で組み立てられるのです。
その結果、当初は検索エンジン エレクター セットを構築する 3 年がかりの、伝えられるところによると最大 5,000 万ドルのプロジェクトが生まれました。この検索エンジン エレクター セットは、民間企業と大学の 17 の異なるユニットによってコード化された、おそらく 20 個の新しいスーパー検索エンジン部品のセットであり、Firefox、Safari、Google、Bing で可能なものよりも広範囲かつ透明性の高い方法で、インターネット全体で利用可能なデータと対話し理解するための、より優れた方法を提供することを目的としていました。
彼らはそれを「Memex」と名付けました。これは「記憶」と「索引」を組み合わせたもので、先見の明のある元科学研究開発局長ヴァネヴァー・ブッシュが1945年に発表した論文に由来しています。Memexは、アイデアと事実のつながりを視覚化するツールです。もしそれがうまく機能すれば、人間の研究者に超人的な洞察力を与えることができるでしょう。
ホワイト氏の説明によると、インターネット上のデータは、写真、メール、ブログ、通話記録、GPSの軌跡、ソーシャルメディアの投稿など、本質的には現実世界で起こった出来事の記述である。「調査員の目標は、記述を掘り下げ、遡って分析し、現実世界で起こった出来事を理解することです」とホワイト氏は語る。
従来の Web ブラウザでは、これは簡単な作業ではありません。
Googleに電話番号などの検索語を入力すると、2万件もの検索結果が表示される。これらは、キーワードヒット数と各ページ間のハイパーリンク数順に並べられた、表層ウェブ上のページへのリンクだ。唯一の選択肢は、検索結果を一つずつクリックし、各ページを一つずつ確認して、探している答えが見つかるかどうか確認することだ。「モンタナ州の州都はどこか？」といった情報を探すにはこれで十分だが、複雑な調査となると、ホワイト氏はそれをゴルフコースの芝刈り機で芝を刈るようなものだと例える。「逐次的な作業なので、間違いが起きやすい」と彼は言う。「もっと良い方法があるはずだ」
ホワイトのMemexプロジェクトはポートフォリオ型のアプローチとなるだろう。ダークウェブに潜り込み、そこに存在する隠れたオニオンサイトをすべてリストとして提示するツールもある。これはこれまでは難しすぎて手が回らないと考えられていたことだ。また、ディープウェブやダークウェブのオンラインフォーラム（通常は検索不可能）の膨大なフローをインデックス化し、分類するツールもある。ソーシャルメディアのトレンドを監視したり、写真を関連付けたり、手書き情報を読み取ったり、ウェブページからデータを抽出して結果をデータマップにクロスインデックス化するツールもある。
理論上、ホワイトの検索エンジン「エレクターセット」は、現実世界の様々な用途に役立つ可能性があります。DARPAのプロジェクトとして、少なくとも一つの用途で有効性を証明する必要がありました。理想的には、そのテストアプリケーションは、研究者が世界をより良くし、国をより安全にするための助けとなるような、現実世界の豊富なデータに基づく問題に取り組むものとなるでしょう。
ホワイト氏は、アフガニスタンで知って衝撃を受け、「本質的に恐ろしい」と感じた犯罪、つまり人間の売買をアメリカの法執行機関がターゲットにできるよう支援することに、メメックスのテスト アプリケーションを重点的に活用することを決定しました。
バージニア州アーリントンにあるMemex研究所のコンピューター画面で、現プログラムマネージャーのウェイド・シェン氏が、Memexツールの一部が性犯罪捜査向けにどのように改良されているかを実演している。まずはDatawakeだ。通常、手がかり（例えば売春婦に関連するメール）を追う刑事が、その情報をGoogleに入力すると、完全一致は得られず、おそらく2万5300件の結果が返される。そして、そのうちのほんの数件を開くだけで、新たな手がかりとなる可能性のあるものを見つけ、それを検索バーに入力して、次の検索へと進む。この方法で2万5300件のヒット全てを検索するには、刑事が12時間勤務で2週間かかることになる。
Datawakeは、同じGoogle検索結果をくまなく調べ、ページから情報を抽出し、視覚的に整理します。画面上では、結果は一連の円として表示されます。円の間の線は、データ間のつながりを示しています。例えば、メールと一緒に繰り返し表示される可能性のある名前、電話番号、写真などです。探偵は25,300件の検索結果すべてを一目見ることができ、他の結果を一切見落とすことなく、最も有望な手がかりを追い始めることができます。
このようなツールのおかげで、地方検事局は起訴に至った性犯罪事件の事件記録を遡り、既に証拠として確立されている電話番号、氏名、メールアドレス、住所などを再利用できるようになった。Memexのツールは、これらの古い事件から検索語を得て新たな事件を構築し、犯罪的共謀を立証し、刑務所にいる男たちと現在も活動を続ける性犯罪組織を結びつけることを可能にしている。
最も有用なツールの 1 つが TellFinder です。これは、性的な広告から相互参照情報を抽出して整理します。広告の共通点、つまり作成者の「tell」を見つけることで、同じ作成者または組織の広告をグループ化し、捜査員がビジネスの範囲をより深く理解できるようにします。あるデモでは、シェン氏が、州全体の人口密度バブルのように表された 869,000 件の現在の広告を表示します。彼は町や管轄区域にズームインし、日付を遡ってスクロールすることで、広告が掲載された場所と、時間の経過とともに消えていった場所を明らかにします。地図には、広告に共通する電話番号、電子メール、住所、さらには背景が同じ写真も表示されます (背景に同じモーテルのカーテンと壁紙があると、刑事が性的人身売買サイトにつながる可能性があります)。シェン氏は、数回クリックするだけで、ある女性の広告が国中をどのように移動したかを示し、彼女が人身売買された可能性のある経路を明らかにします。
Digと呼ばれる別のツールは、相互参照された情報をAmazonの検索結果のようなリストに整理します。横に表示される主要なカテゴリと用語を使って、調査員は検索結果を絞り込み、探している情報だけを表示できます。DigはTellFinderの画像検索機能をさらに強化しています。「これは同じ問題を別の視点から見るというだけです」とシェン氏は説明します。「そして、これらは単なる例であり、これらのツールの使い方は一つではありません。」
Memex のツールの中には、ダーク ウェブで同様のタスクを実行するように特化されているものもあり、通常は検索できないサイトをクロールして特定の種類の情報を探します。
ホワイト氏はシアトルで、もう一つのツールを見せてくれた。Aperture Tilesだ。これは、これまで管理不可能だった膨大な情報量――地図上の数十億もの動くデータポイントを想像してみてほしい――を管理可能にする。彼は実演で、性的人身売買に関連するモーテルの住所と、その住所付近で行われたオンライン投稿に付随する位置情報を組み合わせた。（「無料アプリで許可を与える時、その商品となるのは自分自身と自分のデータだということを、ほとんどの人は気づいていない」と彼は指摘する。）
多くの場合、パターンが浮かび上がってきた。広告を投稿する人々は、アメリカ各地の都市から都市へと車で移動し、数日ごとに自宅から出ることを決めていた。これはおそらく、法執行機関の監視を逃れるためだろう。アメリカで頻繁に投稿する人の中には、東南アジアでも頻繁に投稿する人もいた。ホワイト氏によると、これが何を意味するのかは徹底的な調査をしなければ解明できないが、国際的な性的人身売買との関連を示唆していると推測するのは妥当だろう。
2014年12月19日、マンハッタンのミッドタウンにある売春宿の外、フロイラン・ロサドはアイドリング中のバンに座っていた。助手席には妊娠中の16歳の少女が座っていた。30代後半のロサドは、ハロウィンに囚人のような格好をした自分と家族の写真をFacebookに投稿したり、ミラーサングラスをかけ、髪をコーンロウに編み込み、ペンシルゴートでしかめっ面を浮かべた自撮り写真を投稿したりするような男だった。ロサドはポン引きだった。ホテルの中には、18歳の娼婦「フローラ」がいた。潜入捜査官が、ありきたりな売春のおとり捜査で彼女を逮捕したのだ。
しかし、実際には彼女は被害者だったのです。
フローラは捜査官に対し、里親の家から追い出され、行く当てがなかったと話した。ロサードは彼女を引き取り、売春行為を始めた。捜査官たちはすぐに、ロサードがソーシャルメディアを使って少女や女性を売春に誘い込む達人になっていたことを突き止めた。既に自分の支配下にある若い女性を、15歳ほどの若い少女とFacebookで連絡を取らせていたのだ。誘い込んだ後は、暴力、薬物、金銭の約束で彼女たちを従わせていた。ある時、彼は言うことを聞かない少女の首を絞めた。メールの中では、ある少女を「新入り」と呼んだ。彼は彼女たちの写真をバックページの性風俗広告に掲載し、連絡先電話番号を知らせていた。電話に出てデートの予約を取り、外で待って分け前をもらっていた。
ロサドに対するより強力な訴追を行うため、マンハッタン地区検事局のサイラス・R・ヴァンス・ジュニアは、より多くの売春婦を追跡しようとした。フローラは彼女たちの氏名、電話番号、居場所を知らなかった。また、ロサドがどのようにデジタル上の足跡を隠蔽していたかも、詳しくは知らなかった。例えば、彼が売春婦のオンライン広告を定期的に削除・変更していたこと、名前を変えていたこと、使い捨ての携帯電話を交換していたことなども知らなかった。そのため、ロサドがニューヨーク市ライカーズ島刑務所から電話で売春をしていたにもかかわらず、捜査官たちは彼をより大規模な売春組織と結びつける証拠を何も持っていなかった。
彼らは2014年に彼らの事務所と協力し始めたMemexに目を向けた。アナリストたちはDigとTellFinderの初期バージョンを使い、削除された広告と現在の売春広告からロサドの目に見えない痕跡を掘り出し、写真、名前、メール、電話番号、さらに多くの少女を即座に結びつけた。ロサドが刑務所でビジネスを続けると、捜査官たちは彼が新しい電話番号を言うのを盗聴し、それをMemexに入力して他の番号につなげることができた。すぐに彼らはさらに多くの被害者を特定して所在を突き止め、15歳から18歳までの10人のティーンエイジャーを含むロサドと売春組織との関連を示す証拠を構築し、事件は確固たるものになった。2015年9月15日、ロサドは逮捕からほぼ1年後、性的人身売買と売春助長の罪で懲役7年から14年の判決を受けた。現在、マンハッタン地方検事局は人身売買に関するすべての捜査に Memex を採用しており、2016 年の最初の 6 か月だけで 4,752 件の潜在的な事件を審査しました。
On a drizzling Tuesday this past November, I met Chris White at his new office in Microsoft's town-size campus in Redmond, Washington, about a dozen miles northeast of Seattle. White's directions led along route 520 to a parking garage and a modern glass-fronted building marked with the number 99, and inhabited almost exclusively by Ph.D.'s.
It was after-hours when White brought me past security and into the maze of offices filled with prototypes and experiments, and glass walls covered in equations. White had left DARPA in May 2015, just before his appointment there ended (the organization employs its researchers for only a limited amount of time in order to keep new ideas flowing and the talent pool fresh). But again, White felt that he'd been popped out of a rabbit hole and faced a crossroads.
At first he considered starting a company that would use automation and artificial intelligence to allow companies to do their own data analysis and online-security work. The idea was good enough to get interest from venture-capital groups. But then White thought about life as a startup CEO, the toll on his life with his fiancée (White married this past March), and the limited impact it would have on the world.
And so, instead of burning a decade being a CEO, White opted to make a thing—and an existence—that he considered simpler, yet bigger.
As a principal researcher in Microsoft's Special Projects division, he gets to build on his work with Memex—making affordable, user-friendly, data-exploring and visualization tools for businesses (and journalists, and everyone else).
“The bar is even higher,” he says. “The question is no longer 'Can we make something that works?' It's 'Can we make something that works for a billion people?'”
White hopes his new project will, among other things, change people's relationship with big data, and each other. It could also impact our democracy in ways no one has ever imagined.
Before I left, White flipped open his Lenovo ThinkPad X1 and opened a tool called Newman, a data-visualization tool that shows patterns in an email history—in this case, Jeb Bush's email from eight years as Florida's governor. In seconds, Newman sorted 250,000 emails into a nodal flower, showing who Bush had emailed and how often, who was CC'ed, where those were forwarded, and how quickly those emails were responded to. It was, in effect, an interactive map of influence and decision-making, the guts of democracy made transparent. White easily could have run the program over time to show relationships with lobbyists or donors, turning the candidate's record round and round, like an apple in the hand.
“In a knowledge economy, this is power,” White says. “Right now there are only a few browsers, and they're the only interface to the world's information. With Memex, we thought we could really do something about that.”
Memex tools can show the movements of ISIS recruits or propaganda; links between shell companies and money laundering; the flow of illegal guns or labor; and heat maps showing the frequency of social-media mentions for words and ideas, and the intention around them, live across the map. They've been sought out to track an Ebola outbreak in West Africa, to understand how people moved in and out of hot zones, and to help the White House determine how to respond to the outbreak. They can also track and map moods and public sentiments as they ripple and change across the planet.
It's not difficult to imagine how such transparency might inform our understanding of global opinions far beyond our limited views of Twitter or our personal Facebook feed. Even easier to imagine is the threat such transparency poses to the current Internet power and profit model—the advertisers who depend on paid experts to rank or review their product, or use SEO tricks or money to steer Internet searches toward their goods, and search companies that make their money selling access to that influence. Or dictatorships using those same techniques to influence and control citizens. Or even a democracy, where a handful of tech companies control the information flow—making it hard for even the most benevolent corporations to avoid an invisible bias in what tech users see, the information on which they base their choices and opinions.
If White is correct, Memex is just the beginning of a generation of tools that can help save the Internet from becoming a glorified shopping mall. That's good. It's much better than what we have now. But will it be profound? Will it make us better citizens, or more-realized human beings?
White watches me a moment, then almost smiles.
“These are very interesting and very important questions,” he says.
And ones he has only begun to shine his light on.
