ビッグデータが私たちについて知っていること

クレジット：

ビッグデータの世界は、広範なデータ収集と積極的な分析の世界です。未来を見て応援する人もいます。他の人は反乱を起こします。その背後には、私たちのほとんどが抱いている疑問が潜んでいます。それは本当に重要なのでしょうか?最近、大規模な商用データアグリゲーターである Acxiom が私について収集したものを見ることができ、それを知る機会がありました。

少なくとも理論的には、大規模なデータ収集はかなり重要です。大規模なデータセットを使用すると、ソーシャルネットワークマップを作成する個人間のつながりのリンク分析の種を形成することができます。これを良いことだと考える人もいます。しかし、どのような観点から見ても、私たちはビッグデータの大規模なデータセットの能力と有用性が増大している世界に住んでいます。

もちろん、懸念の多くは政府による徴収に関するものである。しかし、政府によるこの種のデータ収集がどれほど役立つかを評価するのは困難です。なぜなら、当然のことながら、ほとんどの政府データ収集プロジェクトは機密扱いであるからです。しかし、良いニュースは、民間部門の分野でこのプログラムの有用性をテストし始めることができるということです。民間部門の有用な類似物が公開されたばかりで、ビッグデータについて考えるためのレンズとしてそれを使用するのは適度に面白く、有益です。

アクシオムは、民間部門の最大のデータアグリゲーターの 1 つです。消費者に関する大規模なデータセットを収集して販売し、場合によっては政府に販売することもあります。そしてそれは何年もの間、舞台裏で静かに行われていた――ある作家がこう言った。消費者ゲノムのマッピング」これをかなり不吉なものと見る人もいました。他の人は単なる好奇心として。しかし、それは私たち全員にとって神秘的なものでした。

今まで。 9月には、データ巨人が一般公開データセットの一部。彼らは新しいウェブサイトを作成しました —hedata.com について— 消費者が企業が自分について収集したデータを確認できる場所。もちろん、自分自身に関するデータにアクセスするには、まず自分自身の身元を確認する必要がありました (運転免許証のコピーを提出する必要がありました)。しかし、一度それを行ってしまえば、大まかに言うと、その情報を確認することが可能になります。、会社があなたについて知っていると考えていたこと、そしてその知識がどれだけ現実に近かったのか。

私は興味があったので、自分自身を調べて、彼らが何を知っているのか、そして彼らがどれほど正確であるかを確認してみようと思いました。その結果は、時には興味深く、啓発的であり、ありふれたものでした。以下にいくつかの所見を示します。

まず、データ収集の基本的な目的は、私に物を売ることです。それが潜在的な売り手は潜在的な購入者について知りたいことであり、たとえばアマゾンが私について知りたいことです。そこで私はまず「世帯購入データ」、つまり最近何を購入したかというカテゴリを調べました。

結局のところ、私はすべてを購入していることがわかりました。食品、飲料、アート、コンピューター機器、雑誌、紳士服、文房具、健康製品、電子製品、スポーツ、レジャー製品などを購入します。言い換えれば、私の購買習慣は、アクシオムにとっては単なる未分化の塊に過ぎなかったのです。私が過去に骨董品を購入したことと、「高額商品」を購入したという表記を除けば、私が購入したほとんどすべてのものは、ある程度裕福な消費者なら誰でも買うようなものだったようです。

私が幅広い種類のものを購入したこと自体が重要だと思います。これほど広範囲に購入することで、私は「良い」消費者であると自認しています。しかし、それが重要な点である場合、データセットは私が実際に「どれだけ優れているか」についてのマークを外しているように見えます。たとえば、「支出総額」のカテゴリでは、過去 2 年間に支出した金額はわずか 1,898 ドルであると記載されていました。この公開フォーラムで私の支出習慣についてあまり明らかにしない限り、これは私の購買活動を大幅に過小評価していると言っても過言ではないと思います。

次のデータカテゴリ「世帯の関心」も同様に分かりませんでした。 Acxiom は、私がコンピューター、芸術、料理、読書などに興味があると正しく言いました。そこには、私が子供用品（孫のため）と美容用品とガーデニング（どちらも妻の興味で、おそらく私と混同されている）に興味があることが記載されていました。ここでも差別化はほとんどなく、細部よりも私の興味の広さが重要だと思います。したがって、消費者として、私に関して収集されたものを調べてみると、かなり異常なレベルの詳細しか明らかにされないようでした。

[ただし、私が Apple ユーザー J であるという意見には反対しなければなりません。私を知っている人なら誰でも、私が Windows OS を好むことを知っています。これも家庭内の混乱の結果であり、妻の Apple 使用を反映したものだと思います。余談ですが、私は、間違ったデータがあれば修正するようずっと求められていました。 Acxiom のデータを検証したくなかったので、これは行わないことを選択しました。それは Acxiom の仕事であり、私の仕事ではありません。また、他のマーケティング担当者に私を売り込む能力を強化することにはまったく興味がありませんでした。その一方で、私は、世界中に私に関する適度な量のデータがあれば、実際に私が購入したいものを提供される可能性があるという理論に基づいて、彼らが彼らのデータシステムから完全にオプトアウトするという申し出の機会を利用しませんでした。 ]

自分の「特性データ」、つまり私が誰であるかについてのデータを見始めたとき、物事はもう少し立ち入った（そして興味深い）ものになりました。いくつかの間違いは少し笑えるものでした。私の多くのドイツ人の友人たちに敬意を表して、私が自分自身について決して言うべきことではないのに、彼らは私をドイツ民族であると決めつけました（当然、私の姓のせいで）。そして彼らは私の誕生日を間違えました - 主はその理由を知っています。

しかし、彼らの洞察の一部は、少なくとも中程度に私のプライバシーを侵害するものであり、非常に正確でした。たとえば、アクシオムは私が結婚していると「推測」しました。彼らは私を共和党員として正確に特定しました（ただし、必ずしも有権者登録に基づいているわけではなく、むしろそれは私が「有権者登録または支持者として関係している」政党でした）。彼らは、私の家族に子供がおらず（全員成人しました）、私が中小企業を経営しており、頻繁に在宅勤務していることを知っていました。そして、彼らは私たちがどのような種類の慈善活動を支援しているのかを（アンケート、オンライン登録、購入活動から）知っていました。かなり正確だと思います。

最後に、私に関する最も正確なデータが、私の人生 (少なくともデジタル世界では) の最も簡単に測定でき広く報道される側面、つまり、デジタル金融市場に飛び込みたいという私の意欲と密接に関連していることは、まったく驚くべきことではありませんでした。 Acxiom は、私が複数のクレジットカードを持っており、定期的にそれらを使用していることを知っていました。私の世帯の総収入範囲をほぼ正確に理解していました[言っていません!]。

彼らは私の家のこともすべて知っていました。不動産と先取特権はすべて公の記録事項であるため、これは当然のことです。彼らは私が家の所有者であり、その評価額がいくらであるかを知っていました。データは、私が一戸建ての住居を持っており、そこに 14 年以上住んでいることを正確に示していました。それは私の家がどれくらい古いかを明らかにしました（ただし、1900年から1940年の間に建てられたというかなり不正確な範囲でした）。そしてもちろん、彼らは私の住宅ローンが何であるかを知っていたので、私の家の資産を正確に見積もっていました。

それで、私はこの演習から何を学んだのでしょうか？

ある意味、非常に少ないです。データベースには私を驚かせるものは何もなく、詳細レベルには多少不快感を覚えただけでした。実際、私はデータベースがどれほど詳細であるかよりも、そのデータベースがどれほど有益ではないかということに衝撃を受けました。結局のところ、私が読書好きであることを知って、人は何を学ぶのでしょうか?おそらくアマゾンは私に書籍の広告をプッシュするでしょうが、私がアマゾンから直接購入するので、彼らは私が読書好きであることをすでに知っています。もし彼らが私が SF 小説やロマンティックコメディー映画が好きだと主張していたら、そのレベルの詳細が私が誰であるかをより深く理解していることを示していたかもしれません。しかし、私が読んだこと自体は、私についてかなり些細な情報のように思えます。

もちろん、アクシオムがデータ保有の幕を完全に開けていないことは理解しています。「About The Data」で表示されるのは概要情報だけです。基礎となるデータ要素を確認することはできません。それでも、それが彼らにできる最善のことであれば…。

実際、私が最も強く印象に残ったのは、（ハンナ・アーレントの言葉を借りると）すべての平凡さでした。私のように、テロリストを特定したり病気を追跡したりする方法として、ビッグデータ分析に大きな期待を抱いている人もいます。プライバシーへの懸念が大きく、ビッグデータを見てビッグ・ブラザーに注目する人もいます。しかし、世界最大のデータアグリゲータの 1 つが保持する 1 つの大きなデータセット (部分的ではあるが) に飛び込むと、実際には少し退屈するだけでした。

おそらく彼らは私を安心させる方法としてそうしたかったのでしょう。もしそうなら、アクシオムは間違いなく成功した。