ビッグデータの時代 − あなたの行動は監視されている？

ビッグデータの時代私たちの行動は監視されている？

2013年特別公開講座

社会情報学専攻　飯尾淳

2013年7月13日 Copyright © Jun Iio 2

本日のアジェンダ● 「ビッグデータ」って何だ？● あらゆるものがデータ化されている● 集めたデータをどう使うか● 事例紹介● 問題点


ビッグデータとは● ビッグ（big）データ（data）

– 「大きなデータ」？

● ビッグデータの3つの特徴（3V）– 大容量（Volume）– 多様さ（Variety）– スピード（Velocity）


大容量（Volume）● 社会，企業，組織

– さまざまなシーンでデータが生まれる● ビッグサイズ

– 数テラバイト，数ペタバイトキロバイトメガバイトギガバイトテラバイトペタバイト

1000倍 1000倍 1000倍 1000倍


多様さ（Variety）

テキストデータ，数値データ，音声，ビデオ，地理情報データ，etc …


スピード（Velocity）● リアルタイム性

– すぐに反応すること，待った無し

– 様々なデータに応じて瞬時の判断が求められる

● 映画– 「マネーボール」


なぜビッグデータなのか


日々，収集されるデータ


企業はなぜポイントを与えるのか● 割引サービス？● 会員の囲い込み戦略？● データ収集

– 「誰が，いつ，どこで，何を買ったか」

● ポイント配布はそのためのコスト


集めたデータの使い途● 商品の売れ行きを観察● どの商品を，誰向けに，どこで，販売● 生産量の調整● 販売の調整● この商品は増産しよう● この商品は廃止しよう● 売れ行きデータ以上に細やかな配慮が可能● 誰向けに広告 / 販売戦略を立てるためのデータ


「この商品を買った人は … 」


レコメンデーション（推薦）

会員001会員002会員003会員004会員005会員006会員007

商品

01商

品02

商品

03商

品04

商品

05商

品06

商品

07商

品08

商品

09商

品10

商品

11

● ● ●● ●

● ●●

● ●

●●

●●●？


レコメンデーション（推薦）

会員001会員002会員003会員004会員005会員006会員007

商品

01商

品02

商品

03商

品04

商品

05商

品06

商品

07商

品08

商品

09商

品10

商品

11

● ● ●● ●

● ●●

● ●

●●

●●●

？


先日，こんなことがありました


先日，こんなことがありました● Amazon.co.jp から

「こんなゴミ箱をオススメします」というメールが届く！

● ゴミ箱なんて要らないのに …


大実験（携帯電話のデータ収集）● 実験参加者数 1,798名

– （うち有効データ送信者数 1,363名）● 実験規模約1ヶ月×東京23区を中心とする首都圏全域● 取得データ量

– 位置情報ログ 2,403,060件– 開閉操作ログ　850,412件


集めたデータの視覚化

住んでいる場所の分布会社や学校の分布

事前のアンケートでこれらの情報は尋ねていません


街の顔はそこに集まる人で決まる？


モバイル空間統計


問題点●私たちのプライバシーは？– 「誰が」– 「いつ」– 「何を」– 「どこで」

● 全て把握されている？

● 1984– ジョージ・オーウェル


「ログイン」してますか？


プライバシーに対する配慮●個人情報保護法● 「匿名化」に関する技術的研究開発● ビッグデータ活用企業のモラル● サービス提供（利便性）とプライバシー侵害（危険性）のトレードオフ

ビッグデータの時代 − あなたの行動は監視されている？

Education

AWS でのビッグデータ分析オプション · であり、多くのお客様が AWS でのビッグデータ分析ワークロードの実装に成功しています。導入事例の詳細については、「ビッグデータ活用における

ビッグデータ時代のテキストマイニング～マーケティング活用事 …ftp.msi.co.jp/userconf/2012/pdf/muc12_THA_1.pdf · ビッグデータ時代のテキストマイニング

ビッグデータの計算科学第6回 · 2016-11-08 · ビッグデータの計算科学第6回 (2014年11月05日) 2 / 53 準備：グラフとはビッグデータと特異値分解—

HDInsight によるビッグデータソリューションの開発

ビジネスリテラシーとしての統計ビッグデータと統計の活用

バズワード「ビッグデータ」第四歩目！昨年のTechForumでは、バズワード「ビッグデータ」第三歩目！としてビッグデータの活用事例から見たストレージの分類と未来像をご紹介

総合都市交通体系調査におけるビッグデータ活用の手引き【 …5 2. ビッグデータの特徴と活用の考え方 2.1 ビッグデータの種類都市圏における人の位置情報が把握可能なビッグデータを表2-1

ビッグデータ処理技術の進化と、エッジヘビー ...ビッグデータ処理技術の進化と、エッジヘビーコンピューティング西川徹 (株) Preferred

ビッグデータの活用の在り方について - Ministry of …最近のICTトレンドにおけるビッグデータの位置づけ 4 国内外の主なシンクタンク

米国政府のビッグデータへの取り組み...25 米国政府のビッグデータへの取り組み科学技術動向 2012年9・10 月号 2-1 ビッグデータとはビッグデータとは、必ずしも明

ビッグデータ利活用入門 - BODIK...6 目標 1. ビッグデータの特徴ビッグデータ利活用で取り扱われるデータの特徴を、説明することができる

人工知能－内部監査の専門家が考慮すべきことand Auditing Big Data（ビッグデータの理解と監査）」を参照のこと。このガイダンスは、 IIA会員は無料で、非会員は有料でIIA

内部監査の成熟度をベンチマークする...26 月刊監査研究 20 16．（No.516）内部監査の成熟度をベンチマークする ― 世界中の監査計画と監査プロセスのハイレベルな調査

ビッグデータ活用の5つのワナと経営視点での戦略 …ビッグデータの経営視点における3つのポイント「ビッグデータの定義」の議論より「価値ある活用」が重要

アドバンスドホワイトカラーのエンゲージメント監査 P wapps

改訂版監査役監査チェックリスト ③監査役監査チェックリスト ③ 1．「監査役監査チェックリスト③」の作成にあたっての基本的な考え方

東京講演ビッグデータの活用

JFEエンジニアリングにおけるAI・ビッグデータの … › research › giho › 045 › pdf › 045-12.pdfJFE エンジニアリングにおけるAI・ビッグデータの活用

システム監査を知るための小冊子 - SAAJ · 入門編システム監査の実施に当たっては、監査の目的に基いて監査の範囲を定め、監査テーマを設定します。

オールインワンサーバー監視ツール WebSAM … ヒストリー監視 •BOMのヒストリーログを監視 Ping監視 •Ping(ICMP ECHO)疎通監視ポート監視

3.2.3 ビッグデータの有効利用例②：ゲノム解析・バイオ ......78 3.2.3 ビッグデータの有効利用例②：ゲノム解析・バイオインフォマティクス

ビッグデータの活用に向けた組織のあり方•データマイニングコンテスト（カグル）などクラウドソーシングデータベースの強化 •データ化（Datafication)、データ量の増大（ビッグデータ）

特集ビッグデータの活用と個人情報保護特集ビッグデータの活用と個人情報保護特集1 広がるビッグデータの流通・利活用と課題 1 特集2

ビッグデータ・オープンデータ活用の現状と国土交 …...ビッグデータ・オープンデータ活用の現状と国土交通分野〜ビッグデータ活用概要編〜

医療ビッグデータ・コンソーシアム政策提言 20161 医療ビッグデータ・コンソーシアム政策提言 2016 医療ビッグデータの抱える3つの課題と

ビッグデータ利活用入門 - BODIK · 目次（ビッグデータ利活用入門） ... ビッグデータを支える技術ビッグデータ利活用を支えるictの進展や技術的なキ

ビッグデータの活用の在り方について最近のICTトレンドにおけるビッグデータの位置づけ 4 国内外の主なシンクタンクによる調査において、いわゆる「ビッグデータ」については、2012年以降

改訂監査基準の概要－監査上の主要な検討事 …...改訂監査基準の概要－監査上の主要な検討事項（KAM)の導入ー The Japanese Institute of Certified

465...- 465 - 3 監査・検査・審査（1）定期監査監査の期間監査の対象監査の範囲監査結果指摘等件数改善報告件数 26. 4.7 ～26.5.13 選挙管理委員会事

System Advantages for You 製品機能紹介資料ƒ’ストリー監視 BOMのヒストリーログを監視その他監視：3種類インストールソフトウェア変更監視

ログ分析からセキュリティ監視まで：Oracle Management Cloudで実現するIT運用データのビッグデータ分析 [Oracle Cloud Days Tokyo 2016]

ビッグデータビジネスへの期待と課題 - Japan Cloud...ビッグデータビジネスへの期待と課題 M2M・ビッグデータWG シンポジウム「M2M・ビッグデータの将来像」

CLUSTERPRO MC ProcessSaver for Linux テンプ …...3-2. WebLogic の監視事例 P.19 3-3. Tomcat の監視事例 P.22 3-4. JBoss の監視事例 P.24 3-5. Apache HTTP Server の監視事例

監査ログ...監査ログ •監査ログ（1ページ）監査ログ監査ログを使用すると、監査用の別のログファイルにシステムの設定変更が記録されます。監査ロギング（標準）

ビッグデータ時代のオントロジー技術€œBIG DATA” INITIATIVE: ANNOUNCES $200 MILLION IN NEW R&D INVESTMENTS （背景3）国策としてのビッグデータ 6