ビッグデータ

5/5ページ

ビッグデータとAIを使った混雑予測

  • 2018.02.21

1.ビッグデータとAIを使った混雑予測まとめ ・Yahooの乗換案内で突然の混雑を予測できる機能がリリースされた ・検索数の変動から異常を検知し、SNS情報から原因を推測するとのこと ・都心以外では予測は出来ても回避行動は難しいかもしれない 2.Yahoo!乗換案内のビッグデータを使った混雑予測機能 「月間4000万人の利用者を誇るYahoo!路線情報の膨大な検索データをもとに、異常による混雑度を […]

日本が目指すビッグデータ市場

  • 2018.02.20

1.日本が目指すビッグデータ市場まとめ ・日本政府が2020年にビッグデータのポータルサイト開設予定 ・G20などで欧米にも参加を呼びかけ10億人超のデータベース構築を目指す ・民間が有料でビッグデータを販売する事も視野に入れているがメリットは薄そう 2.官民ビッグデータ開放 日経新聞の2月20日記事より。日本政府が国、地方、民間が持つビッグデータの開放に乗り出すとの事。用語や書式を統一して官民の […]

EUのデータ保護規制が5月に施行

  • 2018.02.19

1.EUのデータ保護規制が5月に施行まとめ ・EUが今年5月に個人データ保護の規制を導入予定 ・遵守しない企業には巨額の罰金が課せられる ・EU外に個人情報を持ち出すにはかなり手間がかかるようになる 2.GDPRの概要 EUが2018年5月25日、EU一般データ保護規則(GDPR)という新たな個人データ保護の規制を導入する予定。このGDPRを遵守しない企業は最大2000万ユーロ(約26億円)または […]

ビッグデータを集めるためのクローラー学習本の選び方

  • 2018.01.12

1.ビッグデータを集めるためのクローラーの学習本レビューまとめ ・人工知能や統計解析の学習用データを集めるにはクローラーを作る必要がある ・色々なクローラー本が出版されているが言語、レビュー、出版に注目しよう ・クローラーはクローラーだけでなく様々な技術を知っておく必要がある 2.クローラーとは何か? インターネットの様々なページから必要な情報を自動的に取得するプログラムの事をクローラーと言う。な […]

e-stat

  • 2016.05.22

国勢調査など、政府の公的データが欲しくなったらまずe-stat。 https://www.e-stat.go.jp/SG1/estat/eStatTopPortal.do 慣れないとデータのダウンロードさえ一苦労だけど、各省庁のWebサイトから探す必要がないだけでも大変ありがたい。 e-statで扱っていないデータ、例えば、月次単位の最新の人口、世帯数推移は各市区町村のWebサイトから探す必要があ […]

1 5