big data

モデル

肺癌を予測するための有望な一歩

1.肺癌を予測するための有望な一歩まとめ・肺がんでは年間170万人以上が死亡しており、世界中で最も死亡人数が多い致命的ながんの一つ・CTスクリーニングは死亡率を低下させるが診断が難しく経済的コストにつながる等の課題がある・この現状を改善する...
入門/解説

AI、データサイエンス、分析関連の2018年における主な発展と2019年の主な動向(2/2)

1.AI、データサイエンス、分析関連の2018年における主な発展と2019年の主な動向(2/2)まとめ・専門家による2018年のデータサイエンスと統計関連であった出来事のまとめ・AIのリスクは0を目指すのではなく現在の発生リスクと比較される...
ビッグデータ

ゴッホがカラーパレットを変更した理由を示す新しいデータ(2/2)

1.ゴッホがカラーパレットを変更した理由を示す新しいデータ(2/2)まとめ・ゴッホの色使いの変化はアルルの良い天気の影響を受けたためである可能性が高い・年代別に比較するとパリを去った後でオーヴェル=シュル=オワーズに行く前のアルルで変化して...
入門/解説

ゴッホがカラーパレットを変更した理由を示す新しいデータ(1/2)

1.ゴッホがカラーパレットを変更した理由を示す新しいデータ(1/2)まとめ・ゴッホは明るい黄色を多用する色使いで有名だが初期の作品はむしろ暗い色がメインだった・ある時点から色使いが急激に変化した事が昔から有名で2つの有名な説がある・視界が黄...
ビッグデータ

民間のビッグデータ取引所が始動

1.民間のビッグデータ取引所が始動まとめ・日経朝刊より10月1日より民間のビッグデータのデータ取引所が始動・民間団体データ流通推進協議会の事務局を務めるスタートアップ企業が運営・監視・JTBなど5社が販売側として参加し個人情報に近いデータも...
ビッグデータ

巨大データを効率よく分割するアフィニティ クラスタリング

1.巨大データを効率よく分割するアフィニティ クラスタリングまとめ・Googleが新しいクラスタリング手法の実績を公開・アフィニティクラスタリングをベースとした手法で巨大データを効率よく分割・GoogleMapのデータベースアクセス効率を大...
ビッグデータ

昨年、太陽系外惑星を発見した人工知能のソースが公開

1.昨年、太陽系外惑星を発見した人工知能のソースが公開まとめ・Googleが昨年、太陽系外惑星を発見した人工知能のソースを公開・未チェックデータが相当数あるのでこれを使って自身の惑星発見も可・しかし、学習用データがテラバイト級のビッグデータ...
ビッグデータ

ビッグデータとAIを使った混雑予測

1.ビッグデータとAIを使った混雑予測まとめ・Yahooの乗換案内で突然の混雑を予測できる機能がリリースされた・検索数の変動から異常を検知し、SNS情報から原因を推測するとのこと・都心以外では予測は出来ても回避行動は難しいかもしれない2.Y...
ビッグデータ

日本が目指すビッグデータ市場

1.日本が目指すビッグデータ市場まとめ・日本政府が2020年にビッグデータのポータルサイト開設予定・G20などで欧米にも参加を呼びかけ10億人超のデータベース構築を目指す・民間が有料でビッグデータを販売する事も視野に入れているがメリットは薄...
入門/解説

「AIが人間の仕事を奪う」は嘘なのか

1.「AIが人間の仕事を奪う」は嘘なのかまとめ・AIを使った新しい産業、オルタナティブ・データ産業の将来性が期待されている・AIによってなくなる職業もあるが増える職業もあるので悲観だけする必要はない・しかし、個人のライフプランがAIによって...
ビッグデータ

arxiv.orgの人工知能の論文を分類したい(2)

1.arxiv.orgの人工知能の論文を分類したい(2)・arxiv.orgの論文PDFは一括ダウンロードできるようにAmazonクラウド S3上に格納されている・PDF、Sourceファイル、その他を合わせると500GBを超える・全カテゴ...