人工知能/機械学習

基礎理論

RMAB:誰に利用を促せば全体としてのサービス利用率が向上するか推定する試み(2/2)

1.RMAB:誰に利用を促せば全体としてのサービス利用率が向上するか推定する試み(2/2)まとめ ・クラスタ化する事で計算コストと個人情報収集の必要性を削減できた ・持ち回りで電話をかける手法に比べて利用が停止される累積率を32%削減 ・プ...
基礎理論

RMAB:誰に利用を促せば全体としてのサービス利用率が向上するか推定する試み(1/2)

1.RMAB:誰に利用を促せば全体としてのサービス利用率が向上するか推定する試み(1/2)まとめ ・スマートフォンで医療情報を届けるサービスは有用だが継続率が低下する ・利用者に電話をかける事は利用率向上に繋がるがサポート要員数は有限 ・R...
画像生成

DALL-E2やStable Diffusion等の拡散モデルの動作原理と説明がつかない事

1.DALL-E2やStable Diffusion等の拡散モデルの動作原理と説明がつかない事まとめ ・拡散モデルは画像に加えたノイズを除去して元画像を復元する事を学習をする ・学習済モデルは純粋なノイズから画像を復元できるようになりこれが...
学習手法

OptFormer:パラメータ名など言語情報を参考にハイパーパラメータを最適化(2/2)

1.OptFormer:パラメータ名など言語情報を参考にハイパーパラメータを最適化(1/2)まとめ ・OptFormerは様々な最適化アルゴリズムを正確に模倣できるようになった ・OptFormerは最適化目標値の予測とその不確実性の推定が...
学習手法

OptFormer:パラメータ名など言語情報を参考にハイパーパラメータを最適化(1/2)

1.OptFormer:パラメータ名など言語情報を参考にハイパーパラメータを最適化(1/2)まとめ ・ハイパーパラメータの最適化はモデルの性能を左右する可能性があるため大事 ・従来のハイパーパラメータ探索法はパラメータ数や範囲が同一である事...
入門/解説

Pop!_OSの22.04 LTSとCUDA11.7を新規にインストール

1.Pop!_OSの22.04 LTSとCUDA11.7を新規にインストールまとめ ・メインのSSDを換装した際にPop!_OSとCUDAを入れなおした際の記録 ・日本語キーボードの設定とNvidiaのドライバの再インストールは少し手間取る...
モデル

PaLM-SayCan:飲み物をこぼしてしまったからちょっと助けて!とロボットに頼めるようになる(2/2)

1.PaLM-SayCan:飲み物をこぼしてしまったからちょっと助けて!とロボットに頼めるようになる(2/2)まとめ ・ポリシーの学習には10台のロボットで11ヶ月間収集したデモデータ+αを使用 ・更にシミュレーションでオンラインデータを収...
モデル

PaLM-SayCan:飲み物をこぼしてしまったからちょっと助けて!とロボットに頼めるようになる(1/2)

1.PaLM-SayCan:飲み物をこぼしてしまったからちょっと助けて!とロボットに頼めるようになる(1/2)まとめ ・ロボットは明確なタスク定義を用いて学習しているので曖昧な指示が苦手 ・言語モデルは曖昧な指示も理解できるが現実世界を知ら...
AI関連その他

Rax:JAXで使えるランキングシステム用ライブラリ(2/2)

1.Rax:JAXで使えるランキングシステム用ライブラリ(2/2)まとめ ・RaxはNDCGを近似してノイズを加える事で微分と局所最適化問題を解決した ・他のJax関連ツールとスムーズに連携できるようにRaxは設計されている ・JAXのT5...
AI関連その他

Rax:JAXで使えるランキングシステム用ライブラリ(1/2)

1.Rax:JAXで使えるランキングシステム用ライブラリ(1/2)まとめ ・ランク付けは、様々な領域にまたがる中核的な問題で機械学習技術であるLTRが良く使用される ・比較的新しい機械学習フレームワークであるJAXで動作するLTRライブラリ...
学習手法

iterative co-tokenization:動画内でボウルに注がれた2番目の食材が何か答えられるようにする(2/2)

1.iterative co-tokenization:動画内でボウルに注がれた2番目の食材が何か答えられるようにする(2/2)まとめ ・反復的共同トークン化アルゴリズムは他の最新モデルよりも性能とサイズに優れる ・計算量も他の手法よりも低...
学習手法

iterative co-tokenization:動画内でボウルに注がれた2番目の食材が何か答えられるようにする(1/2)

1.iterative co-tokenization:動画内でボウルに注がれた2番目の食材が何か答えられるようにする(1/2)まとめ ・自動字幕、動画分析、動画を使った質問回答(VideoQA)など動画を使ったアプリは増えている ・Vid...