ロボット VLMaps：ロボットナビゲーションのための視覚-言語マップ(2/2)
１．VLMaps：ロボットナビゲーションのための視覚-言語マップ(2/2)まとめ ・VLMapsは、自然言語による記述で目印の地図座標を返すことが可能なためCode as Policiesで使う事ができる ・追加のトレーニングや微調整なしに...
業界/分野
ロボット ロボット VLMaps：ロボットナビゲーションのための視覚-言語マップ(1/2)
１．VLMaps：ロボットナビゲーションのための視覚-言語マップ(1/2)まとめ ・人が物理的な世界でロボットより優れたナビゲーションが出来るのは周辺環境を認知する地図を構築する能力を持つため ・視覚と言語の共同モデルを学習する事が増えてき...
入門／解説 新たに6モデルを追加したControlNet1.1が公開
１．新たに6モデルを追加したControlNet1.1が公開まとめ ・一週間くらい前に従来の8モデルの改良版＋6モデルを追加したControlNet1.1がリリースされた ・線画を自在に色塗りする事ができるLineart系の機能も追加された...
ヘルスケア AIが何に注目したのかを調べてがんの診断に有効な特徴を発見(2/2)
１．AIが何に注目したのかを調べてがんの診断に有効な特徴を発見(2/2)まとめ ・病理医は論文に掲載されたTAFの画像例を用いてこの特徴を学び理解するためのTAFのスコアリング・ガイドラインを作成した ・独立したデータセットにおいてTAFに...
ヘルスケア AIが何に注目したのかを調べてがんの診断に有効な特徴を発見(1/2)
１．AIが何に注目したのかを調べてがんの診断に有効な特徴を発見(1/2)まとめ ・がんを診断する時、最も重要なステップの1つは病理医が顕微鏡で腫瘍を観察し、がんのステージを決定し、腫瘍の特徴を明らかにする事 ・機械学習が病理画像中の腫瘍を正...
モデル PaLM-E:ロボットは邪魔をされても引き出しからポテチを取り出すくらいはできるようになっている(2/2)
１．PaLM-E:ロボットは邪魔をされても引き出しからポテチを取り出すくらいはできるようになっている(2/2)まとめ ・PaLM-Eはロボット操作タスクと視覚・言語タスクを共通の特徴表現で括ることで、汎化モデルを学習する新しいパラダイムを提...
モデル PaLM-E:ロボットは邪魔をされても引き出しからポテチを取り出すくらいはできるようになっている(1/2)
１．PaLM-E:ロボットは邪魔をされても引き出しからポテチを取り出すくらいはできるようになっている(1/2)まとめ ・ロボットモデルの規模拡大は一定の成功を収めているが、テキストや画像に匹敵する規模のデータセットがないので遅れをとっている...
入門／解説 rich-text-to-image：イラスト生成AI向けのプロンプトをリッチテキスト形式にして表現力を向上
１．rich-text-to-image：イラスト生成AI向けのプロンプトをリッチテキスト形式にして表現力を向上まとめ ・rich-text-to-imageはMicrosoftのWordのような文字の色を一部だけ変えたり、太文字にできるリ...
入門／解説 思わずクリックしたくなるようなアイキャッチ画像はイラスト生成AIで自動生成できるのか？
１．思わずクリックしたくなるようなアイキャッチ画像はイラスト生成AIで自動生成できるのか？ ・人目を惹くアイキャッチ画像を集めてイラスト生成AIをカスタマイズし、クリックを誘う画像をAIで生成しようとする試みを見かけた ・カスタムモデルを使...
アプリケーション segment-anything:画像内の全ての物体を画素単位で切り出す事が出来るMetaの基盤モデル
１．segment-anything:画像内の全ての物体を画素単位で切り出す事が出来るMetaの基盤モデルまとめ ・画像内にある物体を自動で認識して、切り出せるようにセグメンテーションマスクを作ってくれるSegment-Anything M...
ロボット Performer-MPC：Transformerをロボットに適用して機敏に自律走行させる(2/2)
１．Performer-MPC：Transformerをロボットに適用して機敏に自律走行させる(2/2)まとめ ・Performer-MPCはロボットに搭載可能で8msで応答し、830万のPerformerパラメータを備えておりリアルタイム...
ロボット Performer-MPC：Transformerをロボットに適用して機敏に自律走行させる(1/2)
１．Performer-MPC：Transformerをロボットに適用して機敏に自律走行させる(1/2)まとめ ・人間中心の環境では狭い空間を安全かつ効率的に走行する事や適度な距離を保つ事など複雑なルールがロボットに要求される ・Trans...