入門／解説 SadTalker:任意の音声に合わせて口パクする動画を一枚絵から生成(Colab、Spaceあり)
１．SadTalker:任意の音声に合わせて口パクする動画を一枚絵から生成(Colab、Spaceあり)まとめ ・任意の音声に合わせて口パクする動画を一枚絵や動画から生成するAIであるSadTalkerが誰でも動かせる形で公開された ・Sa...
業界/分野
入門／解説 
入門／解説 Stable Diffusion v2-1-unclip:画像から意味的に似た画像を作成するImage2Imageとは異なる手法
１．Stable Diffusion v2-1-unclip:画像から意味的に似た画像を作成するImage2Imageとは異なる手法まとめ ・Stable Diffusion v2-1-unclipとは、Stable Diffusionの開...
入門／解説 text-2-video：プロンプトから動画を作成するColabとSpaceが公開
１．プロンプトから動画を作成するColabとSpaceが公開まとめ ・プロンプトとネガティブプロンプトからビデオを作成可能なモデルがDiffusersとAutomatic1111向けに公開された ・Stable Diffusionで作成した...
アプリケーション Spotlight：視覚情報のみを使ってアプリのユーザーインターフェースを理解して改善(2/2)
１．Spotlight：視覚情報のみを使ってアプリのユーザーインターフェースを理解して改善(2/2)まとめ ・Spotlightは、4つ下流タスクにおいて4つの従来手法を大幅に上回るスコアを達成する事ができた ・モデルが注目している領域を確...
アプリケーション Spotlight：視覚情報のみを使ってアプリのユーザーインターフェースを理解して改善(1/2)
１．Spotlight：視覚情報のみを使ってアプリのユーザーインターフェースを理解して改善(1/2)まとめ ・AIにユーザーインターフェースの構成を理解して貰う事は、知的なUI動作を実現するための重要なステップとなる ・個々のUIタスクを学...
ヘルスケア 2022年のGoogleのAI研究の成果と今後の展望～医療編～(2/2)まとめ
１．2022年のGoogleのAI研究の成果と今後の展望～医療編～(2/2)まとめ ・産科超音波検査は、質の高い妊産婦ケアの重要な要素ですが低・中所得国の女性の50%が超音波検査を受けられない ・低価格でバッテリー駆動の超音波診断装置とスマ...
アプリケーション chatGPTの上位互換であるGPT-4のリサーチブログの全訳とGPT-4で出来る事の紹介
１．chatGPTの上位互換であるGPT-4のリサーチブログの全訳とGPT-4で出来る事の紹介まとめ ・OpenAIが最新モデルGPT-4を発表。人間より能力が劣る部分もあるが専門的・学術的ベンチマークで人間レベルの性能を発揮 ・機械学習モ...
ヘルスケア 2022年のGoogleのAI研究の成果と今後の展望～医療編～(1/2)まとめ
１．2022年のGoogleのAI研究の成果と今後の展望～医療編～(1/2)まとめ ・消費者向け製品開発時の「発表してから繰り返し改善する」手法とは異なり、MLを医療に応用するためにはより慎重で厳格なテストが必要になる ・医療領域特有の統合...
量子コンピュータ 実用的な量子コンピュータの実現に必須の量子エラー訂正技術の最前線(2/2)
１．実用的な量子コンピュータの実現に必須の量子エラー訂正技術の最前線(2/2)まとめ ・QECが規模に応じて向上するようにするためナノ加工から最適化制御まであらゆる側面を改善した ・よりサイズの大きい距離5グリッドが距離3グリッドより信頼度...
量子コンピュータ 実用的な量子コンピュータの実現に必須の量子エラー訂正技術の最前線(1/2)
１．実用的な量子コンピュータの実現に必須の量子エラー訂正技術の最前線(1/2)まとめ ・Googleの第3世代プロセッサーに採用されている量子ビットでもエラー率が高く実用に耐える量子回路を開発するためには到底性能が足りない ・有用なエラー訂...
入門／解説 Stable Diffusion 2.1用のControlNetのセットアップ方法
１．Stable Diffusion 2.1用のControlNetのセットアップ方法まとめ ・ControlNetは元のモデルがStable Diffusion 1.5を使用していたためStable Diffusion 2.1がベースにな...
入門／解説 instruct pix2pix：プロンプトだけを使ってAIでイラストの修正を行う
１．instruct pix2pix：プロンプトだけを使ってAIでイラストの修正を行うまとめ ・思い通りの編集効果が出せない時はImage CFGやText CFGの値をチューニングすると期待通りの効果が出せる可能性がある ・本家githu...