アプリケーション OSS Vizier:Google社内で使われている人工知能チューニングツールが公開(1/2)
１．OSS Vizier:Google社内で使われている人工知能チューニングツールが公開(1/2)まとめ ・Google VizierはGoogle製品内の人工知能のハイパーパラメータを最適化するために使われてきた非公開システム ・そのGo...
python
アプリケーション 
入門／解説 InvokeAIを自分のWindows 10パソコンにインストール/セットアップする手順
１．InvokeAIを自分のWindows 10パソコンにインストール/セットアップする手順まとめ ・イラスト生成AIであるstable diffusionを動かすためにはソフトウェアとハードウェアを用意する事が必要になる ・NVIDIAの...
基礎理論 TensorStore：ペタサイズの高次元データを柔軟に効率的に処理する(1/2)
１．TensorStore：ペタサイズの高次元データを柔軟に効率的に処理する(1/2)まとめ ・最近の機械学習はペタ規模の巨大多次元データセットを操作する事も多い ・データは順番に読まれるわけではなく複数マシンに分散される事もある ・Ten...
入門／解説 機械学習を使ったWebアプリを5分で公開する方法
１．機械学習を使ったWebアプリを5分で公開する方法まとめ ・多くのデータサイエンティストは、Jupyter Notebook以外の環境で仕事をすることができない ・モデルをWebアプリなどに展開／監視するために必要なスキルセットが軽視され...
その他の調査 2022年以降のAI・データ分析の10大トレンド(3/3)
１．2022年以降のAI・データ分析の10大トレンド(3/3)まとめ ・製品開発の現場ではPythonの優位性が高まるようになるかもしれない ・リアルタイムデータ分析は2022年以降のデータ分析トレンドの1つ ・DataOps、MLOps、...
入門／解説 FugueSQL：PandasのDataFrameをSQL文で操作(1/2)
１．FugueSQL：PandasのDataFrameをSQL文で操作(1/2)まとめ ・Pandasは、Pythonで表形式データを扱う際に良く利用されるデータ構造 ・Pythonに精通していない人にとってSQLでDataFramesを操...
入門／解説 機械学習とデータサイエンスに有用なPythonパッケージ20(3/3)
１．機械学習とデータサイエンスに有用なPythonパッケージ20(3/3)まとめ ・Plotlyは視覚化ツールでとっつきにくいがMatplolibに追いつくかもしれない ・Scrapy、Beautiful Soupはクローリングやスクレイピ...
入門／解説 機械学習とデータサイエンスに有用なPythonパッケージ20(2/3)
１．機械学習とデータサイエンスに有用なPythonパッケージ20(2/3)まとめ ・Scipyライブラリは様々な科学技術計算用パッケージの土台 ・自然言語処理はPyTorchが強くTensorFlowは画像や動画に強い ・PyTorchはT...
入門／解説 機械学習とデータサイエンスに有用なPythonパッケージ20(1/3)
１．機械学習とデータサイエンスに有用なPythonパッケージ20(1/3)まとめ ・機械学習／データサイエンス関連タスクをPythonで行う際のお勧めパッケージ20選 ・機械学習エンジニアおよびPythonプログラマのキャリアの中で役立つと...
入門／解説 PyTorch Lightningとは？(3/3)
１．PyTorch Lightningとは？(3/3)まとめ ・PyTorch Lightningが抽象化と合理化の重点対象にしている事はfast.aiの反対 ・PyTorch Lightningは研究者用、fast.aiはデータサイエンテ...
基礎理論 ディープラーニング比較用のベースラインを利用しやすくする(2/2)
１．ディープラーニング比較用のベースラインを利用しやすくする(2/2)まとめ ・不確実性ベースラインでは、モデル、データセット、評価指標を選択可能 ・各ベースラインのトレーニング/評価パイプラインはPythonファイルに含まれる ・ベースラ...
入門／解説 Pythonを使用してMicrosoft ExcelとWordを自動連係(3/3)
１．Pythonを使用してMicrosoft ExcelとWordを自動連係(3/3)まとめ ・Wordファイルのひな型に画像とExcelから抽出を使ってデータを挿入してレポートを作成 ・動作させるためにはWordファイルのひな型と画像が必...