インフラ Google Colabのランタイムをリモートホストに設定する
１．Google Colabのランタイムをリモートホストに設定するまとめ ・Google Colabのランタイムを自宅内のリモートPCに変更する際のメモ ・リモートに直接接続する事は出来ないのでsshでポートフォワードする事になる ・Ten...
jupyter
インフラ インフラ Google ColabのランタイムをGCEに設定する
１．Google ColabのランタイムをGCEに設定するまとめ ・Google ColabのランタイムをGCEのインスタンスに変更する際のメモ ・Google Cloud SDKとDeep Learning VMの組み合わせだと楽に変更で...
入門／解説 クラウドでインスタンスを新しく構築した際にpython用にviを設定
１．クラウドでインスタンスを新しく構築した際にpython用にviを設定まとめ ・viはunix用のシンプルなエディターなので操作方法を覚えておくと色々と役に立つ ・.vimrcの設定を行わないと非常に使いにくままになってしまうので設定をし...
入門／解説 データサイエンティスト向けPython仮想環境ガイド
１．データサイエンティスト向けPython仮想環境ガイドまとめ ・機械学習モデルを開発する際は他の人が作ったライブラリ等を利用させて貰う事が多い ・他の人が作ったライブラリは特定のVersionのpythonやライブラリを必要とする場合があ...
その他の調査 2020年の日本のデータサイエンティストの給与水準
１．2020年の日本のデータサイエンティストの給与水準まとめ ・データサイエンティストの給与水準は米国が最も高くドイツと日本の企業がこれに続く ・生データのままでは日本のデータサイエンティストの2/3以上が最低時給以下で働いている ・特殊事...
入門／解説 データサイエンス用のライブラリトップ５
１．データサイエンス用のライブラリトップ５まとめ ・有益なデータサイエンスライブラリ５点について書かれた記事を別観点からもう一つ紹介 ・Pandas Profiling、NLTK、TextBlob、pyLDAvis、NetworkXの５ライ...
入門／解説 データサイエンスと機械学習用のPython人気ライブラリ2020年版
１．データサイエンスと機械学習用のPython人気ライブラリ2020年版まとめ ・データサイエンス、データ視覚化、機械学習のためのPythonライブラリ上位38選 ・一般的なデータサイエンス用ツールを対象とし、ニューラルベースと研究用途は対...
インフラ Google Colabのパワーユーザー向けのヒント
１．Google Colabのパワーユーザー向けのヒントまとめ ・Colabを使うと機械学習の学習者や実践者がハイエンドなGPUにもアクセス可能になる ・メモ用Colab、実行時間測定、一部実行、クラス定義確認、Flask連携、Tensor...
インフラ Google Colabをプロ仕様に設定する
１．Google Colabをプロ仕様に設定するまとめ ・ColabをVSCodeと組み合わせて使う方法や巨大ファイルのロードなど実務的使用例 ・サイズの大きなファイルで時間のかかる学習を行っている人にとって参考になる ・本投稿はまだ全部の...
インフラ Google Colabの使い勝手を向上させる10の秘訣
１．Google Colabの使い勝手を向上させる10の秘訣まとめ ・気軽にブラウザでPythonやライブラリを試せるGoogle Colabを更に便利に使うためのヒント ・ファイルのアップロード、ダウンロード、Googleドライブのマウン...
入門／解説 nbdev:探索的プログラミングをPythonで実現する開発環境(4/4)
１．nbdev:探索的プログラミングをPythonで実現する開発環境(4/4)まとめ ・Pythonが持つ特に強力な動的機能IDEでは活用する事が難しいがJupyterは活用可能 ・nbdevはJupyterの上に構築されているためPyth...
入門／解説 nbdev:探索的プログラミングをPythonで実現する開発環境(3/4)
１．nbdev:探索的プログラミングをPythonで実現する開発環境(3/4)まとめ ・Jupyter Notebookは「探索的」部分では優れているが「プログラミング」の部分では優位性がない ・既存の素晴らしいツールを活用しつつ、必要に応...