Tags

ActivityWatch¶

• ActivityWatchで活動を記録する

Apache Beam¶

• Apache BeamでPyTorchを動かしてみた

Argo¶

• Argo Workflowsのsuspend機能を使った非同期実行

Argo Workflows¶

• Argo Workflowsのsuspend機能を使った非同期実行

Artifact Registry¶

• image streaming について調べてみた

Bazel¶

• モノレポビルドシステムBuck2
• Pantsでリモートキャッシュを使う

BigQuery¶

• PrivateなCloud SQLにBigQueryを接続する

Buck2¶

• モノレポビルドシステムBuck2

BuildJet¶

• BuildJetでGitHub Actionsの費用を半分にする

CI¶

• GitHub Actions で inputs の値を使うと concurrency の group 設定がうまくできなかった
• GitHub Actionsでsecretsを使う

CI/CD¶

• actを使ってみた
• Cloud Buildを非同期で実行する
• Cloud BuildでGitHubのSSH鍵を使う
• Dockerのビルド結果をキャッシュする
• BuildJetでGitHub Actionsの費用を半分にする
• GitHub Actionsのキャッシュを削除する
• GitHubでCIのステータスを取得・変更する
• 【GitHub Actions】git diff の差分を高速に取得する方法
• GitHub Actionsのあれこれ
• Pantsでリモートキャッシュを使う
• Pantsのテストをshard分割して実行する
• Pantsで差分テストをやってみた
• [GitHub Actions] paths-filterを使ってファイル、ディレクトリの変更を検知する
• GitHub Actionsでpytestのカバレッジを出力する
• Ruffを使ってみた

CLI¶

• GitHub Releasesからバイナリをインストールする
• Pydanticでコマンドライン引数をパースする

Cargo¶

• cargo generateを触ってみた
• Cargoプロジェクトのバージョンを取得する

Cloud¶

• 既存のインフラストラクチャをIaCで管理するツールTerraformerとその関連ツール

Cloud Build¶

• Cloud Buildを非同期で実行する
• Cloud BuildでGitHubのSSH鍵を使う

Cloud Run¶

• Cloud Runデプロイコマンドでシークレットを扱う
• image streaming について調べてみた
• Cloud Runをterraform applyした時のハングを解消する

CloudSQL¶

• PrivateなCloud SQLにBigQueryを接続する

Code Review¶

• Pull Requestを分析してレビュー効率とチームパフォーマンスを可視化する

Compute Engine¶

• Pub/Subを触ってみた

Container¶

• image streaming について調べてみた

Dataflow¶

• Apache BeamでPyTorchを動かしてみた

Debug¶

• py-spyを使ってPythonのプロファイリングをする

DevOps¶

• actを使ってみた
• cookiecutterとcruftとcopierでプロジェクトテンプレートの更新を取り入れる
• Pull Requestを分析してレビュー効率とチームパフォーマンスを可視化する
• Googleのソフトウェアエンジニアリングを読んだ
• tfupdateを使ってterraformのバージョンを一括で更新する

Docker¶

• Dockerのビルド結果をキャッシュする
• docker-slimを触ってみた
• GitHub Actions 内でコンテナを動かす
• image streaming について調べてみた
• Pantsでwhlを作る
• pexでマルチステージビルドを行う

Emulator¶

• Pub/Sub Emulator を使ってみた

FaceBook¶

• モノレポビルドシステムBuck2

FastAPI¶

• Google Cloud API Gatewayのスキーマ定義をFastAPIで作成する
• FastAPIでOpenAPI定義を生成する
• FastAPIのプロファイリング
• Pex内部のGunicornを使ってWebAPIを起動する

GCE¶

• MIGのVMを一時停止/停止する

GCP¶

• Cloud Buildを非同期で実行する
• MIGのVMを一時停止/停止する

GCS¶

• eventarcを触ってみた

GKE¶

• image streaming について調べてみた
• 【kubernetes】Numaflowでストリーミング処理を行う

GPU¶

• kfp localの実行時にGPUを使う
• ScaleneでPythonのプロファイリングを行う
• Slide

Git¶

• GitHub の認証が面倒だったので gh cli で楽をしたい
• GitHub CLI拡張でPull Requestのメトリクスを収集する
• 便利なGitコマンド
• ディレクトリのgit logを表示する
• git管理のrootディレクトリを取得する
• Source Repositoryを触ってみた
• Terraform で Git コミットの SHA を取得する

GitHub¶

• actを使ってみた
• changelogを自動で生成したい
• Cloud BuildでGitHubのSSH鍵を使う
• Pull Request の番号を取得する
• GitHub の認証が面倒だったので gh cli で楽をしたい
• gh cliでtokenを出力する
• GitHub CLI拡張でPull Requestのメトリクスを収集する
• GitHub の Release から asset を取得する
• GitHub Actionsのキャッシュを削除する
• GitHub Actions で inputs の値を使うと concurrency の group 設定がうまくできなかった
• GitHub Actions 内でコンテナを動かす
• GitHub Actionsでoutputへの出力をPythonで行う
• GitHubでCIのステータスを取得・変更する
• GitHub Actionsでsecretsを使う
• GitHub Actionsのあれこれ
• GitHub Releasesからバイナリをインストールする
• MkDocsを使ってGitHub Pagesに公開する
• Pull Requestを分析してレビュー効率とチームパフォーマンスを可視化する
• Pull Request Templateを作ってレビューのラリーを減らす
• GitHub Actionsでpytestのカバレッジを出力する
• Slide

GitHub API¶

• changelogを自動で生成したい
• gh cliでtokenを出力する

GitHub Actions¶

• actを使ってみた
• Dockerのビルド結果をキャッシュする
• Pull Request の番号を取得する
• gh cliでtokenを出力する
• BuildJetでGitHub Actionsの費用を半分にする
• GitHub Actionsのキャッシュを削除する
• GitHub Actions で inputs の値を使うと concurrency の group 設定がうまくできなかった
• GitHub Actions 内でコンテナを動かす
• GitHub Actionsでoutputへの出力をPythonで行う
• GitHubでCIのステータスを取得・変更する
• 【GitHub Actions】git diff の差分を高速に取得する方法
• GitHub Actionsでsecretsを使う
• GitHub Actionsのあれこれ
• MkDocsを使ってGitHub Pagesに公開する
• [GitHub Actions] paths-filterを使ってファイル、ディレクトリの変更を検知する
• GitHub Actionsでpytestのカバレッジを出力する

GitHub CLI¶

• GitHub CLI拡張でPull Requestのメトリクスを収集する

GitHub Pages¶

• MkDocsを使ってGitHub Pagesに公開する

Go¶

• 依存ライブラリがメンテナンスされているか調べる

Google¶

• Google Professional Services というレポジトリで気になったものを列挙する
• google-indexing-script を使って Google 検索のインデックス登録を自動化する
• Googleのソフトウェアエンジニアリングを読んだ

Google Cloud¶

• Apache BeamでPyTorchを動かしてみた
• Cloud Runデプロイコマンドでシークレットを扱う
• Cloud Buildを非同期で実行する
• Cloud BuildでGitHubのSSH鍵を使う
• eventarcを触ってみた
• Google Cloud API Gatewayのスキーマ定義をFastAPIで作成する
• Google Professional Services というレポジトリで気になったものを列挙する
• image streaming について調べてみた
• MIGのVMを一時停止/停止する
• MQL で Vertex AI Endpoint の endpoint_id ごとにエラー率を取得する
• packerを使ってVMイメージを作成する
• PrivateなCloud SQLにBigQueryを接続する
• Pub/Sub Emulator を使ってみた
• Pub/Subを触ってみた
• Source Repositoryを触ってみた
• Cloud Runをterraform applyした時のハングを解消する
• 既存のインフラストラクチャをIaCで管理するツールTerraformerとその関連ツール
• terratagを触ってみた
• Vertex AI EndpointsのIDを任意のIDにする
• Vertex AI EndpointsのIDとDisplay Nameを取得する
• Vertex AI Pipelinesを触ってみた
• Vertex AI Prediction Batchを触ってみた
• Vision APIを使う時のロールについて
• Slide

Google Cloud API Gateway¶

• Google Cloud API Gatewayのスキーマ定義をFastAPIで作成する

Google Cloud Platform¶

• 【kubernetes】Numaflowでストリーミング処理を行う

Google Cloud Storage¶

• eventarcを触ってみた

GraphQL¶

• Slide

Gunicorn¶

• Pex内部のGunicornを使ってWebAPIを起動する

HTML¶

• MkDocsでHTMLを表示する

HTTP¶

• PantsでHTTPリソースを取得する

HashiCorp¶

• packerを使ってVMイメージを作成する

IAM¶

• Vision APIを使う時のロールについて

IaC¶

• packerを使ってVMイメージを作成する
• Terraform Dynamic Blockで動的にリソースを設定する
• Terraformで特定のリソースごとにコマンドを実行する
• 既存のインフラストラクチャをIaCで管理するツールTerraformerとその関連ツール
• terratagを触ってみた
• tfupdateを使ってterraformのバージョンを一括で更新する

JavaScript¶

• 依存ライブラリがメンテナンスされているか調べる

Kubeflow¶

• kfp localの実行時にGPUを使う

Kubeflow Pipelines¶

• Slide

Kubernetes¶

• Argo Workflowsのsuspend機能を使った非同期実行

MIG¶

• MIGのVMを一時停止/停止する

ML¶

• ScaleneでPythonのプロファイリングを行う

ML Model Serving¶

• Slide

MLOps¶

• kfp localの実行時にGPUを使う
• ScaleneでPythonのプロファイリングを行う
• Vertex AI Pipelinesを触ってみた
• Slide

MQL¶

• MQL で Vertex AI Endpoint の endpoint_id ごとにエラー率を取得する

Machine Learning¶

• Pytorchで量子化してみた
• Vertex AI EndpointsのIDを任意のIDにする
• Vertex AI EndpointsのIDとDisplay Nameを取得する
• Vertex AI Pipelinesを触ってみた
• Slide

Markdown¶

• MkDocsで特定のファイルやディレクトリを除外する
• MkDocsを使ってGitHub Pagesに公開する
• MkDocsでHTMLを表示する
• MkDocsのインデントを調整する
• Python strでMarkdownを記述する
• vscode-revealでtwo columnにする
• textlintを使ってみた

Meta¶

• モノレポビルドシステムBuck2

MkDocs¶

• MkDocsで特定のファイルやディレクトリを除外する
• MkDocsを使ってGitHub Pagesに公開する
• MkDocsのblogging extensionのpagingがうまくいかなかった
• MkDocsでHTMLを表示する
• MkDocsのインデントを調整する
• MkDocsでOpenAPIドキュメントを表示する
• MkDocs Pluginのtimelineを使う
• MKDocsでタイムライン機能を有効にする

NVIDIA Triton Inference Server¶

• Slide

Node.js¶

• 依存ライブラリがメンテナンスされているか調べる

Observability¶

• MQL で Vertex AI Endpoint の endpoint_id ごとにエラー率を取得する

OpenAPI¶

• Google Cloud API Gatewayのスキーマ定義をFastAPIで作成する
• FastAPIでOpenAPI定義を生成する
• MkDocsでOpenAPIドキュメントを表示する

OpenCV¶

• PantsでOpenCVを使う

PHP¶

• 依存ライブラリがメンテナンスされているか調べる

Pants¶

• モノレポビルドシステムBuck2
• Pantsでadhoc toolを使ってみた
• Pants Bootstrapで環境変数を設定する
• Pants TestのCoverage対象のファイルをFilterする
• Pantsでディレクトリ配下の設定を統一する
• Pantsを使ったモノレポで依存関係を調べる
• tagを使ってPantsのターゲットをフィルタする
• PantsでHTTPリソースを取得する
• PantsでOpenCVを使う
• Pantsでwhlを作る
• Pantsで個人用の設定を使う
• Pantsでリモートキャッシュを使う
• Pantsのテストでカバレッジを取得する
• Pantsのテストをshard分割して実行する
• Pantsで差分テストをやってみた
• Pex内部のGunicornを使ってWebAPIを起動する
• pexでマルチステージビルドを行う
• 外部媒体のtech blog
• Slide

Pex¶

• Pex内部のGunicornを使ってWebAPIを起動する

Poetry¶

• Pantsを使ったモノレポで依存関係を調べる
• poetryの依存関係を一括で更新する

Pub/Sub¶

• eventarcを触ってみた
• Pub/Sub Emulator を使ってみた
• Pub/Subを触ってみた

Pull Request¶

• Pull Requestを分析してレビュー効率とチームパフォーマンスを可視化する
• Pull Request Templateを作ってレビューのラリーを減らす

PyTorch¶

• Apache BeamでPyTorchを動かしてみた
• PyTorchの推論を高速化する
• Pytorchで量子化してみた
• TorchServeの中で外部ライブラリを使う

Pydantic¶

• FastAPIでOpenAPI定義を生成する
• Pydanticのエイリアスについて
• Pydanticでコマンドライン引数をパースする
• PydanticでGenericを扱う

Python¶

• Apache BeamでPyTorchを動かしてみた
• cookiecutterとcruftとcopierでプロジェクトテンプレートの更新を取り入れる
• 依存ライブラリがメンテナンスされているか調べる
• Google Cloud API Gatewayのスキーマ定義をFastAPIで作成する
• FastAPIでOpenAPI定義を生成する
• FastAPIのプロファイリング
• GitHub Actionsでoutputへの出力をPythonで行う
• MkDocsでOpenAPIドキュメントを表示する
• MkDocs Pluginのtimelineを使う
• [mypy]TypeError: 'type' object is not subscriptable を解決する
• Pantsでadhoc toolを使ってみた
• Pants Bootstrapで環境変数を設定する
• Pants TestのCoverage対象のファイルをFilterする
• Pantsでディレクトリ配下の設定を統一する
• Pantsを使ったモノレポで依存関係を調べる
• tagを使ってPantsのターゲットをフィルタする
• PantsでHTTPリソースを取得する
• PantsでOpenCVを使う
• Pantsでwhlを作る
• Pantsで個人用の設定を使う
• Pantsのテストでカバレッジを取得する
• Pantsで差分テストをやってみた
• Pex内部のGunicornを使ってWebAPIを起動する
• pexでマルチステージビルドを行う
• ローカルの whl を使ってpip installする
• pipxでflake8 プラグインを使う
• poetryの依存関係を一括で更新する
• py-spyを使ってPythonのプロファイリングをする
• Pydanticのエイリアスについて
• Pydanticでコマンドライン引数をパースする
• PydanticでGenericを扱う
• Pydanticを使ってシーケンスを名前でアクセスする
• pytest mockで実行ごとに値を変更する
• pytest 8系からsetup/teardownの書き方が変わった
• GitHub Actionsでpytestのカバレッジを出力する
• Python strでMarkdownを記述する
• subprocessで標準出力の結果を文字列として取得する
• PythonでULIDを使う
• Python whl Metadataを取得する
• PyTorchの推論を高速化する
• Pytorchで量子化してみた
• Ruffを使ってみた
• ScaleneでPythonのプロファイリングを行う
• 外部媒体のtech blog
• uvを使ったtorchの依存管理
• TorchServeの中で外部ライブラリを使う
• Vertex AI EndpointsのIDを任意のIDにする
• Vertex AI EndpointsのIDとDisplay Nameを取得する
• Vertex AI Pipelinesを触ってみた
• Vertex AI Prediction Batchを触ってみた

ReDoc¶

• FastAPIでOpenAPI定義を生成する

Redoc¶

• MkDocsでOpenAPIドキュメントを表示する

Reliability¶

• Slide

Review¶

• Pull Request Templateを作ってレビューのラリーを減らす

Ruby¶

• 依存ライブラリがメンテナンスされているか調べる

Ruff¶

• Ruffを使ってみた

Rust¶

• cargo generateを触ってみた
• Cargoプロジェクトのバージョンを取得する
• 依存ライブラリがメンテナンスされているか調べる
• Ruffを使ってみた

SEO¶

• google-indexing-script を使って Google 検索のインデックス登録を自動化する

Scalene¶

• ScaleneでPythonのプロファイリングを行う

Service Account¶

• Vision APIを使う時のロールについて

Swagger¶

• Google Cloud API Gatewayのスキーマ定義をFastAPIで作成する
• FastAPIでOpenAPI定義を生成する
• MkDocsでOpenAPIドキュメントを表示する

Template¶

• Pull Request Templateを作ってレビューのラリーを減らす

Terraform¶

• Terraform Dynamic Blockで動的にリソースを設定する
• Cloud Runをterraform applyした時のハングを解消する
• Terraform で Git コミットの SHA を取得する
• Terraform localsでkey, value値を定義する
• Terraformで特定のリソースごとにコマンドを実行する
• 既存のインフラストラクチャをIaCで管理するツールTerraformerとその関連ツール
• terratagを触ってみた
• tfupdateを使ってterraformのバージョンを一括で更新する

Test¶

• Pants TestのCoverage対象のファイルをFilterする
• Pantsのテストでカバレッジを取得する
• Pantsで差分テストをやってみた
• pytest mockで実行ごとに値を変更する
• GitHub Actionsでpytestのカバレッジを出力する

Test Coverage¶

• Pants TestのCoverage対象のファイルをFilterする
• Pantsのテストでカバレッジを取得する

Torch¶

• TorchServeの中で外部ライブラリを使う

TorchServe¶

• TorchServeの中で外部ライブラリを使う

ULID¶

• PythonでULIDを使う

VM¶

• MIGのVMを一時停止/停止する

VSCode¶

• コードリーディングの効率を上げるためのTips
• vscode-revealでtwo columnにする

Vertex AI¶

• MQL で Vertex AI Endpoint の endpoint_id ごとにエラー率を取得する
• Vertex AI EndpointsのIDを任意のIDにする
• Vertex AI EndpointsのIDとDisplay Nameを取得する
• Vertex AI Pipelinesを触ってみた
• Vertex AI Prediction Batchを触ってみた
• Slide

Vertex AI Endpoints¶

• Vertex AI EndpointsのIDを任意のIDにする
• Vertex AI EndpointsのIDとDisplay Nameを取得する

Vertex AI Pipelines¶

• Slide

Vision API¶

• Vision APIを使う時のロールについて

act¶

• actを使ってみた

blog¶

• MkDocsを使ってGitHub Pagesに公開する
• MKDocsでタイムライン機能を有効にする

book¶

• エンジニアリングマネージャーのしごとを読んだ
• これまで読んだ本
• Googleのソフトウェアエンジニアリングを読んだ

buildx¶

• Dockerのビルド結果をキャッシュする

cache¶

• Dockerのビルド結果をキャッシュする

changelog¶

• changelogを自動で生成したい

cookiecutter¶

• cookiecutterとcruftとcopierでプロジェクトテンプレートの更新を取り入れる

copier¶

• cookiecutterとcruftとcopierでプロジェクトテンプレートの更新を取り入れる

cruft¶

• cookiecutterとcruftとcopierでプロジェクトテンプレートの更新を取り入れる

deep-learning¶

• PyTorchの推論を高速化する

doc¶

• MkDocsで特定のファイルやディレクトリを除外する

document¶

• textlintを使ってみた

eventarc¶

• eventarcを触ってみた

flak8¶

• pipxでflake8 プラグインを使う

gcloud¶

• Cloud Runデプロイコマンドでシークレットを扱う
• 既存のインフラストラクチャをIaCで管理するツールTerraformerとその関連ツール

gh¶

• GitHub の認証が面倒だったので gh cli で楽をしたい
• GitHub CLI拡張でPull Requestのメトリクスを収集する

gh CLI¶

• Pull Request の番号を取得する

gh cli¶

• gh cliでtokenを出力する
• GitHub の Release から asset を取得する

git¶

• changelogを自動で生成したい
• 【GitHub Actions】git diff の差分を高速に取得する方法

idea¶

• Pull Request Templateを作ってレビューのラリーを減らす
• slackで質問テンプレートを作って解決までの時間を短縮する

infrastructure¶

• packerを使ってVMイメージを作成する

infrastructure as code¶

• packerを使ってVMイメージを作成する

kfp¶

• Slide

kubernetes¶

• 【kubernetes】Numaflowでストリーミング処理を行う

machine-learning¶

• PyTorchの推論を高速化する

monorepo¶

• Pantsで差分テストをやってみた
• 外部媒体のtech blog

mypy¶

• [mypy]TypeError: 'type' object is not subscriptable を解決する

npm¶

• 依存ライブラリがメンテナンスされているか調べる

numaflow¶

• 【kubernetes】Numaflowでストリーミング処理を行う

optimization¶

• PyTorchの推論を高速化する

packer¶

• packerを使ってVMイメージを作成する

pants¶

• Pants testでdebugする

pantsbuild¶

• Pantsでディレクトリ配下の設定を統一する
• Pantsを使ったモノレポで依存関係を調べる
• Pantsでwhlを作る
• Pantsで個人用の設定を使う
• Pantsでリモートキャッシュを使う
• Pantsのテストをshard分割して実行する

performance¶

• PyTorchの推論を高速化する

pex¶

• pexでマルチステージビルドを行う

pip¶

• ローカルの whl を使ってpip installする
• uvを使ったtorchの依存管理

pipx¶

• pipxでflake8 プラグインを使う

presentation¶

• vscode-revealでtwo columnにする

productivity¶

• ActivityWatchで活動を記録する

profiling¶

• py-spyを使ってPythonのプロファイリングをする
• ScaleneでPythonのプロファイリングを行う

py-spy¶

• py-spyを使ってPythonのプロファイリングをする

pydantic¶

• Pydanticを使ってシーケンスを名前でアクセスする
• PythonでULIDを使う

pytest¶

• Pants testでdebugする
• pytest mockで実行ごとに値を変更する
• pytest 8系からsetup/teardownの書き方が変わった

reveal.js¶

• vscode-revealでtwo columnにする

slack¶

• slackで質問テンプレートを作って解決までの時間を短縮する

slide¶

• Slide

spellcheck¶

• CSpellでスペルチェック
• typosを使ってtypoを見つける

ssh¶

• Cloud BuildでGitHubのSSH鍵を使う

subprocess¶

• subprocessで標準出力の結果を文字列として取得する

test¶

• Pantsのテストをshard分割して実行する

textlint¶

• textlintを使ってみた

tips¶

• コードリーディングの効率を上げるためのTips

torch¶

• uvを使ったtorchの依存管理

typo¶

• CSpellでスペルチェック
• typosを使ってtypoを見つける

uv¶

• uvを使ったtorchの依存管理

whl¶

• Pantsでwhlを作る
• ローカルの whl を使ってpip installする
• Python whl Metadataを取得する

yaml¶

• yqを使ってyamlの配列の値でforループを回す

yarn¶

• 依存ライブラリがメンテナンスされているか調べる

yq¶

• yqを使ってyamlの配列の値でforループを回す

キャリア¶

• エンジニアリングマネージャーのしごとを読んだ

チーム¶

• slackで質問テンプレートを作って解決までの時間を短縮する

チーム開発¶

• Pull Requestを分析してレビュー効率とチームパフォーマンスを可視化する
• Pull Request Templateを作ってレビューのラリーを減らす

ツール¶

• ActivityWatchで活動を記録する

マネジメント¶

• エンジニアリングマネージャーのしごとを読んだ
• slackで質問テンプレートを作って解決までの時間を短縮する

推論¶

• Pytorchで量子化してみた

生産性¶

• ActivityWatchで活動を記録する
• Pull Requestを分析してレビュー効率とチームパフォーマンスを可視化する

組織¶

• エンジニアリングマネージャーのしごとを読んだ
• Googleのソフトウェアエンジニアリングを読んだ

非同期システム¶

• Slide