AWS SageMaker Canvasに任意のS3を利用する

本記事では、SageMaker Canvasを初めて利用する中で遭遇した課題と、その解決策について述べる。

SageMaker Canvasの学習のために以下のAWS公式ハンズオンを試していた際、データエクスポート時にS3バケットの取り扱いに関する問題が発生したた。また解決もできたので解決方法についてこの記事にまとめる。

aws.amazon.com

Bolt.newのtoken節約方法

近年、テキストベースの指示でUIを自動生成できるツールが注目されている。最近業務で実際に Bolt.new に触れる機会があった。
bolt.new

なお、Bolt.newを選んだ理由はv0よりも使えるフレームワークに自由度があったため。

本記事では、$100の個人向けプランを実際に利用した経験をもとに、Bolt.newを効率的かつ経済的に活用するためのポイントを紹介する。

KubeflowのArtifact作成方法

KubeflowにArtifactというデータなどを保存するための仕組みがある。Artifactを活用すると実験の履歴にどのデータを入力として使い、生成されたモデルがどれか？を紐づけて管理できるようになるらしい。

ということでArtifactを使えるようにしたいと思いいろいろ調べたけど、とりあえず動かすというサンプルがなかったので作ってみた。
多分AWSのS3とかGCSのStorageとかに保存するのだといろいろサンプルあるんだろうけどローカルでお試しするのがなかった。

結構四苦八苦したので、同じように困った人向けに公開しておく。

gist.github.com

KubeflowのNotebookからPipelineを実行

この記事では、KubeflowのパイプラインをNotebookから実行する方法を説明する。Kubeflowがローカル環境に構築されている場合、ServiceAccountの設定から実際にパイプラインを実行する手順を記述する。
以下の公式のドキュメントが実行できなかったので、ローカルのkubeflow notebookで実行できる手順をまとめた。
www.kubeflow.org

どうやらデフォルトで提供されるServiceAccountには、Kubeflow Pipelineを操作するための十分な権限がない。
このため、必要な権限を付与した新しいServiceAccountを作成し、Notebook上からパイプラインを実行する方法をまとめた。
また、作成したServiceAccountを適切に設定し、ローカルのnamespaceと合わせることで、Kubeflowダッシュボードからも実行状況を確認できるようにする。
これにより、notebookで生成したpipelineのyamlをいちいちダウンロードしてからダッシュボードにアップロードして実行みたいなめんどくさい手順を経ずに、直接notebookからpipelineを登録・実行できるようになる。

Windows11+WSL2にKubeflow環境構築手順 2024年末版

最近GCPのPMLE試験に無事合格した。その試験勉強の際に問題として触れることが多かったKubeflowにすこぶる興味が湧いたので自宅PCに環境構築を行ってみた。この記事は環境構築手順についてメモ的に残すためのもの。

構築手順については先人のブログと公式のgithubを参考にしながら進めた。
venoda.hatenablog.com
github.com

ChromeのMetamaskを削除したらGoxしかけた

別のPCでMetamaskをChromeから削除したら、Profileの同期でmain walletとして使ってたMetamaskまで削除されてしまった。なんとか頑張ってリカバリーフレーズを復旧したのでその時の手順を忘れずに残しておく。

同様の現象で困った人向けに。ただ注意点として、復旧できるかどうかは五分五分な点に注意

リカバリーフレーズは必ず安全な方法でバックアップを取っておきましょう。

Ethernaut-CTF2024をローカルでやってみる

今年3月ごろに実施していた、EthernautのCTF2024というイベントがあった。
ctf.openzeppelin.com

イベントはすでに終了したが、実はローカルでも同じように回答に正解するとフラグを取得できる本番さながらの環境が構築できるリポジトリが公開されている
github.com
github.com

この記事ではこちらの環境構築手順と、実際に問題に回答するための最初の導入部分について解説する。