K's Atelier

個人的な学習記録

2024-01-01から1年間の記事一覧

メモ:Graph RAG,Large Concept Model

最近Graph RAGの話を聞くようになったのだが,どうやって構成するのかイマイチ分からなかった。ちょっとだけ参考になりそうな記事を発見。 qiita.com Graph RAGを調べている最中に,Large Concept Modelなるものを見つけた。 https://arxiv.org/pdf/2412.088…

Melodics(404日目): Porcelain - Drums (Grade 6)

Finger Drum: Porcelain - Drums (Grade 6) Grade 6だけどそこまで難しくはない。BPMがそれなりに遅めだからかな。 www.youtube.com

Melodics(403日目): HOT TO GO! - Drums (Grade 4)

Finger Drum: HOT TO GO! - Drums (Grade 4) Clear。MelodicsのDiscord channelを見ていると,Levelが16とかそれ以上の人がいるみたいなのだが,一体どうやってるんだろう。かたっぱしからPerfectとってるのかな。だとしたらものすごい。

Cloud Quest: Fine-Tune a Base Model with RLHF

Reinforcement learning from human feedback - Wikipedia RLHFを使用したfine tuningの環境を構築する。Lab自体はやっていけば完成するのだが,実際に運用するのはなかなか大変そう。

Melodics(402日目): HOT TO GO! - Drums (Grade 4)

Finger Drum: HOT TO GO! - Drums (Grade 4) 長い。Last stepは1曲まるまるだから長い。少しずつ指を慣らしていく。

Cloud Quest: Create Trustworthy LLMs with a Vector Database

途中で想定外の動作が発生すると,とたんに訳が分からなくなる。今回はSecrets Managerのarnが使えない,というエラーが出て,最初から確認しなおした。 Labがstartできないトラブルもあって,かなりの時間がかかってしまった。

Cloud Quest: Bias Mitigation for a Translation Service

このLabのcodeはきちんと動いた。updateの激しいOSSは構成管理が大変だ。

Melodics(401日目): HOT TO GO! - Drums (Grade 4)

Finger Drum: HOT TO GO! - Drums (Grade 4) Finger Drumで381日目。毎日連続で進めてきた。Melodicsのcommunityがあるようだから,ちょっと覗いてみるのもいいかもしれない。

Melodics(400日目): HOT TO GO! - Drums (Grade 4)

Finger Drum: HOT TO GO! - Drums (Grade 4) まだまだ簡単。次のStepでまたHiHatのpatternが違う。ゆっくり進めないといけない。

Cloud Quest: Improve Code Quality Using Generative AI

まさかStreamlit越しにMistral 7Bに質問したcode修正結果を貼り付けてclearとは思わなかった。意味の分からんcodeを貼り付けるのはちょっと怖い。

Melodics(399日目): HOT TO GO! - Drums (Grade 4)

Finger Drum: HOT TO GO! - Drums (Grade 4) 懐かしい感じの曲。Retro game BGMっぽい感じがする。 en.wikipedia.org www.youtube.com

Melodics(398日目): Apple - Drums (Grade 4)

Finger Drum: Apple - Drums (Grade 4) 原曲はsimpleなrhythmで聴きやすい曲。Melodicsでも原曲をよく再現している。最後のstep以外は一発でperfectが取れた。 www.youtube.com

Cloud Quest: Code Generation with Prompt Engineering

これは楽勝だった。Lambdaに設定する環境変数値を結局どこから取ってくるのかがはっきりしない(Labに決め打ちで書かれていたのだが,本来はManagement Consoleの操作で確認するはず)。

Melodics(397日目): Kiss Of Life - Drums (Grade 4)

Finger Drum: Kiss Of Life - Drums (Grade 4) やはり,長いけれどpatternは決まっているので☆☆☆はとれた。こういう落ち着いた曲が好きだ。

Cloud Quest: Build Generative AI Apps with Foundation Models

いやはやLangChainとstreamlitが動かない。このLab,version指定がされていないようで,すでにまともに動作しない状況になっていた。とりあえず「ないよ」と言われたpackageをインストールしまくったが,最後のところでstreamlitから問合せをしても応答が返…

Cloud Quest: Build and Deploy Tools Using LLM Agents

DIYではAgentを追加で最初から作らないと,うまく動かなかった。practiceで作ったものを修正するだけだと動かない。何か操作が不足しているはずなのだが,なんだろう。

Cloud Quest: Prompt Engineering with Amazon Bedrock

SageMakerを使ってPromptを更新するLab。Lambda上でPromptを実行しているのであった。

Melodics(396日目): Kiss Of Life - Drums (Grade 4)

FingerDrum: Kiss Of Life - Drums (Grade 4) 順調にstep clear。perfectが取れた。

Melodics(395日目): Kiss Of Life - Drums (Grade 4)

Finger Drum: Kiss Of Life - Drums (Grade 4) うーむ,やっぱりSongsはGradeに対して体感の難易度が高め。これはまだGrade 4なのでそこまで難しくはないが。おしゃれな曲で大好き。 www.youtube.com

Melodics(394日目): Cosmic Girl - Drum Part (Grade 8)

Finger Drum: Cosmic Girl - Drum Part (Grade 8) 曲が長いので,今日はstepを先に進めずに,細かいところの精度を上げることに集中した。曲が長くて一定のphraseが続くものは,力業でclearできてしまうので,そういうやり方はせずに着実に進める。

Melodics(393日目): Cosmic Girl - Drum Part (Grade 8)

Finger Drum: Cosmic Girl - Drum Part (Grade 8) きりがないので今日はここまで。だいぶノレてきたぞ。

Cloud Quest: Harness the Power of LangChain

すでにLangChainのversionが変わっていて,deprecatedになっている箇所があった。 あと,このLabは最初の実行箇所で慌てるといきなり先にに進めなくなる。 ML系のLabは落ち着いて確認,実行しないと,Labを一度終了してもう一度やり直しになるのが辛い。

Cloud Quest: Fine-Tuning an LLM on Amazon SageMaker

Labの実行中にerrorが発生してendpointが作成できず,最初からやり直した。Cloud QuestのLabは現行のAWS環境がそのまま使われているので,わりと「コードが古くて動かない」ということがありうる。なのでいろいろと探しまくってしまった。

Peter Thiel,"Zero To One"

ゼロ・トゥ・ワン 君はゼロから何を生み出せるか 作者:ピーター・ティール,ブレイク・マスターズ NHK出版 Amazon 「社内ベンチャー」とかいう話が出たりするが,ちょっと思ったことがある。 関係者が「従業員マインド」から「起業家マインド」に変化しないと…

Melodics(392日目): Cosmic Girl - Drum Part (Grade 8)

Finger Drum: Cosmic Girl - Drum Part (Grade 8) 再びCosmic Girlに戻ってきた。どうもSongsの方はTraining系よりもGradeの数値が難しめに設定されているようだ。Grade 8でも十分に難易度が高い。

Melodics(391日目): Somebody's Watching Me - Drums (Grade 5)

Finger Drum: Somebody's Watching Me - Drums (Grade 5) 終わってみれば,☆☆☆でclear。かなり楽しめた。名曲はやはり何かが違う。

Cloud Quest: Introduction to Generative AI

SageMaker endpointを使用するLabだった。以前にCloud Questをcompleteしたときは,Roleは全部で6つだったのだが,今はAI等が増えて8つになっている。勉強しなおし。

Melodics(390日目): Somebody's Watching Me - Drums (Grade 5)

Finger Drum: Somebody's Watching Me - Drums (Grade 5) さすがに最後のstepになると長い。簡単には終わらない。曲が良いので叩いている時間も長くなる。

Melodics(389日目): Somebody's Watching Me - Drums (Grade 5)

Finger Drum: Somebody's Watching Me - Drums (Grade 5) 結構むずい。けどperfectとれた。ノッていればできる。 www.youtube.com

Melodics(388日目): Somebody's Watching Me - Drums (Grade 5)

Finger Drum: Somebody's Watching Me - Drums (Grade 5) 想像していたより難しかった。1Stepに結構時間がかかってしまった。