はじめに
七尾百合子さん、お誕生日 279日目 おめでとうございます！ nikkieです。
AWS は全然触ってないのですが、「AIエージェント開発の知見に触れられるかな」と AI Builders Day に参加しました。
目次
- はじめに
- 目次
- 2025/12/20 JAWS-UG Presents - AI Builders Day
- まだ間に合う！ Agentic AI on AWSの現在地をやさしく一挙おさらい
- フレームワークを活用したAIエージェントの評価 ～AIエージェントを育てるために～
- ハッカソンから社内プロダクトへ AIエージェント「ko☆shi」開発で学んだ4つの重要要素
- 誰でも簡単に生成AI Agent管理入門！AWS Generative AI Solution Box で試せる Langfuse導入
- 終わりに
2025/12/20 JAWS-UG Presents - AI Builders Day
AWSで生成AIアプリを作る日本の「ビルダー」たちを盛り上げるため、国内最大規模の開発者向けイベントをオフライン開催します。
今すでにAIエージェント構築に取り組む開発者はもちろん、これから挑戦したい方、エンジニアでない方の入門を後押しします。
盛り上がりの様子は実行委員長のみのるんさんがまとめてくださっています。
発表資料をまとめてくださった方もいます
私にとっては「AWSで生成AIアプリを作る」、すなわち ﾀｷｸｩｰﾝ（strands-agents1）と連想されます。
そもそも strands-agents はどんな特徴があるエージェント開発フレームワークか知らないというレベル感で参加しました2。
ﾀｷｸｩｰﾝことstrands-agentに触る時間を作るべく #AIBuildersDay に午後から来ました
— nikkie(にっきー) / にっP (@ftnext) 2025年12月20日
来てびっくり。呪術廻戦展がサイドイベント！（※同じフロアにあるだけ） pic.twitter.com/Xlf69qqjeu
AIエージェント開発の知見に満ちていたのですが、特に印象的だった発表に絞って書いていきます。
まだ間に合う！ Agentic AI on AWSの現在地をやさしく一挙おさらい
やっとアップできた…！朝のキーノート資料です👍
— みのるん☁️ Minoru Onda (@minorun365) 2025年12月20日
まだ間に合う！ Agentic AI on AWSの現在地をやさしく一挙おさらい #AIBuildersDayhttps://t.co/9x2c61DQFp
スライドを追ったのですが、読みやすかったですし、名前だけ聞いたことがあった AWS のサービスが整理されました。
AgentCore がすごそうです（Vertex AI はこれと張れてるかな？）
フレームワークを活用したAIエージェントの評価 ～AIエージェントを育てるために～
AI Builders Dayの発表資料です！
— ma_tsukada (@ma_tsukada) 2025年12月20日
皆さまありがとうございました！#AIBuildersDay
フレームワークを活用したAIエージェントの評価 ～AIエージェントを育てるために～ https://t.co/goYMk1QmeR
個人的ベストトークです。
エージェントの評価は手を動かしているけれど、目指すべきところがわからんという身には、サーベイから1つ道を示していただけて、めちゃめちゃ参考になりました。
「フレームワークを活用したAIエージェントの評価 ～AIエージェントを育てるために～」 #AIBuildersDay
— nikkie(にっきー) / にっP (@ftnext) 2025年12月20日
ADKでAIエージェント作ってる身からはその通りの連続で、うなずきすぎて首がもげそうになってる
- Agents Companion | Kaggle
- Agent Evaluation Guide - Langfuse
- LLM Agent Evaluation: Assessing Tool Use, Task Completion, Agentic Reasoning, and More - Confident AI
- AI Agent Evaluation: The Definitive Guide to Testing AI Agents - Confident AI
- Application-specific evaluation approaches - Docs by LangChain
DeepEvalだ！ #AIBuildersDay
— nikkie(にっきー) / にっP (@ftnext) 2025年12月20日
参考資料にも挙げたConfident AI製。つながった！https://t.co/GZJVunWr9N
ハッカソンから社内プロダクトへ AIエージェント「ko☆shi」開発で学んだ4つの重要要素
今日話した内容です！
— そのだ@緑タイツマン(渋谷) (@sonoda_mj) 2025年12月20日
生成AIを本気でやるために東京来て8ヶ月、人生初の45分登壇でした！！
かなり本気で作ったので、興味ある方はご覧ください！！https://t.co/EGBHeDjsyW
#AIBuildersDay
15時からの45分トークは予め聞きたいものがなく、偶然このトークのゾーンに座りました。
余っていたお弁当をいただきつつ、直前の評価の発表で得た知識を整理しながら耳だけ傾けていたところ、AIエージェント開発の tips が次々に共有されて素晴らしい発表でした。
「if文をエージェントにやらせない」毎日唱えたい #AIBuildersDay
— nikkie(にっきー) / にっP (@ftnext) 2025年12月20日
決まりきってるところはプログラム書いた方がよい、その通り
>また、我々が決定論的に計算できるものをLLMに計算させるべきではないhttps://t.co/eAhiaIvHHd
ツール設計のお話、azukiazusaさんのスライドでも見たやつだと思いました〜 #AIBuildersDay
— nikkie(にっきー) / にっP (@ftnext) 2025年12月20日
REST API単位でMCPのツールにすると、エージェントには難しくなってしまうhttps://t.co/kCSA70dpcA
Anthropic の資料など有名どころを参照しつつ、ご自身の経験をもとに言語化されています。
AIエージェント開発をしている方は、パラパラとタイトルを読むだけでめちゃ学びになると思います
誰でも簡単に生成AI Agent管理入門！AWS Generative AI Solution Box で試せる Langfuse導入
AWS AI builders Day 資料はこちらです！
— Langfuse JP同好会 (@LangfuseJP) 2025年12月20日
ご参加いただいた方、ありがとうございました！https://t.co/Nvpx6DHnpW#AWS#Langfuse#LLMOps pic.twitter.com/n8y8ca4Zpo
ここからボタン一発でLangfuseをデプロイ！？ すっげー！！ #AIBuildersDayhttps://t.co/bkPJdlqvuG
— nikkie(にっきー) / にっP (@ftnext) 2025年12月20日
Langfuse は1日の中で何回も名前を聞きました。
AWS とはなかよしみたいです〜
Langfuse、AWS、なかよしなかよし #AIBuildersDay
— nikkie(にっきー) / にっP (@ftnext) 2025年12月20日
Amazon Bedrock AgentCore Observability with Langfuse https://t.co/X5ykKKpsvE
終わりに
AI Builders Day に後半半日参加しました。
AIエージェント開発の知見が集まる素晴らしい場だったと思います。
strands-agents は一切触ってない身ではありますが、クラウドやフレームワークを超えての学びがたくさんありました。
評価の考え方、deepeval、Langfuse が私の主な takeaway です。
やっていくぞの熱に当てられて、当日の1日1エントリは評価をトピックに選びました〜
