Наблюдаемость LLM-агентов: Часть 2. Разработка и отладка графа

Привет, Хабр! Меня зовут Владимир и это вторая часть материала о трассировке LLM-агентов. В первой части мы настроили инфраструктуру: подняли LangFuse, организовали трассировку и научились управлять промптами как кодом. Если вы ещё не читали — рекомендую начать с неё. В этой части перейдём от теории к практике: соберём агента, который пишет сказки. В графе будут задействованы инструменты, условные переходы и циклы обратной связи.

https://habr.com/ru/articles/1008402/

#langgraph #langfuse

Наблюдаемость LLM-агентов: Часть 1. Трассировка LangGraph и версионирование промптов с LangFuse

Привет, Хабр! Меня зовут Владимир и в последнее время я занимаюсь разработкой агентов на LangGraph. Отладка LangGraph-агента - это отдельная боль: когда граф начинает жить своей жизнью, а LLM уходит в бесконечные циклы, понять, что случилось, становится сложно. В этой статье я покажу, как связать LangGraph с LangFuse для трассировки и покажу как управлять промптами как кодом (версионирование и миграция).

https://habr.com/ru/articles/1008300/

#langfuse #langgraph

Как я научил AI анализировать AI: observability для LLM-агентов с Langfuse

Как я построил систему мониторинга LLM-приложений и научил AI анализировать собственные ошибки AI-ассистенты в IDE стали незаменимыми помощниками разработчиков, но остаются чёрными ящиками. Мы не видим что они делают "под капотом", сколько это стоит и где теряется время. В статье покажу как построить системуobservability для AI-агентов: от Cursor IDE до production, с AI-анализом трейсов и открытым исходным кодом.

https://habr.com/ru/articles/987230/

#AI_observability #LLM_monitoring #langfuse #cursor #agentic_ai

ClickHouse Acquires Langfuse

https://langfuse.com/blog/joining-clickhouse

#HackerNews #ClickHouse #Langfuse #Acquisition #TechNews #DataAnalytics

Langfuse: наблюдаем и отлаживаем LLM-микросервисы без black box

За прошлый год я запустил 5 сервисов с LLM под капотом . Каждый следующий сервис получался лучше предыдущего: мы оттачивали архитектуру, оптимизировали core микросервиса на FastAPI, быстрее выходили на MVP и ловили меньше багов. Но довольно быстро стало понятно: LLM‑сервисы сложно интерпретировать . Для бизнес команды они выглядят как black box. Для инженеров — как набор плохо воспроизводимых состояний. В этой статье я поделюсь практиками, которые: — упрощают интерпретацию поведения LLM; — делают работу сервиса прозрачной для Product Owners и SME; — ускоряют разработку и итерации без передеплоев.

https://habr.com/ru/articles/983462/

#langfuse #python #fastapi #llm #ai

【Langfuse】 Strands Agents の動きをローカルでトレースしてみる
https://qiita.com/ryu-ki/items/9a9dacdd91fc15b33310?utm_campaign=popular_items&utm_medium=feed&utm_source=popular_items

#qiita #AWS #初心者 #やってみた #langfuse #StrandsAgents

Больше никаких «черных ящиков»: мониторим и оцениваем качество LLM-приложений с Langfuse

Представьте: вы ведете автомобиль, а на приборной панели нет ни спидометра, ни датчика топлива, ни каких-либо показателей вообще. Ни-че-го. В принципе ехать можно, но вы не знаете, какая у вас скорость, сколько бензина и есть ли с авто какие-то проблемы. Примерно так выглядит работа с LLM-приложением без инструментов мониторинга: система вроде бы и функционирует, но о ее внутреннем состоянии можно только догадываться. Меня зовут Александр Сесоров, я работаю инженером по тестированию

https://habr.com/ru/companies/yadro/articles/978516/

#langfuse #llm #тестирование #qa #python #анализ_и_проектирование_систем #искусственный_интеллект