me_edu
Инженерия GenAI-приложений: RAG, агенты и оценка качестваШаг 11 из 19 · 0% пройдено
Архитектура GenAI-приложения

Не чат, а система

Шаг 11 из 1911 минТеория
Цель

Понять основной механизм темы «Не чат, а система» без заучивания отдельных терминов.

Как работать

Прочитайте блок один раз целиком, затем вернитесь к схеме или примеру и перескажите идею своими словами.

Критерий

Сформулированное правило, пример применения и одно ограничение метода.

STRUCTURAL BLOCK DIAGRAMCENTRAL UNITGenAI appAuthToolsPrompt routerGuardrailsRAG indexTelemetryLLMСтруктурная схемастрелки показывают поток данных/энергиимасштаб и расположение условные
Архитектура GenAI-приложения: модель встроена в управляемый контур продукта
Опорная идея

GenAI-продукт состоит не только из модели. Пользовательский запрос проходит через авторизацию, нормализацию, retrieval, оркестратор, модель, инструменты, фильтры безопасности и логирование. Если один слой отсутствует, приложение быстро начинает отвечать нестабильно: придумывает факты, теряет контекст, раскрывает лишние данные или становится слишком дорогим.

Инженер начинает с карты системы: кто пользователь, какие данные можно использовать, какие действия разрешены, где хранится история, как измеряется качество и что происходит при ошибке. После этого модель становится одним из компонентов, а не магической коробкой.

Назад

Обсуждение

Войдите, чтобы участвовать в обсуждении.

Пока нет сообщений.