Как LLM находит знания: от токенов и Transformer до RAG
Как текст становится токенами и векторами, что делает Transformer, чем обучение отличается от RAG, и как из Markdown собрать поиск знаний для модели.
Новости для разработчиков без шума — My Dev News в Telegram.
Тег
Все статьи блога с этим тегом.
Как текст становится токенами и векторами, что делает Transformer, чем обучение отличается от RAG, и как из Markdown собрать поиск знаний для модели.
Как векторные представления помогают находить корпоративные знания по смыслу, не отменяя точный поиск и требования безопасности.