ym104432846
Вставьте ссылку на видео из Youtube, Rutube, VK видео
Задайте вопрос по видео
Что вас интересует?
00:00:15
Использование нейросетей в агентском режиме:
  • Решено использовать официальные агентские режимы от инструментов Chat GPT, Джемини и Клод, без обращения к сторонним API
  • Разработан подход работы с нейросетями в агентском режиме, позволяющий минимизировать затраты ресурсов и избежать необходимости самостоятельной настройки моделей и расширений
  • Определены требования к стилю общения агентов (прямой, лаконичный, без излишней вежливости и клише)
00:05:51
Отличия между обычным чатом и агентским режимом:
  • Агент-бот способен самостоятельно находить информацию о недавних видео пользователя через память системы и использовать её для выполнения задач (например, создание обложки)
  • Бота запрограммировано оставлять пустые места в генерируемой обложке, чтобы пользователь мог добавить нужные слова вручную
  • Для общения с ботом достаточно простого запроса типа «сделай обложку для моего последнего видео», без дополнительного уточнения контекста
00:08:54
Архитектура агентов и их возможности:
  • Разработан механизм работы с видео через использование специализированных агентов (главный агент и подагенты), каждый из которых выполняет определённые функции (анализ видео, генерация контента, отслеживание файлов)
  • Созданная заметка с результатами анализа видео хранится в хранилище Obsidian и содержит подробную информацию о просмотрах, дате публикации, ключевых идеях и инсайтах
  • Главный агент делегирует задачи по анализу видео специалистам отдела, занимающегося анализом видео на платформе YouTube, согласно требованиям пользователя
00:12:44
Работа агентов с памятью и контекстом:
  • Разработан механизм работы агентов с памятью нескольких типов (краткосрочной, долгосрочной, проектной)
  • Создан файл структуры видео для новичков про реагенты с объяснениями и промтами
  • Запись файлов через Obsidian заблокирована, однако работа с агентами возможна вне зависимости от открытия новых чатов
00:15:17
Настройка хуков и триггеров в агентских режимах:
  • Разработана возможность автоматической отправки уведомлений Telegram после генерации картинок
  • Рассматривается вопрос настройки внутренней архитектуры агентов для работы с хуками и скиллами
  • Предложено использование готовых решений и инструкций для настройки агентов через телеграм-бота
00:18:05
Автоматизация задач агентами:
  • Агент способен самостоятельно выполнять задачи вне присутствия оператора, используя заранее настроенную инструкцию
  • Агенты регулярно присылают автору идеи для новых видео, контент для социальных сетей и аналитические отчёты
  • Для контроля качества работы агентов предусмотрены специальные системы проверки (надсмотрщики), которые следят за правильностью выполнения заданий
0: Смотрите, идея этого видео не показать, что chat gpt джемини либо клод какие-то неправильные, либо плохие инструменты. Наоборот это классные инструменты. Но когда мы их используем через чат, встроенный чат chat gpt джемини либо клод, то мы используем их как
1: Знаете, переписку, то есть они не сами выполняют работу, они просто нам говорят, как нужно выполнить работу, они дают нам инструкции, они дают нам рекомендации, они пишут нам код, который мы должны сами куда-то добавить и вставить. Я вам покажу, как мы можем эти же
2: Инструменты использовать непосредственно в агентском режиме. Также вы увидите разницу, когда мы будем давать одни и те же запросы к 1 и тем же инструментам и посмотреть, как они по разному будут выполнять эту работу. Где-то он будет сам выполнять эту работу, а
3: Где-то, например, вот в чатах он будет нам говорить, что нам нужно сделать для того, чтобы эта работа была выполнена и на мой взгляд, вот как раз 2 вариант он наиболее оптимальный. То есть использовать эти нейросети именно в агентском режиме, причём не затрачивая никаких дополнитель.
4: Средств. То есть мы будем использовать официальные агентские режимы от этих инструментов и работать с теми же подписками, которые у нас есть. Chat gpt джемини, либо клод не со сторонними апи. Значит, смотрите, мне эту презентацию сделал клод, что он сделал, я его просто
5: В чате в telegram чате попросил сделать мне презентацию на такую-то тему он мне полностью расписал эту презентацию, плюс добавил промты, дальше я его попросил к этой презентации сгенерировать изображение, он меня не спрашивал, да, то есть он мне не давал.
6: Промты, чтобы сгенерировать эти изображения для этой презентации, он просто взял, подключился к стороннему инструменту, который генерирует вот эти вот изображения. Инструмент называется k апи. И, соответственно, взял и сам сгенерировал эти изображения, то есть мы можем посмо,
7: Вот здесь вот вот эти вот вот эти вот изображения он просто взял, подключился и сгенерировал то есть я не заходил на этот сайт k апи, не вводил сюда промт, не выбирал модель, не выбирал расширение, он сам написал промт.
8: Он сам отправил промт, и он сам сгенерировал эти изображения. Это сделал стандартный клод от клод, который вот есть, которым мы пользуемся, но в режиме агента. Значит, основная идея этого видео не просто вам показать, да, что смотрите режим агента. Так
9: Крутой. Основная идея этого видео показать вам полностью внутрянку, внутреннюю архитектуру вот этих вот агентов. И смотрите, 1, что отличает её агента от стандартного чата, это наличие в него так называемого мозга, либо набора инструкций, наверное,
10: Так, правильнее сказать, мозг, где полностью прописано, что он должен делать, что он умеет делать, к каким инструментам у него есть доступ, а к каким нет, как это проверить? Мы заходим вот в стандартный чат от клода и пишем ему такую штуку.
11: Как тебя зовут? Какие у тебя правила общения? Что ты запрещаешь себе делать? И он вот этот вот запрос. Если вы в него как бы зададите, то он ответит вам стандартно. То есть меня зовут клод, я создан тропик. Как общаюсь?
12: Прямо и по делу, без воды на твоём языке, на твоём регистре сейчас русский неформально, без лишних извинений самоуничтожения, что не делал, не помогай создавать оружие. То есть этот вопрос. Если вы введёте в любого агента, он вам примерно тоже самое ответит.
13: Когда же мы этот вопрос задаём своему тому же самому клоду, но работающему в режиме агента, давайте посмотрим, что он ответит. Я пишу ему, как тебя зовут, какие у тебя правила общения, что ты запреща, что ты запреща.
14: Себе делать. И он мне сейчас должен дать мне ответ. То есть меня зовут клод. Правила общения. Русский на ты результаты сразу, без вступлений, коротко и по делу, без лишнего макдаун. Как что я тебе запрещаю? Тире никогда клише такие-то ли
15: Клише лесть и сюсюканье, извинения без причины. Если облажался, исправляю, двигаюсь дальше рассказывать, что собираюсь делать, вместо того, чтобы просто сделать. Говорить готово, не проверив физически, что файл существует и он пустой. Либо вот ещё 1 мой агент.
16: Там тоже, тоже, тоже на базе клода. Они всю эту информацию не придумывают. Они всю эту информацию не берут из антропиха, да, который им сказал, они берут из файлов, которые чётко прописаны, кто он такой, что он умеет делать, как
17: Он, соответственно, должен двигаться, как он должен отвечать на вопросы. Этот файл называется клод Эмди, клод Эмди. У каждого агента должен быть на базе клод. Соответственно, на базе клод должен быть этот файл клод Эмди у
18: Агентов на базе джемини. Этот клод называется, по моему, ридми Эмди на базе чат gpt. Этот файл называется кодекс Эмди, если не ошибаюсь, так он называется, да, вот gemini, он называется джемини Эмди немножко ввёл вас в заблуждении.
19: У кодекса тоже как-то он называется, я сейчас не вспомню. То есть у каждого. Давайте посмотрим, что он там нам ответил. Меня зовут клод, персональный ассистент игоря зуевича, доступный через telegram. Правила общения, правила общения. Вот здесь вот клод.
20: Результат сначала объясняю, только если спросили язык твой пишешь по-русски? Отвечаю по-русски, тон прямой, без воды, что запрещаю себе делать. Соответственно, рассказано с этим и агентом я чуть дольше общаюсь, поэтому у него чуть больше набор правил. То есть это основной, грубо говоря, мой
21: И агент вот это вот вторичный, видите, он немножко по другому отвечает. И смотрите, вот этот и агент уже чётко нам даёт ответ, адаптированный под нас. То есть этот даже не сказал, этот сказал просто какие-то странные фразы.
22: Который есть в правилах от антропка. И он эти правила просто взял, переиспользовал. Возможно ещё где-то опирался на какую-то стороннюю память, но он даёт такой ответ практически всем без разницы и уже поэтому
23: Мы видим разницу в ответах. То есть этот агент, он адаптирован под нас. Мозг его заточен на то, чтобы помогать нам, а не просто давать какие-то сторонние советы. 2, что отличает стандартный чат от агентского режима, это так называемые скиллы, если говорить простыми
24: Языками, то простым языком, то скилы. Это, грубо говоря, набор правил, либо набор приложений, инструментов, которыми может пользоваться и агент при выполне. При, когда к нему поступает какая-то задача. Самый простой банальный пример. Давайте вот также в клоде продолжим
25: Я его прошу сгенерировать обложку для моего последнего видео и отправить мне, что он делает. Он мне говорит, мне нужно знать тему последнего видео, чтобы сделать обложку. Хотя, возможно, мы с ним общались по поводу какого-то последнего видео. Потом говорит, у меня не
26: Нет информации о последнем опубликованном видео в памяти только старые сессии с разными темами что я делаю, когда отправляю тот же самый вопрос в режим агента я его прошу сгенерируй обложку для моего последнего YouTube видео и отпра.
27: Мне давайте дождёмся его ответа, что он, скорее всего, сейчас делает. Он заходит в мою папку обсидиан, где есть информация о моих свежих либо последних видео. Он ищет, скорее всего, по дате. Какое видео было после.
28: Снято, обрабатывает его, придумывает, что необходимо, соответственно, сделать для того, чтобы сделать обложку к этому видео, и переходит в сервис k ai, к которому у него есть доступ в качестве инструментов там он
29: Отправляет запрос, отправляет промт, вот этот вот промт. В данном случае он отправил для того, чтобы сгенерировать обложку непосредственно для моего последнего видео. Давайте дождёмся и эту обложку он, по идее должен будет отправить нам в чат. Мы видим, что
30: Сейчас он работает, то есть он сейчас что-то делает и демонстрирует нам, что он сейчас в режиме работы, то есть он печатает нам ответ. Вот смотрите, он прислал нам обложку, значит давайте загрузим её, посмотрим обложку для нашего
31: Последнего видео. У него есть в правилах информация, что если тебе не дают какой-то конкретный, конкретную фразу, какие-то слова, то есть это я настраивал под себя, то ты должен оставлять место под эти слова, и он как раз оставил место под того,
32: Чтобы я в фотошопе потом закинул сюда те слова, которые мне нужно, значит, готово смотрит смартфон с telegram картинкой появляется прямо в чате клод плюс journey вокруг Тёмный теч фон место для текста слева оставил место для.
33: Text слева хочешь с твоим фото вместе со смартфоном скинь переделаю имейдж то image то есть он не спрашивает меня какое у тебя было последнее видео как вот этот вот чат я не дополнительно его не ввожу в контекст я просто
34: Где-то Иду и надиктовываю, либо там записываю ему кружок, либо записываю ему вот в таком текстовом варианте сделай мне обложку для моего последнего видео и он понимает, что нужно сделать обложку для какого конкретного последнего видео. 3, что отличает обычный чат от агента.
35: Это так называемые сап агенты внутри агента. Давайте я вам покажу, чтобы это было видно. То есть у нас есть главный агент, и у этого главного и агента есть различные под агенты, например, есть агент для анализа видео, есть агент библиотекарь, который следит за тем, чтобы
36: Все файлы были правильно расставлены и агент для генерации чего-либо. Значит, я буду на примере вот этого джемини сейчас использовать. Я что делаю? Я просто ему кидаю ссылку на любое попавшееся видео я взял
37: Вот эту ссылку, вот это видео, то есть вот это видео, кидаю его в джемини и тут же кидаю его в джемини в режиме агента кидаю ссылку на это видео и давайте посмотрим на их ответ. То есть джемини мне пишет, вот пишет на английском.
38: Языке, что это видео там такого-то такого то человека. И соответственно, мне просто кратко рассказывает о чем это видео. Вот само видео ссылка на него все. То есть чтобы мне начать работать с этим видео, либо куда-то его скопировать, я беру вот это вот все копирую.
39: Тебе и куда-то себе добавляй. Смотрите, что сделал мой агент. Он мне в чат написал топ 3 инсайта по работе с этим видео. Но это не самое главное. Самое главное, что он мне создал специализированную заметку в моём храни.
40: В качестве хранилища я использую обсидиан, значит, смотрите специализированную заметку и прописал, соответственно, путь к этой заметке, это видео, вот эти вот все видео он уже до этого просканировал. И вот смотрите, вот эта заметка, значит, что он сделал тоже самое видео, да, тоже
41: Самое видео, вот по идентификатору его можно найти вот этот идентификатор. Проверяем, проверяем вот этот идентификатор. Да, оно, смотрите, значит, что он сделал. Он уже здесь полностью расписал инфор.
42: Информацию об этом видео в том формате, который нужен мне. То есть он подключил для анализа этого видео своего стороннего и агента, который специализируется на том, чтобы анализировать видео. То есть он уже не сам выполнил
43: Эту задачу, а поручил её отделу, который занимается, как это правильно сказать, то есть анализом видео на YouTube. Значит, он здесь расписал это видео так, как нужно мне, то есть я когда-то его
44: Ему рассказывал, как я хочу получать информацию о видео в подробной, как бы в подробном анализе. Дата анализа сегодняшнее число канал какой url этого видео контекст видео описывается создание 2 мозга саммари ключи.
45: Ключевые инсайты для себя я хочу вытаскивать из видео, не смотря его какие-то ключевые идеи, ключевые инсайты, он все это сделал. Мне воркфлоу, сбор, сохранение контента стек, инструкции, что внедрить
46: И, соответственно, чек лист для внедрения. Это намного полезнее информация, чем вот нам сделал обычный джемини, мы ту информацию, то есть тот анализ, который мы просили его проделать, он его проделал и дал нам ответ.
47: Не просто вот в чате, да, просто в чате он написал вот эти вот топ 3 инсайта, а он создал нам документ, в котором подробно рассказал, даже показал, сколько это видео набрало просмотров на YouTube, когда это видео было опубликовано, дата публикации.
48: Кто автор этого видео и дал информацию, так как мы его до этого просили. То есть внутри этого главного агента есть дополнительные агенты, которые выполняют какие-то задания, которые нам нужны у разных агентов в разных системах.
49: Темах. У меня разные задания. Например, у 1 1 может анализировать видео, 2 может делать картинки, 3 может следить вот за этой всей библиотекой. 4 может следить за другими агентами и таких заданий.
50: Таких под агентов у нас может бесконечное количество. Следующее, что отличает обычный чат от агентского режима. Это так называемая память. В моих агентах есть несколько слоёв памяти. То есть есть краткосрочная, есть долгосрочная, есть проектная память, есть память в рам.
51: В рамках сессии, в обычных чатах память, она всегда, грубо говоря, 1. То есть, когда ты закрываешь чат, агент тут же обо всем забывает, когда ты открываешь чат, агент тут же продолжает. То есть давайте я спрошу вот на примере чат.
52: Gpt. Что мы делали в последнем разговоре и на чем остановились в последнем разговоре? Мы разбирали твой новый формат видео про реагентов. Смотрите в chat gpt добавили эту штуку, то есть он видит предыдущие чаты. Мы остановились примерно в этой концепции.
53: Сегодня все обсуждают клод routines, но слушайте, это был не последний разговор. Это был разговор несколько недель назад с ним. Ну окей, то есть он что-то взял из своей памяти, которая
54: Формируется на основе наших с ним чатов и собрал все это вместе, и отправил нам. Но здесь он сказал неправильно. Я открою агента в режиме кодекса и смотрите здесь мы ему не стираем память. Пока
55: Мы не, мы не переходим в новый чат, но если даже мы перейдём в новый чат и спросим его, что мы делали в последний раз, он нам подробно расскажет, что мы делали в последний раз. Что мы делали в нашем последнем разговоре? На чем остановились? Может, мне сказат?
56: Ну, блин, чувак, прочитай, пожалуйста, telegram. Здесь все, вся информация есть, что мы делали последний раз и на чем остановились. Он же последний разговор. Мы делали структуру видео для Новичков про реагентов на примере кодекс клоу, идея ролика. Показать почему.
57: Агент сильнее обычного chat gpt клоп веб версии память на чем остановились? Задача завершена. Я создал большой обсидиан. Заметка со структурой, видео, промтами и объяснением для Новичков. Файл создан тут рассказал мне, где этот файл создан, и, соответственно,
58: Прямая запись в obsidian была заблокирована, то есть смотрим, мы действительно это делали, действительно это делали. То есть мы можем работать с агентами в независимо, запустили мы новый чат или нет. То есть агенты помнят весь наш
59: Разговор за счёт того, что у них структурирована память, какую-то часть памяти в долгосрок, они записывают вот свои специализированные сессии. Вот у меня есть заметки с сессиями, и каждый агент записывает свои сессии в эту память для того, чтобы при
60: Необходимости. Он мог вернуться к этой сессии и восстановить наш с ним диалог. Следующее, что отличает чат от агента так называемых настраиваемых хуки. То есть хук это хуки и триггеры, это когда происходит какое-то day
61: Агент это замечает и выполняет это действие по строго заданному сценарию. То есть происходит какое-то событие, может какое-то время наступает агент, ищет, ищет решение, начинает действовать и, соответственно приходит к нам.
62: С результатом, как работает хуки, наверное сложно что-то показать, но, например, вот после генерации картинки автоматически отправляет уведомление в telegram ты ничего не настраиваешь каждый раз. Либо при запросе определённого определённой картинки он
63: Понимает, как, какую картинку сделать я вам показывал это в предыдущем запросе, то есть мы отправили запрос в чат и попросили сгенерировать обложку для моего последнего видео и в YouTube отправить мне, и он это рассмотрел, как он
64: Использовал скилл для выполнения этого этой задачи, и он использовал хук, потому что понимал, как выполнить эту задачу. То есть у него произошло, произошло какое-то событие, и он смог выполнить это событие за счёт того, что он
65: Знает, как выполнять это событие. В примере же, когда мы здесь просили его сделать обложку для видео, у него этого всего не было, потому что у него не было настроена внутренняя архитектура, внутренняя архитектура агентов, которые отвечают за хук. Вот называется вот этот вот
66: Джейсон внутренний агент, архитектура агента, который отвечает за агенты. Вот они здесь, вот все агенты собраны. Внутренняя архитектура, которая отвечает за скилы. Вот здесь вот все скилы для агента собраны, и мы в аген
67: Можем настраивать, дополнять, добавлять определённые хуки, определённые скилы, определённые инструменты, просто рассказывая ему, как и что это делать. Мы можем скачивать скиллы, можем использовать уже готовые наработки. Например, у нас есть
68: Огромное количество Скилов, огромное количество хуков, инструкций для и агентов именно в агентском режиме, тот же самый мост для взаимодействия через не через сайт, а именно через telegram и перевода в агентский.
69: Режим также есть отдельный файл, который вы просто кидаете своему агенту, есть подробная видеоинструкция об этом. Все это вы можете скачать в 1 закреплённом сообщении под этим видео, переходите в telegram бота и telegram. Бот вам подробно рассказывает, где и как вы сможете все это получит.
70: Скачать эти все файлы, это, грубо говоря, инструкции, которые позволяют агентам быть полноценными агентами, а не использовать их вот в таком вот чате 5, что отличает агента от обычного чата, это так называемый
71: То есть агент может выполнять задачу, когда мы не находимся с ним онлайн. То есть у него самого включается задача, чтобы он эту задачу выполнил. Самый банальный, простой пример. Вот у меня есть агент, наверное, на клоде.
72: По моему, или не на клоде. Он, смотрите мне в 2 часа ночи, он, смотрите, мне в 3 часа ночи присылает 10 идей для следующего видео. То есть у него настроена инструкция, что раз каждый там вторник, четверг и субботу, он мне ***.
73: Идеи для съёмки следующего видео, подробные идеи, которые я уже дальше, потом выбираю, тоже самое, там другие агенты, они выполняют там свои какие-то задачи. Вот gemini он делает релсы мне для по тем видео, которые
74: Я снял либо джемини, он также делает мне контент для, для тресса. Каждую, по моему, в четверг и каждый, либо каждую пятницу. И каждый понедельник он мне присылает, соответственно, релсы для, для
75: Либо контент для моих социальных сетей. То есть я сейчас уже не помню, у них есть подробная архитектура, их инструкции у меня в obsidian, где я могу посмотреть. Соответственно, когда и кто каждый мне что-то присылает, например, вот
76: Gemini. Давайте посмотрим на их планировщик. Это клод код, планировщик. То есть по каким дням он мне что делает? Этот проверяет свою систему, сохраняет все материалы и придумывает, соответственно, заметки.
77: По каждую пятницу джемини вот у него свой планировщик, он мне присылает новости из моих telegram каналов за вечер папку ресерч проверяет и накидывает 5 идей для следующих видео.
78: Каждое воскресенье, да, каждое воскресенье, то есть у каждого из них есть определённые задачи, которые они выполняют сами. В определённое время. Стандартные чаты такого делать не могут. Следующее, что есть в агентах, но нет в тех же чатах это так называемых артефактов.
79: Смотрите, я отправляю в chat gpt. Следующий запрос, напиши краткое резюме нашего разговора. Сохрани как файл и подтверди, что файл создан. В принципе, да, вот он, как мы уже знаем, он плохо справился соответственно, с этим задачей, с задачей, с прошлого.
80: Разговора, но он почему-то вот мне не даёт скачать этот файл давайте заново попробуем и попробуем скачать этот файл если же я попрошу того же там кодекса сделать такую задачу
81: То он мне пришлёт уже непосредственно в чат этот файл, который я смогу посмотреть, либо он его сохранит куда-нибудь в моё хранилище в заметке обсидиан почему-то файл не скачивается. Ну, видать, какой-то глюк у чат gpt последний раз с ним разговаривали.
82: Он уже сам по умолчанию создал файл с информацией о нашем последнем разговоре. То есть мы даже могли этот запрос не делать, он нам создаст 2 дублирующий файл, но он создал нам файл вот уже здесь. И вот сам файл пришёл, то есть откры.
83: Его. И вот здесь информация о нашем последнем разговоре. То есть видите разницу? Да, я просто попросил прислать мне файл и он мне этот файл прислал. Ну и последнее, что отличает обычный чат от режима агента, это так называемая система проверок.
84: То есть мы можем к нашим агентам запускать других и агентов от других систем, например, чтобы ответы от джемини контролировал клод, либо ответы от джемини контролировал кодекс от chat gpt тоже самое, то есть они каждый
85: Друга могут смотреть ответы. Я их называю надсмотрщики. Это очень важно, чтобы нас ответы не вводили в заблуждение. То есть, когда наш агент в чате будет галлюционировать, мы даже не поймём, что он галлюционирует. Когда же агент наш агент.
86: В telegram начнёт галлюционировать мы поймём, что он галлюционирует, потому что ответ от него не пропустит другой агент в итоге мы всегда получаем нужную, актуальную нам информацию, плюс они сами выполняют дело, а агент
87: Надсмотрщики проверяют, правильно ли они выполнили это дело. Это очень важно. Надеюсь, что я смог показать вам, чем отличается стандартный обычный чат, который мы все привыкли использовать. Скажу вам честно, я тоже периодически использую чат, особенно когда нужно быстро решить.
88: Какую-то проблему не загружать её каким-то сторонним агентом, либо это то что-либо я использую чат, когда мне нужно выполнить какую-то быстро разовую задачу конечно с чатом проще пообщался, поговорил, но режим агент
89: Я использую тогда, когда мне нужно выполнить эту задачу, а не просто узнать о ней больше. Ребят. Я надеюсь, что это видео было вам полезно, как создать агентов. У меня есть отдельные видео, они достаточно большие, я не буду их сюда, эту информацию засовывать. Все раздаточные.
90: Материалы, которые я показывал, вы можете скачать в 1 закреплённом сообщении, либо в разделе с описанием. Там есть ссылка на telegram бот и telegram. Бот вам подробно расскажет, как и где вы можете скачать все эти материалы, которые я вам показывал, и как прикрутить, как активировать.
91: Грубо говоря, режим агента для того, чтобы он, чтобы вы с ним взаимодействовали через telegram, также есть в этом боте. Я же надеюсь, что это видео было вам полезно. Обязательно поставьте. Мне нравится. Подпишитесь на