На связи Степан😎
Мой первый пост будет про AI, потому что уж очень я им сейчас увлекся и по работе приходится много в нем копаться 🤪
Поскольку я человек ленивый, часто делаю запросы по созданию summary для различной информации (например, чтобы собрать краткий конспект для копирования в Notion). И недавно, читая статьи по бизнес-анализу с канала ITMINE, я задался вопросом, какая LLM-ка сможет сделать для меня заметки по этим статьям, чтобы не писать конспект вручную.
⸻
Задача: создать краткую выжимку из трех статей.
_______
Исходные данные:
Статьи
-https://shesterov.by/tpost/uj7cn72vo1-trebovaniya-k-po-chto-eto-kakimi-bivayut,
-https://shesterov.by/tpost/7txuvphka1-trebovaniya-k-po-chto-eto-kakimi-bivayut,
-https://shesterov.by/tpost/ykuhybvrz1-trebovaniya-k-po-chto-eto-kakimi-bivayut.
_______________
LLM (на 25.05.2025)
ChatGPT 4.1,
Claude 4 Sonnet,
Gemini 2.5 Flash,
Grok 3,
DeepSeek V3.
___
Промт (очень простой): получи информацию по всем трем ссылкам. проанализируй ее. создай документ в виде подробного конспекта по видам требований.
Я знаю, что промты можно и нужно писать более подробные для получения более точных результатов. Однако моя логика следующая - так как времени часто не хватает, AI-помощник должен "понимать" и быстрые запросы тоже. Потому что с хорошим промтом даже с локально развернутой LLM можно достичь впечатляющих результатов. А что если времени нет? Или ты неискушенный юзер? Или остается полчаса до созвона и вы обращаетесь за помощью к AI?
________
Результаты:
Gemini 2.5 Flash
Создал неплохой краткий конспект и положил его в Google Keep (оттуда легко импортировать информацию в Google Docs, например). Четко, кратко, структурировано - как шпаргалка.
Claude 4 Sonnet
Предоставил достаточно детализированный конспект с указанием основных моментов и примеров. Без необходимости делать дополнительные запросы на формирование PDF файла, легко скачать. Нарисовал схему требований по BABOK - от меня плюсик.
ChatGPT 4.1
Предоставил конспект c большим количеством списков. Так легко, как у Claude, генерация файлов не получается. Пока тестировал разные модели GPT, запустил тот же запрос с моделью o3 и она выдала самый лучший конспект - с табличками, выделенным текстом и неплохо структурированный. Но эта модель и подается как думающая и более медленная. В версии же 4.1 пропустил требования ЗЛ (единственный, кто так сделал).
Grok 3
Не смог получить доступ к данным на странице и сгенерировал свое видение требований на основании имеющихся знаний. Для облегчения его участи я сделал PDF и скормил их повторно с тем же промтом. Сам конспект получился очень детальный и не хуже, чем у Claude.
DeepSeek
Аналогично Grok, не смог получить данные со страничек, пытался генерировать сам. Получил PDF. Сделал конспект среднего качества, без особой детализации или подсветки важных моментов.
Получившиеся артефакты прилагаю ниже, можете оценить сами.
__________
Выводы
Гонка AI продолжается и становится сложно выбирать, кому отдать 20 баксов за подписку. На данный момент (май 2025), конкуренция пошла жаркая.
Забавно то, что этот пост я начал писать 2 недели назад, протестировав тогда ChatGPT 4o, Claude 3.7 и Gemini 2. А пока пост лежал в черновиках, вышли новые модели - исследование пришлось переделывать🙈. ChatGPT 4.1 в данной задаче слегка не дотянул, как будто торопились ее выкатить. Grok 3 вообще темная лошадка - стоило скормить ему PDF и он выдал очень неплохой конспект. Claude 4 стабилен в результатах, есть схема, важные моменты выделил. Gemini 2.5 просто неплох (и дает плюшки в виде интеграций в другие сервисы гугла). DeepSeek можно не юзать, разве что локально развернуть - особенно пока есть бесплатный ChatGPT 4o.
Бонусом приложу сравнение всех конспектов от Claude 4. Забавно вышло, что Grok с ним наравне, за исключением того, что ему пришлось предоставить PDF.
_____________
Что ж, буду продолжать поиски идеального AI-компаньона (или нескольких). В следующий раз попробую для аналогичной задачи гугловский инструмент NotebookLM (слышал, он в таком хорош).
Мой первый пост будет про AI, потому что уж очень я им сейчас увлекся и по работе приходится много в нем копаться 🤪
Поскольку я человек ленивый, часто делаю запросы по созданию summary для различной информации (например, чтобы собрать краткий конспект для копирования в Notion). И недавно, читая статьи по бизнес-анализу с канала ITMINE, я задался вопросом, какая LLM-ка сможет сделать для меня заметки по этим статьям, чтобы не писать конспект вручную.
⸻
Задача: создать краткую выжимку из трех статей.
_______
Исходные данные:
Статьи
-https://shesterov.by/tpost/uj7cn72vo1-trebovaniya-k-po-chto-eto-kakimi-bivayut,
-https://shesterov.by/tpost/7txuvphka1-trebovaniya-k-po-chto-eto-kakimi-bivayut,
-https://shesterov.by/tpost/ykuhybvrz1-trebovaniya-k-po-chto-eto-kakimi-bivayut.
_______________
LLM (на 25.05.2025)
ChatGPT 4.1,
Claude 4 Sonnet,
Gemini 2.5 Flash,
Grok 3,
DeepSeek V3.
___
Промт (очень простой): получи информацию по всем трем ссылкам. проанализируй ее. создай документ в виде подробного конспекта по видам требований.
Я знаю, что промты можно и нужно писать более подробные для получения более точных результатов. Однако моя логика следующая - так как времени часто не хватает, AI-помощник должен "понимать" и быстрые запросы тоже. Потому что с хорошим промтом даже с локально развернутой LLM можно достичь впечатляющих результатов. А что если времени нет? Или ты неискушенный юзер? Или остается полчаса до созвона и вы обращаетесь за помощью к AI?
________
Результаты:
Gemini 2.5 Flash
Создал неплохой краткий конспект и положил его в Google Keep (оттуда легко импортировать информацию в Google Docs, например). Четко, кратко, структурировано - как шпаргалка.
Claude 4 Sonnet
Предоставил достаточно детализированный конспект с указанием основных моментов и примеров. Без необходимости делать дополнительные запросы на формирование PDF файла, легко скачать. Нарисовал схему требований по BABOK - от меня плюсик.
ChatGPT 4.1
Предоставил конспект c большим количеством списков. Так легко, как у Claude, генерация файлов не получается. Пока тестировал разные модели GPT, запустил тот же запрос с моделью o3 и она выдала самый лучший конспект - с табличками, выделенным текстом и неплохо структурированный. Но эта модель и подается как думающая и более медленная. В версии же 4.1 пропустил требования ЗЛ (единственный, кто так сделал).
Grok 3
Не смог получить доступ к данным на странице и сгенерировал свое видение требований на основании имеющихся знаний. Для облегчения его участи я сделал PDF и скормил их повторно с тем же промтом. Сам конспект получился очень детальный и не хуже, чем у Claude.
DeepSeek
Аналогично Grok, не смог получить данные со страничек, пытался генерировать сам. Получил PDF. Сделал конспект среднего качества, без особой детализации или подсветки важных моментов.
Получившиеся артефакты прилагаю ниже, можете оценить сами.
__________
Выводы
Гонка AI продолжается и становится сложно выбирать, кому отдать 20 баксов за подписку. На данный момент (май 2025), конкуренция пошла жаркая.
Забавно то, что этот пост я начал писать 2 недели назад, протестировав тогда ChatGPT 4o, Claude 3.7 и Gemini 2. А пока пост лежал в черновиках, вышли новые модели - исследование пришлось переделывать🙈. ChatGPT 4.1 в данной задаче слегка не дотянул, как будто торопились ее выкатить. Grok 3 вообще темная лошадка - стоило скормить ему PDF и он выдал очень неплохой конспект. Claude 4 стабилен в результатах, есть схема, важные моменты выделил. Gemini 2.5 просто неплох (и дает плюшки в виде интеграций в другие сервисы гугла). DeepSeek можно не юзать, разве что локально развернуть - особенно пока есть бесплатный ChatGPT 4o.
Бонусом приложу сравнение всех конспектов от Claude 4. Забавно вышло, что Grok с ним наравне, за исключением того, что ему пришлось предоставить PDF.
_____________
Что ж, буду продолжать поиски идеального AI-компаньона (или нескольких). В следующий раз попробую для аналогичной задачи гугловский инструмент NotebookLM (слышал, он в таком хорош).
1❤7🔥2😁1