⚡️ Claude 3 Opus vs GPT 4 Updated: чем пользоваться?

Пока Google Gemini подбирается к качеству как у GPT 4 год назад, самый прямой его конкурент Claude остается для многих тёмной лошадкой. А он хорош, чёрт побери. Ниже расскажу почему, с плюсами, минусами и подводными камнями. Это первый пост, второй будет посвящен GPT, так что и ту и другую модель получится разобрать из личношо опыта, не из бенчмарков и каких-то сравнительных обзоров с сиюминутными тестами.

👀 Note
это пробный формат «лонгрида»: от своего имени я обстоятельно делюсь личным опытом и выводами на какую-то тему. Если вам формат заходит, оставьте реакцию под постом — так я пойму, продолжать ли его вести.

🏆 Гонка за первенство

Итак, в гонке за 1 место по качеству генераций эти двое — GPT 4 и Claude 3 Opus — практически сравнялись. То один выше в чартах, то другой. Разница по Elo-рейтингу, вроде бы непринципиальная. Конечно, есть нюансы, и о будет ниже.

Но сперва неприятный факт:

💸 Я плачу $$ за оба. Потому что:

а) живу на Шосе Энтузиастов, и мне, как энтузиасту, положено,
(на самом деле не живу на нем, уже давно)

и

б) вижу разные юзкейсы, которые лучше подходят то к одному, но к другому, и разные стили написания ответов, больше соответствующие тем или иным задачам.

🤔 Наблюдения относительно Claude (произносится «Клод») vs. GPT

+ Клод лучше GPT работают с контентом и реально помнит большие тексты. Реально помнит = не как GPT, который помнит преимущественно начало и конец, а середину часто подзабывает. И это полбеды - иногда GPT без объявления войны начинает придумывать, восполняя то, что не запомнил. Вот это не люблю там больше всего, пожалуй.

+ У Клода не зависает веб интерфейс, в отличие от ChatGPT, которые явно не про веб интерфейсы сейчас думают. Менв целом радует их подход к веб-версии модели (как устроен чат, обработка ошибок, UX, новые идеи специально для AI)

+ Удивительно полезная штука: если скопировать и вставить большой кусок чего-то, например, текста, то Клод быстренько сам превратит его в файл/аттачмент к вашему промпту. И тут же будет с ним работать, как с файлов!

Это закрывает большой юзкейс: вот тебе большой кусок контекста, вот мой промпт/вопрос, дальше разберемся. И все это в пару движений клавиатуры, без экспортов-импортов-загрузок-выгрузок и т.п.

…В ChatGPT же (и это моя боль) можно в поле ввода вставить хоть полный текст Анны Каренину. Только потом GPT откажется что-либо с ним делать, потому что, сюрприз-сюрприз, слишком длинный запрос.

+ У Клода как будто лучше со скоростью и адекватностью генерации в плане того, что меньше нужно подрезать/изменить/заменить. В GPT конечно гораздо реже можно получить ответ, который можно без редактуры скопипастить, не показавшись.

+ Сам Клод делают ребята, философия которых мне нравится чуть больше философии Сэма и OpenAI. Если, конечно, убрать основную цель любой серьезной AI-компании: постепенно тихой сапой добраться до AGI.

😭 Теперь о минусах:

+ Фиг зарегаешься. Я живу в Нидерландах, вроде страна белых людей. Но Claude считает, что всего Евросоюза попросту не существую для их модели. Не для тебя, ЕС, моя розочка цвела.

Понятно, конечно, почему, но блин. Включать каждый раз VPN и искать именно Американскую карту для оплаты немного задаобывает.

+ Быстро доходишь до лимита токенов/длины чата. По ощущениям, это в разы чаще случается, чем в Гпт.

+ Нет агентов (как GPT Store), в резултате каждый повторяющийся юзкейс приходится описывать заново. Например, я иногда прошу переписать текст в моем авторском стиле, скармливая в LLM примерно 600кб своих текстов. Если в GPT я давно это превратил в какого-никакого агента, то в Claude приходится делать все руками.

+ Приходится себе время от времени объяснять, зачем платишь за ещё одну LLM, очень похожую на GPT. Если так думать, то немного странно платить $40 за 200% того, что тебе нужно от SOTA-quality нейросети. Тем более что если нужно будет выбирать, то останусь с ChatGPT и ко.

***

Как вам такой формат лонгрида? Если заходит, ставьте ❤️ - так пойму что вам нравится. Ну и вторую часть напишу тогда.

@ppprompt x @ponchiknews

🤔 А порассказывайте о необычных / неочевидных кейсах, в которых вам удалось неожиданно круто пообщаться с LLM?

Я имею в виду кейсы + промпты, что вы писали + примерно что было в ответе. Впрочем, промпта достаточно ))

Приведу пример от себя, чтобы начать разговор, а дальше в комментах:

Кейс №1: ссоры и конфликты.
Иногда могу рассказть суть спора или ссоры с кем-то из близких / с женой. Пишу по горячим следам сразу после неприятного разговора: кто с чем пришел, что говорил, «а чё он», «а чё она»… Прям как на духу со всеми подробностями, оценками, проекциями.

Далее кидаю в LLM (Claude 3 Opus или GPT-4) следующее:

Контекст: я приведу тебе содержание непростого разговора между партнерами А и Б.

Инструкции:

1. Что на самом деле хочет сказать партнер A, в 3 пунктах? Что на самом деле хочет сказать партнер Б, в 3 пунктах?

2. Какие топ-3 эмоции вероятнее всего испытыват партнер А и какие партнер Б.

3. Какие топ-3 потребности ты можешь выделить у каждого из них?

4. Какие топ-3 ценности или убеждения могут двигать каждым из них?

5. Что им важно друг про друга понять?

6. Внимание! Учитывая твои ответы на предыдущие вопросы с 1 по 5, предложи как партнеру А и партнеру Б прийти к разрешению конфликта?

Предложи 3 разных варианта.

Эффект. Крутой психотерапевтический, много инсайтов, осознаний + рецепт как выйти из зацикленности/захваченности ситуацией. И пойти навстречу друг другу.

Честно сказать, по эффекту иногда даже превосходит крутого семейного психотерапевта. Попробуйте, если с кем-то оказываетесь регулярно в конфликте.

А в комментах хочется услышать ваших ох%$тельных историй.

@ppprompt

Promping Guide 101 от Google: коротко в 13 пунктах

Гугл выпустил свой промптинг-гид про базовый промпт-инжениринг, помноженный на рекламу Gemini.

Ниже краткое содержание.

1. Gemini = AI-ассистент + с доступом к сервисам Google Workplace. Он улучшает тексты, организует данные, генерит картинки, анализирует данные, исследует новые темы.

2. Как Google рекомендует промптить?
4 части промпта:
- персона (кто выполняет задачу),
- задача (что надо сделать),
- контекст (детали, важные для задачи),
- формат (как должен выглядеть результат).

3. Какова средняя длина успешного запроса?
Средний промпт содержит 21 слова, самые часто используемые — 9 слов и меньше.

4. Где можно использовать Gemini?
Gemini встроен в основные сервисы Гугла - Gmail, Docs, Sheets, Meet, Slides + как чат-бот на сайте.

5. Какие основные советы по написанию промптов?
Используйте естественный язык, будьте конкретны, итерируйте, избегайте сложных щей, используйте послед. запросы для уточнения предыдущих, как в разговоре.

6. Чем Gemini может быть полезен для client managers?
Стандартизировать общение, улучшать обслуживание, обрабатывать жалобы, включать ОС от клиентов в ответы.

8. А для руководителей и предпринимателей?
Подготовка коммуникаций с сотрудниками, оптимизация процессов, анализ конкурентов, фандрайзинг, работа с инвесторами.

9. А для HR?
Подбор кадров, онбординг, опросы удовлетворенности, трекинг времени.

10. А для маркетологов?
Исследование рынка, генерация контента и идей для блогов/соцсетей, email-маркетинг, разработка маркетинговой стратегии.

11. Для проджектов?
Подготовка отчетов о статусе проекта, создания ретроспектив, issue-трекинга и информирования о багах и проблемах в продукте.

12. Для сейлов?
Развитие отношений с клиентами, подготовка к звонкам, генерация персонализ. материалов для клиентов.

13. Насколько точны результаты Gemini?
Результаты надо перепроверять, ибо LLM - новая технология. Конечная ответственность за их применение лежит на пользователе.

***

Ну как, узнали что-то новое? 🌚

🔗PDF

@ppprompt

💆‍♂️ AI дает крутейшие инсайты на основе психотерапии: мой эксперимент

Недавно я устроил эксперимент. Я попросил своего психотерапевта отсканировать все записи с сессий за последние 2 года. Дальше оцифровал их с помощью сервиса YouDo. Дальше отредактировал и закинул все это добро в один PDF-файл. Файл скормил в нейросетку Claude 2.

А дальше началась фантастика.

На основе ~120 листов записей получился точный, искренний и глубинный портрет личности (в данном случае моей). Нейронки вроде Claude, которые умеют работать с большими документами, могут давать очень качественные инсайты.

Всего за полчаса я смог:
🔸 суммировать все мои сессии за 2 года в 8 тезисов;
🔸 узнать, как человек, описанный в документе, видит мир;
🔸 сформулировать список инсайтов, которые можно понять про человека на основе записей;
🔸 описать метафоры, которые человек использует чаще всего;
🔸 построить «горизонтальный» портрет личности (Big-5, StrengthsFinder, Эннеаграмма, MBTI и т.п. — подробнее тут) [получилось довольно точно];
🔸 построить «вертикальный портрет» личности (спиральная динамика, развитие эго — продробнее про это тут) [получилось не очень точно, но зато сразу понятно, почему];
🔸 посмотреть на человека через призму юнгианской теории и архетипов
🔸 узнать советы для развития и решения ключевых проблем, которые «достаёт» на сессиях такой человек;
🔸 узнать, как такой человек воспринимается окружающими;
🔸 увидеть противоречия, которые можно найти в мышлении такого человека;
🔸 сделать сентимент-анализ: что вызывает самые сильные позитивные, нейтральные и негативные эмоции;
🔸 выделить цели и ценности;
🔸 узнать о ключевых страхах человека;
🔸 понять сильные и слабые стороны;

Точность выводов, если взять перспективу наблюдателя, я оценил бы в 70-80%. Мой психотерапевт — даже чуть выше. Промпты, если что, тут: https://tg-me.sbs/ppprompt/263

Ну не мэджик ли? По-моему, вполне.

Всё это вызывает разумный вопрос: заменит ли AI коучей и терапевтов?

Когда я слышу, что нейронки НЕ заменят психотерапевтов, коучей, менторов и консалтеров, я соглашаюсь, но думаю об этом не так, как большинство моих собеседников на тему.

Мне думается, что AI сделает работу помогающих профессий гораздо глубже, насыщенней, целостней — с опорой на данные и науку, а не только на опыт и интуицию. Те из спецов, кто всерьез воспринимает AI, сможет работать шире и глубже.

Уже сейчас я вижу, как участие AI в моей коучинговой практике помогает мне сделать сессии с клиентами гораздо круче и эффективнее, предложить гипотезы, о которых я раньше не думал, дать неожиданные перспективы и продвинуть к ранее сложнодоступным логикам действия.

Такие времена настали, ух! Обожаю их.

А что вы бы делали с такими данными о себе?

@ponchiknews