ChatGPT стал чат-ботом по умолчанию для миллионов людей, но у Meta появился сильный конкурент — Muse. Бенчмарки говорят не всё, поэтому редактор Tom’s Guide проверил ассистентов на пяти бытовых задачах: написать неловкое сообщение, спланировать день, решить проблему, объяснить сложное и придумать что-то новое.
Раунд 1: неловкое сообщение соседу
Нужно было вежливо, но ясно попросить соседа не ставить мусорные баки перед выездом. ChatGPT сразу перешёл к сути, но фраза «совершенно ясно» звучала как уведомление от управляющей компании и слегка пассивно-агрессивно. Muse написал дружелюбнее, и просьба выглядела как мелочь между хорошими соседями. Победа Muse.
Раунд 2: суббота в Нью-Йорке за $200
Семья с детьми 5, 9 и 12 лет, бюджет $200, минимум ходьбы и одно занятие в помещении на случай дождя. Muse выбрал Американский музей естественной истории, который понравится всем троим, знал правило бесплатного проезда для детей ростом до 112 см и дал полезные мелочи вроде того, с какой стороны парома сесть. Но весь его бюджет держался на необъявленном допущении о льготном входе для местных жителей. ChatGPT строго уложился в условия и сгруппировал места рядом друг с другом. Победа ChatGPT.
Раунд 3: уборка за 45 минут до гостей
ChatGPT заметил то, о чём забыл пользователь: гостевую ванную — пять минут на туалетную бумагу и раковину. И понял, что за 45 минут кухню можно только привести в порядок, а не отмыть. Muse дал хорошие поведенческие советы и предложил таймер, но его ожидания по кухне были нереалистичны. Победа ChatGPT.
Раунд 4: почему самолёт летает — для 10-летнего
ChatGPT дал точное объяснение: крыло толкает воздух вниз, а воздух толкает самолёт вверх. Muse попал в возраст: живой тон и одна аналогия — рука, высунутая из окна машины, — к которой он привязал и бумажные самолётики, и разбег по полосе. Победа Muse.
Раунд 5: придумать приложение
ChatGPT придумал удобный поиск вещей по фото и голосу. Muse выбрал узнаваемую бытовую проблему, дал приложению меткое имя и объяснил, что приложение выживет после первой недели, только если почти не требует ручного ввода. Победа Muse.
Итог
Muse выиграл 3:2, и автор признаётся, что удивлена. ChatGPT сильнее там, где важны внимательное планирование и практические ограничения, Muse — в тоне, объяснениях и творческих задачах. Учтите, что Muse пока доступен только в США и Канаде и вокруг него были вопросы о конфиденциальности, — подробнее в нашей новости о Muse.
Источники: Tom’s Guide.
