Нейросеть ChatGPT отвечает на вопросы лучше, чем Google, и может стать интересным собеседником. Однако искусственный интеллект, разработанный OpenAI, далеко не безупречен. Профессор Стэнфордского университета Михал Косински заставил чат-бота пройти ряд задач по теории разума (Theory of Mind). В когнитивной науке эти задачи используются для проверки способности понимать и описывать то, о чем думает другой человек, на основе доступной информации. То есть позволяют судить об уровне логики и эмпатии испытуемого.
Эксперимент был проведен в ноябре 2022 года с использованием ChatGPT, обученной до языковой модели GPT-3.5. ИИ удалось решить 17 из 20 поставленных перед ним задач, вероятность успеха составила 94%. Хотя этот процент может показаться высоким, на самом деле он ставит ChatGPT на один уровень со средним девятилетним ребенком.
Перспективы, однако, очень многообещающие, поскольку предыдущие версии нейросети были гораздо менее эффективны в такого рода тестах. «Я тестировал самую первую версию ChatGPT и она полностью провалила испытание. Затем была GPT-3, которая решила 70% задач. С появлением GPT-3.5 феноменальная способность ИИ к обучению подтвердилась» – подчеркнул ученый.
И хотя на текущем этапе развития голосовые модели уже могут удивить своими высокопарными рассуждениями, их все еще можно запутать простыми головоломками. Например, ChatGPT не может ответить на этот вопрос:
У мамы Майка четверо детей. Троих из них зовут Луис, Томас и Матильда. Как зовут 4-го ребенка?
«Невозможно определить имя 4-го ребенка, не имея дополнительной информации» — возражает ChatGPT. Разгадать эту задачку сможет даже девятилетний ребенок.
Подписывайтесь на наш Telegram, чтобы не пропустить крутые статьи
Группа Geekville Вконтакте со всем актуальным контентом
