19 июня 2024 БКС Экспресс
ChatGPT смог впервые пройти тест Тьюринга, пишет портал LiveScience. В ходе эксперимента Института инженеров электротехники и электроники (IEEE) большинство участников не смогли отличить бота от живого собеседника.
Математик и криптограф Алан Тьюринг в 1950 г. разработал тест, который позволяет отличить «разумную» машину от человека. Чтобы пройти его, устройству необходимо проявлять интеллектуальное поведение, схожее с человеческим, и заставить более 30% собеседников, участвующих в эксперименте, думать, что с ними общается реальный человек. Считается, что в случае «победы» машины можно говорить о наличии у нее своего рода способности к мышлению.
GPT или человек?
Ученые IEEE решили повторить этот тест. 500 участников эксперимента по 5 минут разговаривали с четырьмя собеседниками: человеком и ИИ-моделями — ELIZA 1960-х годов, а также с GPT-3.5 и GPT-4. После их спросили, с кем, по их мнению, они общались — с реальным собеседником или с искусственным интеллектом (ИИ).
Результаты теста показали, что 67% респондентов безошибочно определяют реального собеседника. 22% приняли за человека ELIZA, около 50% — GPT-3.5, 54% — GPT-4.
«Машины могут рассуждать, смешивая воедино правдоподобные обоснования вещей постфактум, как это делают люди, — рассказала Нелл Уотсон, исследователь искусственного интеллекта в IEEE. — Они могут быть подвержены когнитивным искажениям, их можно обмануть и манипулировать <…> Человеческие недостатки проявляются в системах искусственного интеллекта, и это делает их более человекоподобными, чем предыдущие подходы, которые представляли не более чем список готовых ответов».
Технологический скачок
Исследование, по словам авторов, подтверждает обеспокоенность тем, что развитие моделей ИИ, успешно имитирующих человека, будет иметь «широкомасштабные социальные и экономические последствия». Кроме того, Уотсон добавила, что результаты теста демонстрируют, как изменился ИИ в эпоху GPT.
«Языковые модели бесконечно гибкие, они способны синтезировать ответы на широкий спектр тем, говорить на определенных языках или социальных диалектах и презентовать себя через определенные черты характера и ценности. Это огромный шаг вперед по сравнению с тем, что запрограммировано человеком вручную», — считает она.
Интеллект или иллюзия
Однако у теста Тьюринга есть и свои критики, которые считают такой подход упрощенным. На протяжении десятилетий «игра в имитацию» была эталонной для машинного интеллекта, но для современных больших языковые моделей прохождение теста Тьюринга не является значимым достижением.
«Я не думаю, что это движение в сторону интеллекта. Это движение в сторону того, чтобы обмануть, убедив в наличии интеллекта», — считает Гэри Маркус, ученый-когнитивист и соавтор книги «Искусственный интеллект: перезагрузка».
Математик и криптограф Алан Тьюринг в 1950 г. разработал тест, который позволяет отличить «разумную» машину от человека. Чтобы пройти его, устройству необходимо проявлять интеллектуальное поведение, схожее с человеческим, и заставить более 30% собеседников, участвующих в эксперименте, думать, что с ними общается реальный человек. Считается, что в случае «победы» машины можно говорить о наличии у нее своего рода способности к мышлению.
GPT или человек?
Ученые IEEE решили повторить этот тест. 500 участников эксперимента по 5 минут разговаривали с четырьмя собеседниками: человеком и ИИ-моделями — ELIZA 1960-х годов, а также с GPT-3.5 и GPT-4. После их спросили, с кем, по их мнению, они общались — с реальным собеседником или с искусственным интеллектом (ИИ).
Результаты теста показали, что 67% респондентов безошибочно определяют реального собеседника. 22% приняли за человека ELIZA, около 50% — GPT-3.5, 54% — GPT-4.
«Машины могут рассуждать, смешивая воедино правдоподобные обоснования вещей постфактум, как это делают люди, — рассказала Нелл Уотсон, исследователь искусственного интеллекта в IEEE. — Они могут быть подвержены когнитивным искажениям, их можно обмануть и манипулировать <…> Человеческие недостатки проявляются в системах искусственного интеллекта, и это делает их более человекоподобными, чем предыдущие подходы, которые представляли не более чем список готовых ответов».
Технологический скачок
Исследование, по словам авторов, подтверждает обеспокоенность тем, что развитие моделей ИИ, успешно имитирующих человека, будет иметь «широкомасштабные социальные и экономические последствия». Кроме того, Уотсон добавила, что результаты теста демонстрируют, как изменился ИИ в эпоху GPT.
«Языковые модели бесконечно гибкие, они способны синтезировать ответы на широкий спектр тем, говорить на определенных языках или социальных диалектах и презентовать себя через определенные черты характера и ценности. Это огромный шаг вперед по сравнению с тем, что запрограммировано человеком вручную», — считает она.
Интеллект или иллюзия
Однако у теста Тьюринга есть и свои критики, которые считают такой подход упрощенным. На протяжении десятилетий «игра в имитацию» была эталонной для машинного интеллекта, но для современных больших языковые моделей прохождение теста Тьюринга не является значимым достижением.
«Я не думаю, что это движение в сторону интеллекта. Это движение в сторону того, чтобы обмануть, убедив в наличии интеллекта», — считает Гэри Маркус, ученый-когнитивист и соавтор книги «Искусственный интеллект: перезагрузка».
Не является индивидуальной инвестиционной рекомендацией | При копировании ссылка обязательна | Нашли ошибку - выделить и нажать Ctrl+Enter | Жалоба