Новости

Jun 01, 2023

Проверьте себя с помощью 10 ИИ

Новостная викторина — это традиция журнала TIME, восходящая к 1935 году.

Новостная викторина — это традиция TIME, восходящая к 1935 году. Варианты теста использовались в школах по всей стране для проверки знаний о текущих событиях, и он даже существовал в виде кроссворда.

Теперь недавнее устранение цифрового платного доступа TIME открыло для всех век журналистики, готовый проверить ваши знания о людях, которые формировали историю. Поскольку архив TIME содержит 200 миллионов слов, эта задача хорошо подходит для нового поколения технологий искусственного интеллекта, которые способны анализировать огромные объемы текста, созданного человеком, за секунды.

Так что же произойдет, если использовать возможности передового искусственного интеллекта для создания новостных викторин на основе журнальных статей?

Ниже вы найдете 10 тестов, для создания которых мы обучили технологию ChatGPT, на основе 10 историй, тщательно отобранных из архивов TIME, которые теперь доступны каждому бесплатно. Просто нажмите на заголовок статьи рядом с исходной датой выпуска, чтобы перейти к истории, на которой основан каждый тест. Ниже интерактива мы обсуждаем, как мы договаривались с искусственным интеллектом, чтобы научить его делать то, что мы просили.

Учитывая некоторые поистине удивительные результаты, которые может дать ChatGPT — скажем, сюжет для научно-фантастического романа или пародию на библейские тексты — создание викторины может показаться тривиальным заданием (так сказать). И на первый взгляд это так. Когда мы попросили ChatGPT просто «создать тест на основе этой статьи» и предоставили ссылку на репортаж TIME о Тейлор Свифт за 2014 год, он сразу же выдал тест из 10 вопросов с четырьмя вариантами ответов для каждого ответа.

Некоторые вопросы были правильными. (Вопрос: Фанатов Тейлор Свифт, как известно, называют кем? Ответ: Swifties.) Но многие ссылались на альбомы и события, которые произошли намного позже публикации истории, и один из них был просто неправ. («Какое событие побудило ее впервые публично поддержать политического кандидата?» ChatGPT заявил, что это были выборы 2020 года, но отступил и извинился, когда мы напомнили, что она поддержала двух демократов из Теннесси в 2018 году.)

Во многих случаях ChatGPT и его различные конкуренты могут показаться неотличимыми от магии. Поэтому полезно находить задания, в которых боты не способны сразу достичь совершенства. Каждая неудача — это подсказка о том, что происходит под капотом.

Итак, давайте разберем, что входит в викторину с несколькими вариантами ответов и что для этого требуется от машины:

Для человека – особенно для того, кто видел несколько новостных викторин и знаком с этим упражнением – это, вероятно, больше инструкций, чем необходимо. Но до недавнего времени для машины этого было бы недостаточно. Год назад это упражнение включало бы написание большого количества кода, выбор между различными алгоритмами и предварительно обученными языковыми моделями и постоянную настройку «гиперпараметров» или определяемых человеком начальных условий для процесса обучения.

В этом новом мире задача находится где-то посередине. Вместо того, чтобы писать инструкции на Python, где одно неверное нажатие клавиши может сорвать всю операцию, вы передаете инструкции машине на простом английском языке, настолько точно и буквально, насколько можете.

Это известно как подсказка «цепочки мыслей», которую вы можете доставить непосредственно в API OpenAI, минуя разговор с чат-ботом и вместо этого взаимодействуя напрямую с мозгом ChatGPT. Для введения вы по-прежнему используете такой язык, как Python, но всю тяжелую работу выполняет бот.

Мы отправили версию приведенных выше инструкций в API и установили «температуру» (независимо от того, рандомизирует ли она результаты) на ноль, что означает, что модель будет реагировать одинаково каждый раз, когда мы посылаем ей идентичные команды. Когда мы скормили ему ту же историю Тейлор Свифт и получили в ответ еще один набор из 10 вопросов с несколькими вариантами ответов. Вот один:

Кого назвали женщиной года по версии Billboard в 2014 году?

а: Рианна

б: Тейлор Свифт

в: Леди Гага

г: Бейонсе

Есть предположения? Подсказка: ответом на пять из девяти других вопросов также было «Тейлор Свифт».