На фоне огромного ажиотажа вокруг генеративного ИИ новое исследование, проведенное исследователями из Массачусетского технологического института, проливает свет на влияние этой технологии на работу, обнаружив, что она повышает производительность работников, которым поручены такие задачи, как написание сопроводительных писем, деликатных электронных писем и анализ затрат и выгод.
Задачи в исследовании не были полностью копиями реальной работы: они не требовали точной фактической точности или контекста в отношении таких вещей, как цели компании или предпочтения клиентов. Тем не менее, ряд участников исследования сказали, что задания были похожи на то, что они писали на своей реальной работе, и преимущества были существенными. Доступ к вспомогательному чат-боту ChatGPT сократил время, затрачиваемое работниками на выполнение задач, на 40 %, а качество результатов, измеренное независимыми оценщиками, выросло на 18 %.
Исследователи надеются, что исследование, которое появилось сегодня в открытом доступе в журнале Наукапомогает людям понять, какое влияние инструменты искусственного интеллекта, такие как ChatGPT, могут оказать на рабочую силу.
“Что мы можем сказать с уверенностью, так это то, что генеративный ИИ окажет большое влияние на работу белых воротничков», — говорит Шакед Ной, аспирант экономического факультета Массачусетского технологического института, соавтор статьи вместе с сокурсницей Уитни Чжан 21. «Я думаю, что наше исследование показывает, что такого рода технологии имеют важное применение в работе белых воротничков. Это полезная технология. Но еще слишком рано говорить, будет ли это хорошо или плохо, и как именно это заставит общество приспособиться».
Имитация работы чат-ботов
На протяжении веков люди опасались, что новые технологические достижения приведут к массовой автоматизации и потере рабочих мест. Но новые технологии также создают новые рабочие места, и когда они повышают производительность труда, они могут оказать положительное влияние на экономику.
«Производительность всегда на первом месте для экономистов, когда они думают о новых технологических разработках, — говорит Ной. «Классический взгляд в экономике состоит в том, что самое важное, что делает технический прогресс, — это повышать производительность, в том смысле, что мы можем более эффективно производить экономическую продукцию».
Чтобы изучить влияние генеративного ИИ на производительность труда, исследователи дали 453 маркетологам с высшим образованием, авторам грантов, консультантам, аналитикам данных, специалистам по персоналу и менеджерам два письменных задания, характерных для их профессии. Задачи на 20–30 минут включали написание сопроводительных писем к заявкам на гранты, электронные письма об организационной реструктуризации и планы анализа, помогающие компании решить, каким клиентам отправлять push-уведомления на основе заданных данных о клиентах. Опытные профессионалы тех же профессий, что и каждый участник, оценивали каждую заявку так, как если бы они сталкивались с ней в рабочей обстановке. Оценщики не знали, какие материалы были созданы с помощью ChatGPT.
Половине участников для второго задания был предоставлен доступ к чат-боту ChatGPT-3.5, разработанному компанией OpenAI. Эти пользователи выполнили задачи на 11 минут быстрее, чем контрольная группа, а их средняя оценка качества увеличилась на 18 процентов.
Данные также показали, что неравенство в производительности между работниками уменьшилось, а это означает, что работники, получившие более низкую оценку по первому заданию, больше выиграли от использования ChatGPT для второго задания.
Исследователи говорят, что задачи были в целом репрезентативными для задач, которые такие профессионалы видят в своей реальной работе, но они отметили ряд ограничений. Поскольку они использовали анонимных участников, исследователи не могли требовать контекстных знаний о конкретной компании или клиенте. Они также должны были давать четкие инструкции для каждого задания, тогда как реальные задачи могут быть более открытыми. Кроме того, исследователи не считали целесообразным нанимать специалистов по проверке фактов для оценки точности результатов. Точность является серьезной проблемой для современных технологий генеративного ИИ.
Исследователи заявили, что эти ограничения могут уменьшить потенциал повышения производительности ChatGPT в реальном мире. Тем не менее, они считают, что результаты показывают перспективность технологии — идея, поддерживаемая другим выводом исследования: сотрудники, подвергшиеся воздействию ChatGPT во время эксперимента, в два раза чаще сообщали об использовании его на своей реальной работе через две недели после эксперимента.
«Эксперимент показывает, что он дает значительные преимущества в скорости, даже если эти преимущества в реальном мире меньше, потому что вам нужно тратить время на проверку фактов и написание подсказок», — говорит Ной.
Просмотр макроса
Исследование предложило подробный взгляд на влияние, которое такие инструменты, как ChatGPT, могут оказать на определенные письменные задачи. Но экстраполировать это влияние, чтобы понять влияние генеративного ИИ на экономику, сложнее. Это то, над чем исследователи надеются работать дальше.
«Существует так много других факторов, которые будут влиять на заработную плату, занятость и смены в разных секторах, которые потребуют доказательств, которых нет в нашей статье», — говорит Чжан. «Но величина сэкономленного времени и повышение качества очень велики в нашей газете, поэтому кажется, что это довольно революционно, по крайней мере, для определенных типов работы».
Оба исследователя согласны с тем, что, даже если признать, что ChatGPT повысит производительность многих работников, предстоит еще много работы, чтобы выяснить, как общество должно реагировать на распространение генеративного ИИ.
«Политика, необходимая для адаптации к этим технологиям, может сильно различаться в зависимости от результатов будущих исследований», — говорит Чжан. «Если мы думаем, что это повысит заработную плату низкооплачиваемых работников, это будет совсем другое следствие, чем если бы это увеличило неравенство в оплате труда за счет повышения заработной платы и без того высокооплачиваемых работников. Я думаю, что есть много последующих экономических и политических эффектов, которые важно определить».
Исследование было поддержано грантом Emergent Ventures, Центром Mercatus, Университетом Джорджа Мейсона, грантом Фонда Джорджа и Оби Шульц, Департаментом экономики Массачусетского технологического института и стипендией Национального научного фонда.