Сломанный код. Внутри Facebook и борьба за раскрытие его вредных секретов - Джефф Хорвиц

Все старались работать сообща, чтобы сделать лучший продукт, и что бы ни решил Цукерберг, это было хорошо. Предложения Джина не имели такого оттенка. Он был неизменно уважителен, но при этом четко обозначал диапазон приемлемых позиций. Алекс Шульц, директор по маркетингу компании, как-то заметил коллеге, что проблема Джина в том, что он заставляет Цукерберга чувствовать себя дерьмом.

В июле 2019 года Джин написал памятку под названием "Снижение вирусности как стратегия честности" и разместил ее в группе Workplace, состоящей из 4 200 человек и предназначенной для сотрудников, занимающихся проблемами честности. "Растет количество исследований, показывающих, что некоторые вирусные каналы используются для плохого чаще, чем для хорошего", - говорилось в памятке. "Каковы должны быть наши принципы в отношении того, как мы к этому относимся?" Далее Джин перечислял, приводя многочисленные ссылки на внутренние исследования, как продукты Facebook регулярно добивались более высоких темпов роста за счет качества контента и безопасности пользователей. Функции, которые приводили к незначительному росту использования, были непропорционально ответственны за спам в WhatsApp, взрывной рост групп ненависти и распространение ложных новостей через повторные публикации, написал он.

Ни один из примеров не был новым. Каждый из них ранее приводился командами по разработке продуктов и исследованиям как отдельные проблемы, требующие либо исправления дизайна, либо дополнительных мер. Но Джин сформулировал их по-другому. По его словам, они были неумолимым результатом усилий Facebook по ускорению и развитию платформы.

Реакция коллег была восторженной. "Вирусность - это цель упорных плохих актеров, распространяющих вредоносный контент", - написал один из исследователей. "Полностью поддерживаю", - написал другой, отметив, что вирусность помогла разжечь антимусульманские настроения в Шри-Ланке после теракта. "Это 100% направление, в котором нужно двигаться", - написал Брэндон Сильверман из CrowdTangle.

После более чем пятидесяти положительных комментариев Джин столкнулся с возражениями Джона Хегемана, руководителя отдела News Feed, который к тому времени получил повышение и стал главой команды. Да, Джин, вероятно, прав в том, что вирусный контент непропорционально хуже невирусного, написал Хегеман, но это не означает, что контент плох в среднем.

Джин ответил, что неважно, что в среднем контент был нормальным. Проблема в том, что продукты Facebook ухудшают качество контента. То, что не вызывало возражений, становилось бессмысленным. Опросы, отметил Джин, показали, что пользователей Facebook, как правило, раздражает вирусный контент, даже если им делятся близкие друзья.

Facebook, скорее всего, не придется устранять вирусность, чтобы справиться с проблемой, продолжил он, проиллюстрировав свой тезис грубым графиком, предполагающим, что компания может сократить основную часть вирусного вреда без существенного ущерба для полезности платформы для пользователей. Джин отметил, что график был гипотетическим, потому что Facebook никогда не пробовал набирать обороты. Возможно, время пришло.

Хегеман был настроен скептически. Если Джин прав, ответил он, то Facebook, вероятно, следовало бы предпринять радикальные меры, например закрыть все решетории, а компания не очень-то настроена на такие попытки. "Если мы удалим небольшой процент повторных покупок из инвентаря людей", - написал Хегеман, - "они решат реже возвращаться в Facebook".

Хегеман не был враждебен по отношению к сотрудникам Integrity. Многие из тех, кто работал с ним, считали его своим союзником. Но изменить Facebook таким образом, чтобы уменьшить число его ежедневных пользователей, было просто немыслимо.

Через несколько месяцев после этого обмена мнениями компания пересмотрела руководство по тестированию изменений в продукте и интерпретации результатов экспериментов. Какой бы ни была эволюция мышления компании за годы, прошедшие после выборов 2016 года, - будь то большее внимание к качеству контента или лучшее понимание опасностей вирусности - "Ежедневное количество пользователей" по-прежнему оставалось ее северной звездой. В руководстве говорилось, что любая предложенная функция, уменьшающая количество ежедневных пользователей Facebook хотя бы на 0,1 процента, почти наверняка будет мертва по прибытии.

"Правило № 1, DAP священен", - провозглашалось на презентации.

Компания старалась не трогать другие показатели, такие как количество зарегистрированных сессий, проведенное время и количество оригинальных постов. Но когда речь заходила о показателях дезинформации или других вредных факторах, на которые Джин обращала внимание, еще не было защитных перил, которые не позволяли бы командам, ориентированным на рост, изменять Facebook таким образом, чтобы это вредило показателям целостности, и даже не предупреждали бы об этом. Потребовалось до второй половины 2019 года, чтобы кто-то создал приборную панель, которая могла бы обнаружить, когда другие продуктовые команды подрывают работу сотрудников, занимающихся вопросами целостности.

Как только новая система заработала, команда Facebook по обеспечению честности поняла, что у нее есть проблема. Изменения в платформе, ориентированные на рост, похоже, активно усугубляли проблемы честности. В служебной записке исследователя Civic отмечалось, что за год количество просмотров контента со страниц, на которых регулярно размещалась дезинформация, выросло на 17 %. Просмотры контента со страниц, которые нарушали стандарты сообщества Facebook не менее четырех раз за последние девяносто дней, выросли на 64 %.

После двух с половиной лет самоанализа мысль о том, что изменения в пользу роста иногда усугубляют проблемы целостности, не могла стать полной неожиданностью ни для кого в Facebook. Но никто не мог понять, насколько прямо противоположны эти две цели. По крайней мере с конца 2018 года, а почти наверняка и задолго до этого, коллеги Сивика в других подразделениях Facebook наращивали количество пользователей и получали бонусы, отдавая предпочтение контенту, с которым компания публично обещала бороться.

С приближением президентских праймериз 2020 года Сивик утверждал, что компании наконец-то нужно понять, как перестать стрелять себе в ногу.

"Необходимо провести важные беседы, - пишет исследователь, - чтобы определить, действительно ли Facebook считает, что выгода от дополнительного 1-процентного роста перевешивает вред от демонстрации пользователям на 10 процентов больше дезинформации".

С точки зрения Civic, ответ на этот вопрос был очевиден. Несмотря на усилия команды, просмотры контента страниц, неоднократно нарушавших правила Facebook, выросли с начала года на 23 %. В преддверии выборов 2020 года компания вряд ли могла позволить себе дальнейшее ослабление своей защиты.

"Необходимо держать удар", - написал исследователь в служебной записке. Отмена изменений в продуктах, ориентированных на рост и в наибольшей степени ответственных за это увеличение, была такой же срочной, как необходимость "поставить мешки с песком во время шторма".

Если в Civic полагали, что руководство Facebook будет потрясено открытием, что усилия компании, направленные на рост, усугубили проблемы с честностью и неподкупностью Facebook, то они ошиблись. Цукерберг не только враждебно относился к будущей работе по борьбе с ростом; он начал сомневаться, что некоторые из прошлых усилий компании по обеспечению честности были ошибочными.

Получив право накладывать вето не