Перепись населения 2018 года в россии: Пробная перепись населения 2018 года

Этот эксклюзивный отчет о технических проблемах Бюро переписи населения появился после того, как правительственные надзорные органы зафиксировали другие проблемы с безопасностью, задержки и перерасход средств.

Счетная палата правительства (GAO), фискальный наблюдатель Конгресса, заявила, что перепись 2020 года подвержена высокому риску взлома или сбоя системы, который может помешать людям заполнять опросы. GAO также заявило, что системы информационных технологий бюро не будут полностью протестированы до начала переписи почти всех американцев 1 апреля 2020 года, и что 15 систем бюро, включая механизм сбора данных Pega, находятся под угрозой исчезновения. сроки разработки до переписи.

Тем временем генеральный инспектор Министерства торговли в октябре объявил о планах провести аудит технологических операций бюро, спустя несколько месяцев после выявления неэффективного управления его облачной системой хранения данных, что сделало его уязвимым для хакеров.

Кук отказался комментировать аудит, но сказал, что бюро готово «провести самую автоматизированную, современную и динамичную десятилетнюю перепись в истории».

Усилия по переводу переписи в онлайн направлены на оптимизацию процесса подсчета, повышение точности и сдерживание роста затрат по мере роста населения и снижения количества ответов на опросы. С поправкой на доллары 2020 года, 19Перепись 70 обошлась в 1,1 миллиарда долларов, и эта цифра неуклонно росла до 12,3 миллиарда долларов к 2010 году, по последним подсчетам. Сумма на 2020 год прогнозируется на уровне 15,6 млрд долларов, включая резерв на перерасход средств в размере 1,5 млрд долларов.

Технологические проблемы бюро остались вне поля зрения, поскольку Вашингтон сосредоточился на стремлении администрации Трампа добавить вопрос, спрашивая респондентов, являются ли они гражданами США, что является частью более масштабных усилий по обузданию нелегальной иммиграции.

Президент отказался от этой инициативы в июле после того, как Верховный суд США отклонил ее, подбадривая группы по защите гражданских прав, которые опасались, что это оттолкнет иммигрантов от ответа и будет стоить их сообществам политического представительства и федеральных долларов. Тем не менее, исследование, проведенное 18 октября беспартийным исследовательским центром Pew Research Center, показало, что более одной пятой латиноамериканцев заявляют, что могут не участвовать в переписи населения в следующем году, по сравнению с 12% белых.

Почему перепись имеет значение — здесь

«ЕДИНСТВЕННАЯ ТОЧКА ОШИБКИ»

Капитальный ремонт технологии переписи начался с опозданием, отчасти потому, что Конгресс предоставил бюро меньше средств, чем оно запрашивало, на протяжении большей части десятилетия. По словам четырех человек, знакомых с операциями по обеспечению безопасности в бюро, время от времени руководство бюро отдавало предпочтение скорости, а не безопасности.

По их словам, новые технологические системы были протестированы в условиях, которые были уязвимы для хакеров, несмотря на наличие неустраненных рисков, которые были выявлены собственной командой безопасности бюро. По словам трех человек, тестирование было санкционировано руководством бюро и поддержано T-Rex вопреки возражениям сотрудников службы безопасности, которые хотели сначала устранить уязвимости. По словам людей, это вызвало внутреннюю напряженность, которая в конечном итоге привела к тому, что один начальник службы безопасности покинул свой пост.

Кук из Бюро переписи отказался комментировать, было ли тестирование проведено вопреки возражениям сотрудников службы безопасности, но сказал, что бюро следует строгому протоколу, чтобы минимизировать риск.

Бюро начало внедрять свои технологические планы в 2014 году, обещая технологический прорыв с 52 отдельными системами. Двадцать семь из них будут использоваться для сбора данных переписи, включая создание веб-сайта, на котором респонденты отправляют формы, и инструменты, используемые дверными молотками, которым поручено подталкивать отставших.

Согласно публичным презентациям Бюро переписи населения в 2018 году, большая часть затрат Бюро переписи населения на технологии в размере 5 миллиардов долларов США пошла на семь основных подрядчиков, которые вместе привлекли еще 41 компанию в качестве субподрядчиков. По словам Баччигалупи и еще пяти человек, знакомых с дискуссиями, два сторонних агентства — Цифровая служба США и 18F — начали предупреждать чиновников о чрезмерном подходе. Внешние консультанты настаивали на более простой системе, которую было бы легче защитить от взломов и сбоев.

Цифровая служба была создана в 2014 году президентом Бараком Обамой после проблемного запуска Healthcare.gov, веб-сайта, предназначенного для того, чтобы позволить американцам подписаться на медицинское страхование в рамках Obamacare. Из-за недостатков дизайна сайт был перегружен трафиком, превышающим ожидаемый, и многие пользователи не могли зарегистрироваться в течение нескольких недель. По словам двух человек, представители Digital Service рассматривали перепись 2020 года как потенциальное повторение этого фиаско.

Подразделение 18F Администрации общего обслуживания, названное в честь адреса его офиса в Вашингтоне, округ Колумбия, действует как частный консультант, и ему платят агентства, которым нужна техническая помощь.

18F отказался комментировать эту историю, а цифровая служба не ответила на запросы о комментариях.

Дебаты между руководством Бюро переписи населения и его консультантами из Цифровой службы и 18F сосредоточились на двух широких подходах к производству программного обеспечения: монолитный или модульный.

Монолитная структура, подобная той, которую придумали чиновники Бюро переписи населения, объединяет различные функции в одну систему. В случае с переписью это может означать систему, которая позволяет людям отвечать на вопросы опроса на веб-сайте, преобразовывает входящие ответы в данные и сохраняет их. Монолитные системы построить проще, но критики говорят, что они становятся безнадежно сложными, когда что-то идет не так. Проблема с одной функцией может остановить весь процесс.

«Это единственная точка отказа», — сказал Баччигалупи.

В модульной системе, напротив, инженеры создают разные части программного обеспечения для каждой функции, а затем пишут код, позволяющий им взаимодействовать. Хотя перемещать данные между различными компонентами сложнее, риск сбоя системы намного меньше. Если одна функция выходит из строя, другие могут продолжать работать, пока она отремонтирована.

Должностные лица переписи привлекли консультантов 18F и Digital Service на долгосрочной основе, чтобы помочь с аспектами проекта, но в значительной степени проигнорировали их рекомендации по применению более модульного подхода, сказали Бачигалупи из 18F и Марианна Беллотти, бывший агент Digital Service, который консультировали по проекту в 2017 году.

«В 2017 году я довольно последовательно говорил им: если вы подвергнетесь атаке типа «отказ в обслуживании», я не уверен, что ваша архитектура выдержит ее», — сказал Беллотти.

При атаке типа «отказ в обслуживании» хакер пытается предотвратить доступ законных пользователей к программе, часто перегружая ее большим количеством запросов на подключение, чем она может обработать. Любые длительные перерывы в работе во время переписи уменьшат количество ответивших, что поставит под угрозу точность данных и сделает их сбор более дорогим.

Кук, представитель переписи, не стал комментировать, почему бюро выбрало более монолитный подход, но сказал, что консультанты, выступающие против этого пути, не полностью понимают его системы.

«18F и USDS изучили части наших систем и дали рекомендации, но ни у одной из групп не было общего понимания того, как эти системы интегрируются, или их возможностей», — сказал Кук.

Затраты на перепись населения выросли до более чем 15 миллиардов долларов —

РОСТ ЗАТРАТ

Беллотти и Баччигалупи говорят, что они неоднократно говорили бюро в 2016 и 2017 годах, что технология Pega не подходит для его основных задач — создания веб-сайта с самостоятельным ответом и мобильные приложения, которые будут использоваться дверными молотками переписи. Они утверждали, что код Pega потребует такой тщательной настройки, что конечный продукт будет медленным и подверженным сбоям.

«Если вы хотите построить самую быструю машину в мире, вы должны построить ее с нуля», — сказал Баччигалупи. «Вы не пытаетесь настроить туристический автобус, пока он не станет самой быстрой машиной в мире».

Внешние консультанты Бюро переписи населения из Института разработки программного обеспечения Университета Карнеги-Меллона разделили обеспокоенность и сообщили бюро в меморандуме 2016 года, который был рассмотрен Reuters, что коммерческие продукты, такие как Pega, «не предназначены для удовлетворения требований организации».

Ни бюро, ни Pega не прокомментировали утверждение о том, что необходимость настройки делает систему дорогой и ненадежной.

До того, как нанять Pega, у бюро уже была работоспособная система сбора данных, созданная штатными сотрудниками, сказал Баччигалупи. Начиная с 2014 года небольшие команды создавали прототипы онлайн-ответов и мобильных приложений, которые, казалось, работали. Прототип онлайн-ответа, известный как Primus, был создан с минимальными затратами, помимо зарплаты полудюжины программистов.

Внутренние системы были протестированы, и Primus использовался в реальных условиях во время небольших исследований, проведенных бюро. Все показали хорошие результаты, сказал в интервью Джон Томпсон, который занимал должность директора Бюро переписи населения с 2013 по 2017 год.

В публичном отчете за 2016 год, объясняющем выбор внешнего подрядчика, бюро назвало продукт Pega «готовым коммерческим решением», которое может работать с минимальными изменениями. Pega будет делать то же, что и Primus и собственные мобильные приложения, но дешевле, с ориентировочной ценой в 84,5 миллиона долларов по сравнению с прогнозом в 127 миллионов долларов для собственной разработки. Pega также предоставит другие ключевые функции, такие как передача ответов пользователей в хранилище данных.

Реальность была еще более запутанной. Готовое решение Pega потребовало стольких модификаций, что стало «неузнаваемым», — сказал один из бывших сотрудников Бюро переписи населения, участвовавший в процессе заключения контрактов. В январе 2018 года бюро почти удвоило смету расходов Pega до 167,3 млн долларов. На данный момент компания потратила около 149 миллионов долларов.

Контрактные документы, просмотренные агентством Reuters, показали, что около 121 миллиона долларов по контракту Pega было направлено на «подрядные услуги», категорию, которая, по словам двух бывших сотрудников бюро по контрактам, обычно относится к труду, необходимому для написания и настройки кода. Эта цифра более чем в 13 раз превышает первоначальную оценку Pega по услугам подряда.

Бюро не прокомментировало рост расходов. Пинчман, пресс-секретарь Pega, заявила, что работа ведется «в рамках бюджета» и что «любые изменения в оценках будут результатом изменений в масштабах проекта, а также того, что Бюро переписи населения определит дополнительные возможности для нас, чтобы повысить ценность».

Томпсон, руководивший бюро в то время, когда оно приняло решение о Pega, назвал это решение «трудным вызовом». Хотя Томпсон и его команда рассматривали Primus как способную масштабироваться для переписи 2020 года, он сказал, что перспективы масштабирования внутренних прототипов мобильных приложений для переписчиков менее очевидны.

По мере того, как проблемы Pega стали более очевидными, чиновники переписи рассмотрели вопрос о возврате к Primus, внутренней системе сбора данных, сообщили три источника, знакомые с мнением бюро. Не далее как этим летом они инструктировали сотрудников «создать Primus, если он понадобится», — сказал один из этих людей.

ПРОБЛЕМЫ БЕЗОПАСНОСТИ

Единственное полномасштабное испытание системы состоялось в Провиденсе, Род-Айленд, в прошлом году. Бюро провело своего рода генеральную репетицию — по сути, мини-перепись, при которой данные респондентов собирались и хранились в Интернете.

Именно тогда доступ к системе был осуществлен с IP-адресов в России, сообщили два источника в службе безопасности переписи. Другие хакеры запустили атаку системы доменных имен на веб-сайт, которую один источник назвал похожей на атаку типа «отказ в обслуживании».

Атака системы доменных имен была не такой тревожной, как то, что она показала о способностях T-Rex реагировать на такую ​​​​угрозу, по словам пяти человек, участвовавших в безопасности переписи.

Сотрудники T-Rex «не знали, как получить доступ к средствам защиты от кибербезопасности, которые были на месте, и они не знали, что искать», — сказал человек, знакомый с операцией. Этот источник добавил, что бюро приобрело лицензию на использование программного обеспечения для криминалистического анализа под названием EnCase для расследования взломов более года назад, но T-Rex еще предстояло полностью интегрировать EnCase в систему безопасности, когда произошли инциденты безопасности.

Служба безопасности T-Rex столкнулась с проблемами на раннем этапе. GAO сообщило, что к июню 2018 года Управление информационной безопасности (OIS) переписи населения отметило более 3000 недостатков в соблюдении требований безопасности, 2700 из которых были связаны с компонентами, разрабатываемыми T-Rex.

OIS выразила обеспокоенность по поводу флагов и рекомендовала разобраться с большинством из них перед тестированием, по словам двух сотрудников службы безопасности, знакомых с этим вопросом.