Другие эксперты в области расследований А. Раду и Д. Гнап также считают эти панели данных наиболее полезными и актуальными. Авторы пособия «Пора расследовать!» отмечают, что Investigative Dashboard предоставляет возможность бесплатно запросить помощь экспертов по поиску информации в закрытых или платных реестрах компаний или недвижимости.
В подборку инструментов сбора данных для журналистов-расследователей они включают и базу данных офшорных компаний в самых известных юрисдикциях, собранную Международным консорциумом журналистов-расследователей (ICIJ) - Offshore Leaks Database. При этом, авторы выделяют «утечки» информации, которые легли в основу Offshore Leaks Database, как отдельный вид источника в работе журналиста-расследователя. В пример они приводят резонансный международный проект «Panama Papers» - глобальное расследование сотен журналистов из 80 стран об использовании офшорных компаний политиками и бизнесменами. Расследования, вошедшие в проект, базируются на основе десятков тысяч документов из переписки одного из крупнейших мировых регистраторов офшоров - панамской компании Mossack&Fonseca.
Технологию работы с таким источником информации описывает другой автор Е. Константарас. В «Учебном пособии для дата-журналистов» («Data Journalism Manual») автор в качестве примера антикоррупционного расследования, основанного на данных, рассматривает серию репортажей Международного консорциума журналистов-расследователей (ICIJ), созданную с помощью утечки более чем 2,5 млн документов о частных деловых сделках более 120 тыс. офшорных компаний и фондов. Как замечает Константарас, «репортажи изобличили тайные сделки политиков и миллиардеров по всему миру и продемонстрировали лазейки в законах, которыми те воспользовались» Константарас Е. Учебное пособие по дата-журналистике // Региональный центр ПРООН для стран Европы и СНГ URL: http://www.odecanet.org/wp-content/uploads/2017/01/Module-1-UNDP-student_ru_loc.pdf (дата обращения: 12.05.2018).
В основу публикаций легли файлы, в которых содержались денежные переводы, даты регистрации, связи между компаниями и отдельными лицами. Журналисты «использовали как современные методы работы с данными, так и традиционные методы репортажа, чтобы разобраться в 260 гигабайтах полученных неструктурированных данных, охватывающих период свыше 30 лет» Константарас Е. Учебное пособие по дата-журналистике // Региональный центр ПРООН для стран Европы и СНГ URL: http://www.odecanet.org/wp-content/uploads/2017/01/Module-1-UNDP-student_ru_loc.pdf (дата обращения: 12.05.2018), - пишет Константарас. Создатели репортажей изучали утечки, сверяясь с общедоступными документами - в частности, материалами судебных заседаний.
Еще одна глобальная база данных, которую выделяют авторы пособия «Пора расследовать!», - международный реестр компаний и их собственников OpenCorporates, которая предоставляет как бесплатный, так и платный доступ в зависимости от типа запрашиваемой информации. Другой платный источник, который выделяют авторы пособия, - глобальный реестр компаний Orbis, разработанный бельгийской компанией Bureau van Dijk, в котором хранится информация о 280 млн компаниях по всему миру. Другой сервис, который агрегирует сразу несколько видов данных - от регистрационных данных компаний до коммунальных платежей индивидуальных лиц, - Enigma Public.
Помимо использования государственных, коммерческих и созданных сообществами профессиональных расследователей баз данных, существуют и другие методы сбора информации для антикоррупционных расследований. Так, автор «Учебного пособия для дата-журналистов» («Data Journalism Manual») Е. Константарас перечисляет инструменты для поиска труднодоступных данных онлайн. Во-первых, это такая технология как расширенный поиск в Google. Например, чтобы найти четкие совпадение по словосочетаниям, необходимо использовать кавычки. Если нужно исключить слово из поисковой выдачи, достаточно поставить знак минуса перед словом, которое не должно упоминаться.
Кроме этого, отмечает Константарас, расширенный поиск Google позволяет указать язык результатов, ограничить выдачу результатов до сайтов из определенной географической области, а также ограничить результаты новейшим контентом, выставив дату обновления. В дополнение к этому, технология позволяет осуществлять поиск только на конкретном сайте (для этого надо использовать следующий формат для поиска - site:url) или найти файлы в определенном формате (необходимо ввести рядом с поисковым запросом - filetype:расширение, указав интересующий формат данных - xls, pdf, csv, doc).
Еще одним полезным методом сбора данных для расследователей может стать работа с социальными сетями и картографическими сервисами. В одной из статей пособия «Журналистские расследования случаев трансграничной коррупции. Методы и примеры» - «Объединяя новые инструменты расследования и традиционную журналистику: открытые источники» приводится интервью с исследователем международной журналистской сети Bellingcat Э. Толером. В нем он дает собственное определение понятия расследование по открытым источникам. По мнению Толера, расследование по открытым источникам - это любой вид расследования, в котором анализу подвергаются материалы, полностью открытые для публики и доступные для перепроверки.
Э. Толер перечисляет источники, которые в своей работе использует расследовательская сеть Bellingcat: социальные сети (Facebook, Twitter, Instagram, Вконтакте), видео на YouTube, спутниковая фотосъемка (Google Earth или Яндекс Карты). По словам исследователя, главные навыки для проведения расследований по открытым источникам - уметь обращаться с Google Maps, анализировать снимки со спутников, вести поиск по ключевым словам и владеть навигацией в социальных сетях Журналистские расследования случаев трансграничной коррупции. 2018 // EU-Russia Civil Society Forum. URL:
http://eu-russia-csf.org/fileadmin/Docs/Trans-Border_Corruption/ManualTransborderCorruption02.02.2018_ru.pdf (дата обращения: 12.05.2018).
О сборе данных в социальных сетях пишут и другие исследователи. Авторы пособия «Пора расследовать!» А. Раду и Д. Гнап советуют для сбора данных из социальной сети Facebook сервис graph.tips, позволяющий вычислить активность пользователя, имея лишь ссылку на его страницу. Х. Эсс в книге «Руководство по верификации для журналистских расследований» («Verification Handbook for investigative reporting») предлагает использовать для сбора информации в социальных сетях такой инструмент как Echosec. Сервис позволяет осуществлять поиск сообщений и изображений из нескольких социальных сетей по адресу. Например, Echosec может помочь найти аккаунты людей, которые проживают или останавливаются на определенных территориях, что может быть крайне полезным для подготовки антикоррупционного расследования, связанного с незадекларированной недвижимостью.
Другая разновидность данных, которая может пригодиться при проведении антикоррупционных расследований, - это данные о перемещении транспорта. Л. Марзук в своем пособии перечисляет такие ресурсы: FlightRadar24 для отслеживания полетов самолетов; Vessel Tracker для проверки движения морских судов, база таможенных данных США Port Examiner для изучения данных о морских перевозках импортных товаров, проходящих через США.
Инструкцию для использования FlightRadar24 на своем сайте публикует медиа-проект «Четвертый сектор». Как пишут авторы статьи, сервис отслеживает самолеты коммерческих авиалиний, большинство частных самолетов, военные грузовые и пассажирские суда. Сайт предоставляет возможности для поиска по аэропорту вылета и прилета, маршруту, номеру самолета и номеру рейса. Бесплатная история полетов доступна за семь дней, за плату можно получить все архивные данные. В списке «Четвертого сектора» можно найти аналог FlightRadar24 - еще один сервис для отслеживания полетов - Planefinder, работающий по такому же принципу.
Авторы «Toolbox расследователя» перечисляют и инструменты для наблюдения за перемещением морских и речных судов - это MarineTraffic и Vessel Finder. На этих сайтах можно найти конкретное судно, если известен его идентификационный номер, и отследить его маршрут. Искать также можно по локации, по конкретному виду судна. Именно с помощью сервиса Vessel Finder Фонд по борьбе с коррупцией провел расследование «Новые приключения молодожёна-чиновника: яхта Maltese Falcon за 26 млн рублей в неделю» про отдых пресс-секретаря президента Дмитрия Пескова.
Всеми перечисленными выше инструментами может воспользоваться любой автор антикоррупционного расследования без необходимости обучения специальным навыкам из других областей. Однако наряду с ними существуют и более сложные инструменты сбора информации. Авторы «Пособия по журналистике данных» («The Data Journalism Handbook»), разработанной Open Knowledge Foundation и European Journalism Centre, отмечают, что собрать данные из Интернета можно с помощью размещенных в сети API. Application Programming Interface расшифровывается как «интерфейс программирования приложений» и представляет собой набор функций, которые позволяют запросить данные у онлайн баз или приложений.
Для проведения антикоррупционных расследований в России может быть полезен API сайта «Госзатраты» (clearspending.ru), где хранятся все государственные контракты. Важно отметить, что работа с API требует навыков программирования - наиболее современным и подходящим для этого языком программирования признан Python. «Это просто фантастический способ получения доступа к государственным или коммерческим данным, а также к данным на сайтах социальных СМИ» Линденберг Ф. Получение данных из сети // Пособие по журналистике данных URL: https://ria.ru/files/book/_site/ch04_3.html (дата обращения: 12.05.2018), - так описывает работу с API Ф. Линденберг из Open Knowledge Foundation в статье «Получение данных из сети» в «Пособии по журналистике данных».
Еще один метод, который предлагает Ф. Линденберг, - web-scraping или так называемое «выскребание» данных с веб-страниц. Этот способ помогает, когда не получается скопировать для дальнейшей работы в Excel таблицу с интересными журналисту данными: если информация разбросана по большому количеству сайтов, вместо того, чтобы копировать ее вручную, имеет смысл воспользоваться инструментами для веб-скрейпинга. «Преимущество «выскребания» заключается в том, что вы можете применить этот метод практически на любом сайте - от прогнозов погоды до правительственных расходов, даже если на этом сайте нет API для доступа к сырым данным» Там же., - пишет автор.
Автор перечисляет следующие инструменты для «выскребания» данных с веб-страниц: Readability, который помогает извлечь текст из страницы сайта, Scraper - расширение для браузера Chrome, извлекающее таблицы из веб-сайтов.
По определению доцента и ведущего инженера Университета ИТМО, эксперта по дата-журналистике И. Радченко, «веб-скрейпинг - это технология получения данных из веб-страниц» Радченко И. Скрейпинг // Журналистика данных. URL: http://www.datadrivenjournalism.ru/2015/03/02/scraping/ (дата обращения: 12.05.2018). Она советует другие инструменты для скрейпинга данных - OpenRefine, import.io, расширение Google Web Scraper.
Н. Мулвад - сооснователь Global Investigative Journalism Network, в своей статье «Drilling Down: A Quick Guide to Free and Inexpensive Data Tools» для превращения таблиц на HTML-странице в машиночитаемые данные предлагает расширение Table Capture for Chrome.
Журналист-расследователь Е. Константарас также отмечает, что некоторые данные могут быть представлены в неструктурированных форматах: например, встроены на веб-сайты. «В таком случае программист должен написать небольшой код, чтобы распознать структуру данных и извлечь их в необходимый формат» Константарас Е. Учебное пособие по дата-журналистике // Региональный центр ПРООН для стран Европы и СНГ URL: http://www.odecanet.org/wp-content/uploads/2017/01/Module-1-UNDP-student_ru_loc.pdf (дата обращения: 12.05.2018), - пишет она и советует для скрейпинга данных языки программирования Python или Ruby и такой инструмент как morph.io.
При проведении антикоррупционного расследования могут быть полезны не только данные, но и метаданные - то есть данные о данных, информация об информации. К примеру, «цифровое изображение может содержать информацию о камере, на которую был сделан снимок, дату и время, а также географические координаты, где он был сделан» Decoding Data // Exposing the invisible. URL: https://exposingtheinvisible.org/guides/decoding-data (дата обращения: 12.05.2018), - пишут авторы пособия «Decoding Data». Метаданные можно получать не только из изображений, но и из видео, аудио-файлов и PDF-файлов.
Примером использования метаданных в антикоррупционном расследовании может служить публикация Associated Press о конгрессмене-республиканце из штата Иллинойс Аароне Шоке. Журналисты извлекли данные геолокаций на снимках политика в социальной сети Instagram, его командировочные расходы и данные о полетах на самолете и пришли к выводу, что он потратил деньги налогоплательщиков на частные перелеты.
Авторы пособия перечисляют инструменты для извлечения метаданных: это ExifTool, The Exifer, Jeffrey's Image Metadata Viewer, Read Exif data. Достаточно загрузить изображение в один из сервисов и получить набор метаданных для дальнейшего анализа.
Когда необходимые для расследования данные собраны, необходимо проверить их качество. Об этом пишет в статье «Расследование с базами данных: проверка качества данных», включенной в «Руководство по верификации для журналистских расследований», ее автор Д. Сеньини. «Важный урок, который я усвоила за два десятилетия использования данных для расследований, состоит в том, что данные лгут» Сеньини Д. Расследование с базами данных: проверка качества данных // Руководство по верификации для журналистских расследований. URL: http://verificationhandbook.com/book2_ru/chapter5.php (дата обращения: 12.05.2018), - пишет автор. В своей работе она описывает две задачи при проверке информации в расследованиях, где данные играют первичную роль: первичная оценка правильности данных сразу после их сбора и проверка выводов на этапе анализа.