Использование открытых финансовых данных.Практика и

Использование
открытых финансовых данных.
Практика и визуализация
Иван Бегтин
НП “Информационная культура”
Что такое открытые финансовые
данные и связанное с ними?
Госденьги
•
Бюджеты
•
Налоги
•
Субсидии
•
Госмунзакупки
•
Госдолг, национальные
фонды и так далее
Госуслуги
•
Реестр госучреждений
Bus.gov.ru (включая их
бюджеты(
Справочники
• Федеральная адресная
информационная система
(ФНС России)
• Бюджетные справочники
• Иные справочники
Where Does Our Money Go?
Великобритания
http://wheredoesmymoneygo.org/
Бюджет Великобритании с
раскладкой по регионам и в
виде графика Bubble Tree.
Открытый код
https://github.com/openspending/
wheredoesmymoneygo.org
И
https://github.com/okfn/bubbletree
The National Budget
Дания
http://wheredoesmymoneygo.org/
Визуализация бюджета
Дании с открытым кодом и
разработанная во время
хакатона.
Открытый код
https://github.com/informeren/data
viz-budget
New York City Budget Visualization
США, Нью Йорк
Бюджет Нью Йорка в виде
диаграммы BubbleChart.
Открытый код
https://github.com/chriswhong/nyc
budget
Honolulu City Budget
США, Гавайи, Гонолулу
Визуализация бюджета
Гонолулу с помощью
диаграммы Sankey для
отображения потоков.
Открытый код
https://github.com/codeisland/RIBudget-Sankey
Госзатраты
Россия, Москва
http://clearspending.ru
Мониторинг всех
госконтрактов
Данные Федерального
Казначейства +
Минфина России +
Минэкономразвития России
Открытое API
http://clearspending.ru/page/fordevelopers/
Визуализация данных
Выбор способа визуализации
Интерактивно
http://bit.ly/16NHT73
Какая бывает визуализация?
Примеры
Бюджеты->
BubbleTree
Интерактивно http://bit.ly/1csa51y
Исходный код https://github.com/okfn/bubbletree
Интерактивно http://ibm.co/1geu7gX
Бюджеты->
IBM Many Eyes
Интерактивно http://bit.ly/17uMw6y
Бюджеты->
Бюджет Москвы (budget.mos.ru)
Времянные ряды->
OKFN Timeliner
Интерактивно http://timeliner.okfnlabs.org/
Исходный код https://github.com/okfn/timeliner
Интерактивно https://opendata.socrata.com
Любые данные->
Socrata
Интерактивно https://mapbox.com
Геоданные ->
MapBox
Интерактивно https://maps.yandex.ru
Геоданные ->
Яндекс.Карты
Сравнение
Интерактивен
Открытый код
Платформа
Бюджет
Москвы
Нет
Нет
Нет
BubbleTree
Да
Да
Нет
IBM Many Eyes
Да
Нет
Да
OKFN Timeliner
Да
Да
Да
Socrata
Да
Нет
Да
MapBox
Да
Нет
Да
Яндекс Карты
Да
Нет
Да
Много вопросов для себя
Ответы на вопросы. Контекст
• Умею ли я программировать?
• Понимаю ли я как объяснить задачу
программисту?
• Умею ли я рисовать ?
• Понимаю ли я как объяснить задачу
дизайнеру?
Ответы на вопросы. Данные
• Есть ли у данных геопривязка (координаты,
геообласть)?
• Есть ли у данных даты и значимы ли они?
• Есть ли у данных численные показатели?
• Есть ли у данных суммы ?
• Обладают ли данные большим числом
значимых связей ?
• Существуют ли данные в нужном формате?
Ответы на вопросы. Ограничения
• Надо ли соответствовать формату/шаблону
статьи?
• Надо ли поддерживать мобильные устройства?
• Надо ли поддерживать планшенты?
• Какой запас времени у меня есть?
Инструменты
Data-driven
Documents
•
Сайт: http://d3js.org/
•
Открытый код
•
Визуализируется
почти все виды
данных
•
Легко встраивается в
сайты
•
Надо уметь
программировать
(Javascript)
Socrata
•
Сайт:
http://socrata.com/
•
Онлайн-платформа
•
Визуализируется
почти все виды
данных
•
Не нужно уметь
программировать
•
Плохо встраивается в
сайты
Карты
Яндекса
•
Сайт:
http://api.yandex.ru
•
Онлайн-платформа
•
Только для
геоданных
•
Надо уметь
программировать
(Javascript)
Leaflet
•
Сайт:
http://leafletjs.com/
• Открытый код
•
Только для
геоданных
•
Основан на
OpenStreetMap
•
Надо уметь
программировать
(Javascript)
Infogr.am
•
Сайт:
http://infogr.am/
• Онлайн платформа
•
Не все данные
•
Типовая
инфографика
•
Не нужно уметь
программировать
Шаги как действовать
Последовательность шагов
•
•
•
•
Формулируем задачу
Выбираем инструмент
Подготавливаем данные
Создаём визуализацию
Формулируем задачу
• Четко определяем что хотим
визуализировать – деньги, цифры,
геоточки или отношения
• В зависимости от контекста,
данных и ограничений переходим к
выбору инструмента
Выбор инструмента
•
В зависимости от контекста, данных и ограничений
выбираем один из инструментов.
•
Ключевое – это данные и ограничения
•
Если задача для программирования то:
• Смотрим инструменты в презентации
• … или идем на selection.datavisualization.ch и
подбираем
•
Если задача без программирования
• Смотрим инструменты вроде infogr.am или
аналогов
Подготовка данных
Выверяем и проверяем данные корректность
•
•
если геоданные с адресами без координат – геокодируем их
•
если надо сравнивать суммы – рассчитываем доли и
проценты
Подготавливаем данные под инструмент визуализации:
•
•
при необходимости добавляем доп. атрибуты, например,
цвета для графика
Переводим данные в формат принимаемый инструментом:
•
•
Для карт форматы: GeoJSON, KML, YMapsML и др.
•
Для других инструментов свои требования – узнаем их
заранее
Много ссылок
Ресурсы
•
http://datavisualization.ch/ - коллекция инструментов
•
http://www.creativebloq.com/design-tools/data-visualization-712402 - коллекция
инструментов
•
http://datavizchallenge.org - конкурс визуализаций
•
http://visualizing.org/ - сообщество
•
http://flowingdata.com/ - сообщество
•
http://visual.ly/ - сообщество
•
http://mashable.com/category/data-visualization/ - сообщество
Платформы
•
интерактивные визуализации - https://getdataseed.com
•
Инфографика - http://infogr.am/
•
IBM Many Eyes - http://www-958.ibm.com
•
Tableau Online - http://www.tableausoftware.com/products/online
•
Google Charts - https://developers.google.com/chart/
•
Factual - http://factual.com/
•
SumAll - https://sumall.com/
Образование
•
Knights Foundation Course - http://open.journalismcourses.org
•
Edward Tufte courses - http://www.edwardtufte.com/tufte/courses
•
MIT Open Course “How to Process, Analyze and Visualize Data” http://ocw.mit.edu/resources/res-6-009-how-to-process-analyze-and-visualizedata-january-iap-2012/
•
Stanford Visualization Course - http://vis.stanford.edu/
•
Harvard Visualization Course - http://cs171.org/
Спасибо
за
внимание
Иван Бегтин
Email: ibegtin@infoculture.ru
Сайт: http://infoculture.ru