Иван Бегтин » data.gov.ru

Их проблемы

ivbeg — Thu, 12 Jan 2012 15:53:37 +0000

Хотя мы тут любим поварится в собственных проблемах тем не менее очень всем советую заглянуть на сайт идей по экономии средств который был запущен администрацией Обамы в 2010 году на сервисе IdeaScale

Вот тут http://saveaward2010.ideascale.com/a/ideafactory.do?id=9432&mode=top&discussionFilter=active

Вы там обнаружите множество интересных проблем о которых пишут «простые американцы». Некоторые из них будут до боли знакомыми

Ссылки на 8.01.2012. Конкурсы, открытое государство и другое

ivbeg — Sat, 07 Jan 2012 20:54:26 +0000

Random Hacks For Humanity (http://www.rhok.org/) — серия хакатонов с гуманитарными целями. Решение мировых проблем, борьба с бедностью, неграмотностью, насилием, ликвидация последствий катастроф и так далее. Всячески рекомендую заглянуть в раздел «Проблемы» (http://www.rhok.org/problems) там много идей актуальных и для России.
OpenIDEO (http://www.openideo.com/) — платформа открытых инноваций. За этим пафосным названием скрывается неплохой сайт идей и конкурсов. В основном это не сайты, а мероприятия, события, офлайн проекты и так далее.
IdeaFestival (http://ideasfestival.com.au/) — австралийский фестиваль идей. Это хорошо, это правильно, это прекрасно. Нам нужны такие фестивале в России. Если кто решится делать — зовите и меня.
Ubafnauhzug (http://www.ubahnaufzug.at/) — австрийский проект по краудсорсингу информации о неработающих эскалаторах и лифтах.
ColombiaSSH (http://inundaciones.colombiassh.org/) — проект по отслеживанию чрезвычайных ситуаций в Колумбии. На базе Ушахиди.
Туалетная война в Кейптауне (презентация о событиях и публикации в СМИ) — о конфликте вокруг публичных туалетов в Южной Африке. Новость не новая, но презентацию с подробностями я нашёл лишь недавно и вот тогда и понял полностью откуда такой интерес к public safety и sanitation у гуманитарных организаций в Африке. Там всё вполне серьёзно, вопрос политический.
Sheltr (http://philly.sheltr.org/) — проект «убежище». Позволяет быстро найти на карте места где бездомный или безденежный человек может на кров и еду. Пока охватывает только Филадельфию.
Water for People (http://watermapmonitordev.appspot.com/) — проект по наложению на карты инициатив по улучшению качества воды и случаев когда воды нехватает или с ней другие проблемы.
Data Journalism Developer Studio (http://susestudio.com/a/RQrRBY/data-journalism-developer-studio-20) — специальная виртуальная машина для журналистов данных и разработчиков проектов в этом направлении. Я пока не пробовал, но ход мыслей мы нравится.

Вы спросите а где тут открытое государство? В России нигде, в мире — это оно и есть.

Информационное государство

ivbeg — Wed, 21 Dec 2011 13:35:47 +0000

Вот тут документ http://government.ru/gov/results/17448/

А вот тут первые комментарии http://tri-botinka.livejournal.com/30933.html и http://www.kommersant.ru/doc/1842877

Пока нет времени расписать подробно, в принципе, по ссылкам немало написано. Я лишь скажу что всё это выглядит очень плохо.

«Информационное государство» — это какой-то мутант симулякр. Не «открытое», не «электронное», а информационное.

Всё тот же огромный бюджет на «безопасность» где, удивительное дело, открытые стандарты и всё такое прочее.

Я и раньше о Минсвязи был невысокого мнения, а уж теперь слов нет.

О том как государство может и должно общаться с гражданами

ivbeg — Tue, 20 Dec 2011 11:25:25 +0000

В ЧасКор’е вышло продолжение моей статьи «Город в Воздухе», на сей раз о том как в принципе государство может и должно взаимодействовать с обществом так чтобы раздражение граждан находило бы результативный выход.

—

вторник, 20 декабря 2011 года, 09.58

Иван Бегтин Разговор после митинга

Снизу говорят, сверху спрашивают: новые правила игры для власти?

Граждане, привыкшие быть потребителями, хотят качественного обслуживания, активисты хотят быть услышанными, чиновники хотят возможности хорошо выполнять свою работу, а руководство — иметь картину происходящего перед глазами и держать на контроле конфликтные ситуации. Интернет-технологии дают шанс выстроить и новую систему управления, основанную на коммуникации. Подробнее

—

В статье, конечно, не всё что я могу рассказать на эту тему. Говорить об этом можно долго и объять всё просто невозможно. Я скажу о другом. Чем бы не закончились нынешние политические игры нам всё равно придётся убеждать чиновников поворачиваться лицом к гражданам и переходить от «государства сакрального» к «государству сервисному».

Информация о депутатах в Украине и Болгарии

ivbeg — Mon, 19 Dec 2011 11:26:54 +0000

В блоге Open Knowledge Foundation появился как нельзя актуальный пост про парламентские данные по Болгарии. Вот тут его можно прочитать http://blog.okfn.org/2011/12/16/opening-government-data-in-bulgaria/ про то как некий энтузиаст выгрузил с сайта парламента Болгарии данные по законопроектам и депутатам и перевёл их в XML формат.

Вот тут полный список того что он перевёл в машиночитаемый вид http://thedatahub.org/dataset/open-data-of-the-bulgarian-parliament

Там множество интересной информации, однако я предлагаю обратить внимание на следующие данные:

1. Все данные по голосованию каждого из депутатов

2.Все данные по _отсутствию_ депутата на пленарном заседании

А также обратите внимание на то что на Украине на сайте Рады доступна вся информация по каждому депутату включая:

- внесённые законопроекты

- голосование

- депутатские запросы

- выступления

- переходы между фракциями

Вот можно посмотреть одного из депутатов в качестве примера http://w1.c1.rada.gov.ua/pls/site/p_deputat?d_id=5457

—

А если посмотреть большую часть европейских парламентов, а то и все то окажется что там эта информация есть. Потому что там парламенты реально работают, в отличии от Российского где, ни данных по посещаемости, ни данных по голосованиям у нас нет.

Да что там. Даже контакты депутатов не опубликованы.

Аналитика полезности депутатов 5-го созыва

ivbeg — Thu, 15 Dec 2011 23:04:01 +0000

Кто-то из Вас быть может помнит как ранее я поднимал тему измерения эффективности работы депутатов и о том какие данные для этого нужны. Вот тут была эта тема http://ivbeg.livejournal.com/360827.html

Сейчас, когда интерес к парламенту у нас всё более плотный пришла пора представить примеры индикаторов и рейтингов которые мы можем делать и далее использовать.

Однако вначале предыстория.

Вы знаете что депутаты у нас занимаются различной деятельностью: пишут законы, участвуют в комитетах, выступают и общаются с гражданами в регионах. А кто-то ещё и быть может депутатские запросы.

Часть из этих активностей измерить почти невозможно, например, нет систем учёта депутатских запросов, однако какие-то их действия всё таки нам известны. Это — выступления на сессиях Госдумы и внесение законопроектов.

Разумеется эти действия являются не единственно полезными, но несомненно и то что когда их нет возникает резонный вопрос «а чем же занимается наш [любимый] депутат?», не филонит ли он заседания, примерный ли он семьянин и не тусит ли по клубам вместо законотворческой работы приносит ли он пользу людям и другие немаловажные вопросы ответы на которые мы хотели бы узнать.

Итак. Я не поленился и кроме данных о кандидатах в депутаты собрал данные по имеющимся у нас сейчас депутатам Госдумы. Плюс добавил туда отметку о том были они переизбраны 4 декабря.

Результаты доступны через Google Docs тут https://docs.google.com/spreadsheet/ccc?key=0AphaFpvgzsyhdHUtenMxcFROcm9KdWthYW56Sngzc2c

или отдельным файлом Excel depurating.xls

Все данные взяты с сайта Госдумы, соответственно к каждому депутату есть ссылка указывающая на его профиль.

Важное ограничение о котором хочу предупредить — цифры могут показывать отсутствие активности, но не показывают _наличие активности_. Что это означает.

Многие депутаты являются депутами в 3 или даже 4-й раз, при этом число выступлений и законопроектов в их профилях на сайте Госдумы показывает общее их число за всё время, а не только за последний созыв. Соответственно у депутатов вроде Жириновского огромное число выступлений, но точное число выступлений за 5-й созыв мы пока измерить не можем, надо потратить больше времени на извлечение и обработку данных о законопроектах и текстах выступлений.

Однако что же можно увидеть прямо сейчас.

В первую очередь наличие некого числа депутатов во всех партиях кто не выступал вообще и не вносил законопроектов. Иногда этому есть объяснение, когда депутат довыбирался вместо выбывшего и просто не успел ничего сделать. Но есть и те кто в депутатском кресле с 2007 года, но не выступали и законопроекты не вносили.

Плюс можно посмотреть кто из эффективных/неэффективных депутатов прошёл/не прошёл в Госдуму. Например, некоторые из депутатов неактивных в течении 5-го созыва попали и в этот, не все, но некоторые.

Чего нельзя увидеть пока, но можно будет в будущем:

- увидеть статистику работы депутатов только по 5-му созыву

- оценить среднее число законопроектов и выступлений на депутатов вцелом и по фракциям

Плюс много других разных аналитических срезов. Плюс, как только будет обнародован состав ГД 6-го созыва можно будет повторно проанализировать его социально демографический состав чтобы понять каков он после массовой передачи мандатов.

Мысли тезисами

ivbeg — Thu, 15 Dec 2011 04:53:52 +0000

Просуммирую заметки и события за последние дни.

Открытые данные

1. Еврокомиссия инициировала массовое раскрытие открытых данных и выработку единой политики ЕС в этой области. Подробнее тут http://ec.europa.eu/information_society/policy/psi/index_en.htm

2. Во Франции запустили общегосударственный портал открытых данных http://www.data.gouv.fr/

3. На глаза попался октябрьский отчет Deloitte о порталах открытых данных в мире http://ec.europa.eu/information_society/policy/psi/docs/pdfs/report/11_2012/open_data_portals.pdf

Госзакупки

1. Вчера в НИУ ВШЭ проходила конференция по ФКС где и у меня была возможность выступить и поговорить на тему качества информации и не только. Я озвучил несколько тем:

- первое. Качество информации очень низкое и аналитика никогда не была приоритетом, я надеюсь что это изменится сейчас. Приводил все те же примеры с ошибочными реквизитами и классификационными кодами что и раньше. Времени было немного не всё я успел рассказать.

- второе. То что сейчас контроль за государственным заказом слишком сильно привязан к исполнительной власти и, по хорошему, реформа госзаказа должна включать усиление других ветвей власти для контроля за исполнительной. А то есть, это может быть в формате перевода контроля от ФАС к третейским, арбитражным или административным судам, или же контрольно-счетным палатам, или же созданием независимых советов по рассмотрению жалоб. Но во всех случаях, я считаю что безусловно усиление парламентского контроля пойдёт на пользу нашей республике под названием Россия.

Антиполитическое

1. Поскольку у нас теперь будет парламент в котором не только партия власти, то и контроль деятельности парламента теперь будет вполне адекватен. Я ранее писал об этом в постах о проектах о полезности депутатов и о его измерении. Я считаю чтоважно поднять в публичное обсуждение вопрос прозрачности деятельности ГосДумы. В частности, обязательное раскрытие поименного голосования и физического присутствия депутатов на заседаниях.

2. Нейтральный мониторинг деятельности партий также вполне возможен через проекты а ля Politwitter или политической онтологии со сбором данных по каждой партии и депутату из официальных источников.

Открытые данные по кандидатам в депутаты ГД

ivbeg — Mon, 05 Dec 2011 07:04:30 +0000

Итак, теперь, когда предвыборный ажиотаж закончился я, наконец-то, могу с чистой совестью и без политизации написать что я думаю о происходящем со своей колокольни — с точки зрения открытости и открытых данных.

Во первых, небольшой презент всем интересующимся. Открытые данные по кандидатам извлечённые с сайта Центризбиркома.

stateduma2007.xlsx - данные по кандидатам выборов в ГД за 2007 год
stateduma2011.xlsx - данные по кандидатам выборов в ГД этого, 2011 года.

Файлы привожу в формате Excel специально для тех кто не любит, не умеет работать с CSV, XML и прочими. Чуть позже выложу их все на OpenGovData.ru в нескольких форматах.

Для начала о данных. Кроме того что опубликовано на сайте Центризбиркома там есть несколько важных дополнений.

А то есть:

- гендерная информация. С помощью специального, на деле очень простого, алгоритма по всем персонам автоматически определён их пол

- возраст. Рассчитан на основе даты рождения относительно 1 декабря 2011 года.

- происхождение. Классификация кандидата по его происхождению, является ли он до выборов депутатом, чиновником или кем-либо ещё. Этот классификатор, признаюсь, недоработанный. Там есть сложности поскольку автоматически можно проставить отметки только у половины из кандидатов, так что это поле недозаполнено, предлагаю всем подумать как классификатор составить и как их всех разметить.

А также, в качестве бонуса, в файлы добавлена вкладка с цифрами статистики по партиям по некоторым специфическим метрикам.

Это такие показатели как:

- число москвичей. У скольких кандидатов указано место жительства — Москва

- число лиц моложе 30. То сколько молодых кандидатов в кандидатах от партии

- число лиц старше 55. То сколько предпенсионеров в кандидатах от партии

- число женщин. То сколько женщин кандидатов выставлено

И, конечно, доли каждой из этих социальных групп относительно общего числа.

Смотрите, сравнивайте, думайте. Самое интересное, на мой взгляд, в сопоставлении данных за 2007 и 2011 годы.

Что увидел лично я:

- малое число кандидатов женщин от всех партий

- резкое омоложение ЛДПР

- более 30% кандидатов от ЕР живут в Москве

Конечно эти данные будут более интересны когда будут известны окончательные результаты и можно будет их сопоставить с данными по победителям.

Вся эта информация так и просится в инфографику. Если кто хочет приложить усилия — милости прошу. Тема актуальная, многие издания с удовольствием её опубликуют.

А если более глобально. Эти данные, конечно, это не open government data — это куда ближе к open politics data. А с открытостью политики у нас куда как хуже чем с открытостью государства.

Собственно пока единственным серьёзным источником открытых данных по теме является проект ГОЛОС’а со статистикой по голосованию http://stat.golos.org/ (сейчас недоступен).

А теперь про то что особенно наглядно видно с точки зрения открытости, опять же

1. Все финансовые отчеты партий опубликованы в сканах. Это трындец как прозрачно. Уйма усилий необходима на их распознавание и преобразование. Я сомневаюсь что это случайно

2. Сведения о доходах кандидатов публикуются в крайне неудобном виде в виде таблиц в файлах Ворда. Это лучше чем сканы, но, конечно, немало усилий потребуется на сопоставление этих данных

3. У ЦИК РФ, конечно же, нет открытого API по базе выборов. Открытых данных в CSV, XML, XLS там тоже нет.

4. И масса информационно-технологических «не-мелочей»:

- у регионов отсутствуют указания кодов ОКАТО и ОКТМО (для муниципальных выборов)

- у избирательных комиссий нет публичных уникальных идентификаторов по которым можно сразу и быстро получить актуальную информацию по прямой и простой ссылке

- индикаторы избирательного процесса не кодифицированы, нет уникальных индентификаторов этих идентификаторов, необходимо осуществлять анализ их текста, последовательность и т.п.

- в отчетах о результатах, кандидатах и т.п. отсутствуют уникальные коды партий

- отсутствуют профили региональных подразделений партий и их уникальные коды

- в информации о поступивших средствах на счета партий отсутствуют реквизиты организаций позволяющие их однозначную идентификацию (есть только название компании)

И такого ещё много.

О гражданской активности и содержательной критике

ivbeg — Thu, 17 Nov 2011 11:33:07 +0000

К вопросу о критике и критике власти в частности. Я, пожалуй, дозрел чтобы написать об этом подробнее. К тому же сейчас, поскольку идут массовые предвыборные мероприятия, это ещё актуальнее.

Лично я себе, какое-то время назад задавал вопрос — зачем и как критиковать кого бы то ни было, с какими целями и есть ли в этом хоть какой-либо смысл? Задумывался я об этом ровно по той причине, что, вообще-то лично я придерживаюсь того жизненного принципа что если что-то работает неправильно — сделай лучше.

И применительно к государству эта логика равносправедлива. Если государство неспособно сделать что-либо хорошо, надо делать это самим. Особенно если то что ты делаешь безусловно полезно и важно.

Граждане и сами могут самоорганизовываться для раздельного сбора мусора, создавать гражданские проекты, ставить велопарковки, улучшать окружающую среду и делать многое другое. Успешный пример негосударственной активности — это лучший мотиватор для чиновников делать что-либо по настоящему правильное.

Однако критика. Лично я совершенно точно знаю что живи я не в России, а любой стране я бы критиковал действующие власти в не меньшей степени. Дистанция между людьми принимающими решения и всеми остальными, как правило, столь заметна что действия политиков никогда не бывают однозначно положительными для всех.

И я лично могу немало недобрых слов сказать о политиках в развитых странах. При том что я могу допустить что уровень благоглупости у некоторых из их инициатив чуть меньше чем у наших российских, однако я ни на секунду не сомневаюсь что занимайся я открытыми данными там, нашлось бы немало тем в которых можно указать пальцем на несостоятельность государственных решений.

Иначе говоря — важно разделение критики политической и содержательной. Политическая критика, почти всегда, алармистская и очень редко содержит какие-либо вопросы среднесрочного или долгосрочного развития.

Содержательная критика, пусть даже самая острая, нацелена на изменение! Она сродни тому о чём я написал выше о принципе того что надо делать что-либо самим.

При этом усилия вроде «полайкать», «кинуть немного денежек» и тому подобное — это ещё не делать самим. Это почти всегда ерундовая онлайновая активность. Делать самим — это означает изучение, просвещение и изменение.

1. Вначале изучить проблему — изучение

2. Потом суметь донести её в понятной для окружающих форме и в виде содержательной критики — просвещение

3. Совокупность усилий по её решению — изменение.

Вам не нравятся грязные подъезды и их обклеенные двери, граффити на стенах, разбитые окна? Что мешает самоорганизоваться и не только не допускать этого у себя в доме, но и организовать конкурсы по их изменению?

Вы считаете что городская инфраструктура гибнет и выглядит ужасно? Что мешает сделать проект где разметить те объекты что нуждаются в творческих руках, что мешает приложить усилия к изменению, что мешает узнать как это делается в других странах?

Вы считаете что государственные сайты сделаны отвратительно? Что мешает самостоятельно разрабатывать стандарты качества и активно их продвигать среди граждан и чиновников?

И о таком можно говорить очень и очень много. И ненужно списывать всё на чиновников. Они не могут вести. Они крайне ограничены в творческом мышлении. Они всегда действуют рефлективно на гражданские активности. Всегда.

Так что мешает делать вообще что бы то ни было?

Поэтому вопрос не в том критиковать или не критиковать, а в том в действовать ли самостоятельно, а критиковать под эти действия. Изучать, просвещать и изменять. И не стоит думать что за нас это смогут сделать политики или чиновники. Это можем делать только мы сами.

Инструменты для открытых данных

ivbeg — Sun, 13 Nov 2011 13:39:24 +0000

Можно ли сделать проект по открытым данным за один день? Можно. Я сделал за 4 часа. Сделал специально самостоятельно, при том что я программирую не так уж часто в последнее время. Но это демонстрация того что это может сделать каждый.

Итак, маленький, но полезный проект — инструменты для открытых данных http://opendatatools.ru, сделан он на основе кода и идеи похожего немецкого проекта. http://opendata-tools.org/. Его автор, помимо того что проект сделал сам, ещё и предоставил код всем желающим, ну я и подумал, а что время то терять? В общем всё очень просто.

Смысл проекта, по большей части, самоочевиден. Сделать каталог инструментов с помощью которых можно работать с открытыми данными. Эти инструменты я разделил на:

- «Визуализация» — то с помощью чего данные можно красиво показать

- «Данные» — это очень большие каталоги и инструменты по работе с данными.

- «Исходный код» — исходный код различных парсеров, каталогов данных, гражданских проектов, инструментов обработки данных и тому подобного.

- «Карты» — список онлайновых картографических сервисов с помощью которого можно данные показывать на картах

- «Информация» — блоги, сайты, форумы и новостные ресурсы по Open Data.

Всё сознательно сделано очень просто. Буквально по принципу — чем проще, тем лучше.

Почему я не разделом на OpenGovData.ru? По причинам описанным выше. Это фактически такая полезная демонстрация того что можно сделать за 4 часа, а на OpenGovData.ru ссылки на инструменты тоже будут.

А пока если есть что добавить в каталог, присылайте ссылки на инструменты и сайты по открытым данным.

Как и в любом другом проекте что я делаю из этого тоже будут доступно API и дамп каталога, пусть и маленького. И если кто-то захочет сделать каталог в другом интерфейсе — милости прошу.