Техноблог – Электронное государство, поисковые системы, анализ неструктурированных данных
Мар 31 2010
17 апреля я буду на в форуме YEES на дискуссии «Government 2.0 в России: варианты и возможности».
Там будет Екатерина Аксенова (gov-gov.ru) и Илья Пономарёв (депутат ГД), а модерировать секцию будет Алена Попова (http://www.alenapopova.ru/)
Будет интересно. Приходите.
Мар 31 2010
Поскольку мне тут в очередной раз задают повторяющиеся вопросы, я в одном посте на них поотвечаю предельно честно.
1. Несмотря на то что я изредка публикуюсь на Полит.Ру и то что некоторые СМИ (http://www.newsru.com/russia/30mar2010/sajti.html) называют меня там обозревателем – это не так. Я работаю не в Полит.Ру, а делаю и веду для Полит.Ру проект Гослюди.Ру , статьи же дело инициативное. В любом случае я журналистом я не являюсь и планов таких нет.
2. Не являясь журналистом, сейчас я занимаюсь технологиями обработки и анализа данных в небольшой компании/стартапе в качестве CTO. Некоторые результаты этой деятельности доступны публично, например, Скиур, некоторые пока недоступны, а некоторые врядли будут доступны когда либо.
3. Про госзакупки, госсайты, госблоги и так далее я пишу по той причине что интересуюсь государством (не политикой!) и многим из перечисленного плотно занимаюсь. Пока рано говорить как и что будет результатами, но они будут.
4. Я не ищу работу по найму и чем я занимался когда-либо можно узнать в моём профиле http://ivbeg.moikrug.ru/.
5. Я представляюсь создателем проектов Гослюди.Ру и OpenGovData.ru – по той причине что привлекаю к ним внимание. Могу представляться и иначе, но пользы от этого не вижу.
Как то так.
Мар 30 2010
В Гослюдях много небольших, но заметных обновлений. Целиком приводить не буду, лучше почитать на Полит.Ру тут – http://www.polit.ru/country/2010/03/30/goslyudi.html
Остановлюсь же на главном. Итак что нового:
1. Появились разделы фото www.goslyudi.ru/photos и видеоленты — www.goslyudi.ru/video/ где размещаются последние видео и фотографии из блогов гослюдей. В каждом из разделов есть есть RSS лента для подписки.
2. Появилась страница с перечнем всех RSS лент, экспортируемых из Гослюдей.Ру — www.goslyudi.ru/export/.
3. Появился антирейтинг «лист позора» государственных блоггеров www.goslyudi.ru/shame/. В него входят только «псевдо-блоги», когда гослюди неправильно трактуют само понятие блога и вместо него создают очередной сайт.
Про антирейтинг всё практически наверняка будет понятно из разъяснений на Полит.Ру и на сайте Гослюдей, я же добавлю что в антирейтинге собраны совсем уж вопиющие случаи серьёзного непонимания у государственных служащих что такое блог и с чем его едят.
Это то что называется деятельная критика – критерии которые мы использовали при оценке самоочевидны и если хоть кто-то из попавших в рейтинг их прочитает и изменит свой блог в соответствии
с тем что там написано, то, конечно, мы будем только рады.
И ещё одно дополнение. В антирейтинг включены только те блоги записи которых не попадают в Гослюди.Ру потому как на самом деле блоговости в них одно название.
Вот так.
Мар 30 2010
В Полит.Ру вышла ещё одна моя статья/обзор про то как события ЧП 29 марта освещались на госсайтах. Прочитать её можно здесь – http://www.polit.ru/analytics/2010/03/30/metro29.html и под катом в этом посте.
Чтобы понять как наше с Вами государство, а точнее, его органы, присутствуют в Интернете и насколько ощутимо и осознано их присутствие, рассмотрим информацию, публикуемую на официальных сайтах органов государственной власти в день самых чрезвычайных происшествий.
Continue reading «О событиях 29 числа с точки зрения информации на госсайтах»
Мар 29 2010
Любопытный скринкаст внутреннего сервиса в FreeBase по очистке и трансформации структурированных данных в виде CSV файлов. Что
Freebase Gridworks 1.0 beta Overview from David Huynh on Vimeo.
Мар 29 2010
Оказывается Microsoft сделали и предложили протокол OData – Open Data Protocol используемый для раскрытия данных в машиночитаемой форме.
Подробнее можно почитать здесь http://www.odata.org
А вот его полное описание –
There is a vast amount of data available today and data is now being collected and stored at a rate never seen before. Much, if not most, of this data however is locked into specific applications or formats and difficult to access or to integrate into new uses. Public data is often unfortunately held private or needlessly buried behind random, inefficient, and cumbersome interfaces.
The Open Data Protocol (OData) provides a way to unlock your data and free it from silos that exist in applications today, making it easy for data to be shared in a manner that follows the philosophy of Open Data. OData enables a new level of data integration and interoperability across a broad range of clients, servers, services, and tools.
Это реально радует. Во первых сама спецификация протокола довольно проста и понятна, во вторых она без жёсткой привязки к сервисам MS.
А я тем временем всё больше понимаю что на OpenGovData.ru должны быть инструкции и разъяснения как именно надо публиковать информацию.
Мар 27 2010
Может быть кто-то помнит, в январе месяце я публиковал OWL описание геополитической онтологии России вот тут – http://ivbeg.livejournal.com/252756.html.
И тогда были вопросы, а как же с ней работать.
Чтобы немного упростить эту задачу приведу несколько способов
1. OpenLink Data Expolorer
Открываете ссылку http://linkeddata.uriburner.com/ode/
и вбиваете туда http://schema.opengovdata.ru/core/regions.owl
в результате появится интерфейс для различных способов навигации по онтологии
выглядящий примерно вот так
В правой панели можно настраивать фильтры по свойствам, что я и делал как можно увидеть на скриншоте. Например, можно увидеть какие регионы в каких часовых поясах и так далее
2. RedLand Rasqal RDF Query
Это инструмент для исполнения SQARQL запросов онлайн и доступный тут http://librdf.org/query. В качестве эндпоинта ему задаётся http://schema.opengovdata.ru/core/regions.owl, а в качестве скрипта запрос который хотелось бы исполнить.
Например, такой:
PREFIX reg:
select ?x ?taxCode ?nameEN ?nameRU ?codeOKATO ?codeKLADR where { ?x
reg:taxCode ?taxCode;
reg:nameEN ?nameEN;
reg:nameRU ?nameRU;
reg:codeOKATO ?codeOKATO;
reg:codeKLADR ?codeKLADR;
} ORDER BY ?taxCode
3. Пример кода на Python
И для тех кто ищет как попроще и что-то готовое
Прилагаю скрипт на Python который извлекает список регионов из OWL отпечатывает в TSV формате. Всё что для него нужно это библиотека RDFLib
#!/usr/bin/env python
# -*- coding: utf-8 -*-
import csv
from StringIO import StringIO
from rdflib.Graph import Graph
from rdflib.sparql.bison import Parse
def convert_regions():
g = Graph()
g.parse('http://schema.opengovdata.ru/core/regions.owl')
parsed_query = Parse("""
PREFIX reg:
select ?x ?taxCode ?nameEN ?nameRU ?codeOKATO ?codeKLADR where { ?x
reg:taxCode ?taxCode;
reg:nameEN ?nameEN;
reg:nameRU ?nameRU;
reg:codeOKATO ?codeOKATO;
reg:codeKLADR ?codeKLADR;
} ORDER BY ?taxCode
""")
resp = g.query(parsed_query).serialize('python')
io = StringIO()
wr = csv.writer(io, delimiter='\t')
for o in resp:
wr.writerow(o[0:4])
print io.getvalue()
if __name__ == "__main__":
convert_regions()
Мар 25 2010
Подборка публикаций о Гослюди.ру (http://www.goslyudi.ru)
и конечно Полит.Ру делает ежедневные обзоры публикаций госблоггеров которые можно прочитать на их сайте. Примеры тут: http://www.polit.ru/news/2010/03/24/goslyudi.html и тут http://www.polit.ru/news/2010/03/19/goslyudi.html
Я ко всему этому добавлю что Гослюди – это проект с работающей обратной связью. Например, рейтинг активности регионов и RSS лента для подписки на обновления ТОПа были введены именно по просьбе пользователей как и многие другие замечания.
Не все их удаётся учесть сразу, но ни одно не игнорируется.
Поэтому если есть предложения/замечания критика – пишите мне на ibegtin (собака) gmail.com или идеей в goslyudi.reformal.ru
Мар 22 2010
По мотивам постов о том к чему пришли суды по латинице в Полит.Ру вышла моя статья которую можно прочитать здесь – http://www.polit.ru/analytics/2010/03/22/goszakazy.html
Конечно всё в одну статью не уместишь однако что-то да удалось да ещё и с примерами опечаток и не-информативности.
Комментарии/критика/пожелания всячески приветствуются.
Мар 19 2010
Сегодня я узнал что мой пост о востребованности онлайновых гражданских проектов нашёл отклик и, даже, не просто отклик, а видеоответ от Алены Поповой о политической пассивности и способах её преодоления.
Мне нечасто пишут видеоответы и тем более я считаю что эту тему надо раскрыть подробнее. Однако текстом мне изложить пока проще чем на видео.
Начну с того что я, в принципе, разделяю два таких понятия как политика и государство. Во всяком случае политику в общепринятом смысле этого слова – с политическими партиями, политическими программами, политологами и так далее.
И практически все мои активности идут без политической окраски – меня интересует государство, его коммуникации с гражданами, его доступность, понятность, прозрачность и так далее.
также как какое-то время назад я писал про Инфогиков также и здесь это чистой воды гикство. Только более редкое – это ГосГикство и некое новое явление ГосГики.
ГосГики – это люди которым интересно как устроено государство, как его изменить, улучшить, преобразовать и всё такое прочее и те кого от этого нереально «прёт».
Это может звучать странно, может быть даже очень странно, но это сродни коллекционированию. Также как коллекционер марок может впасть в экстаз от редкого пополнения коллекции так же и госгикам в США интересно создавать сайты вроде http://www.opengovtracker.com/. А здесь в России я занимаюсь проектами OpenGovData.ru и Гослюди.Ру потому как нахожу и нереально интересными.
По той же причине я постоянно пишу о госзакупках, госсайтах и прочих активностях государства в сети. Потому как это непередаваемо интересно и это чистой воды госгикство и, если угодно, госевангелизм по аналогии с it евангелизмом.
Все это и есть мой ответ о том как преодолеть текущую ситуацию с желанием граждан вовлекаться в общение с государством, в деятельном интересе к государственным и окологосударственным проектам.
Решение – в активности, в деятельности и ГосГикстве. В накоплении критической массы особо активных людей которые интересуются темой государства и активно её продвигают.
Нужны энтузиасты и они всё больше и больше появляются. И именно это, а не различные долгосрочные целевые программы государства, способно принести конструктивность в общение государства и граждан.
