вторник, 22 декабря 2015 г.

Полезные ссылки по дата-журналистике и работе с открытыми данными

DataJournalism Сегодня я хочу поделиться с вами полезным ресурсом: https://data-journalism.zeef.com/irina.radchenko Здесь я собрала упорядоченную коллекцию ссылок по дата-журналистике и работе с открытыми данными. Коллекция включает в себя следующие разделы.
  1. Data Journalism
  2. Data Expedition
  3. Find the data
  4. Data Sources
  5. Scrape the data
  6. Clean the data
  7. Visualize the data
  8. Visualizations
  9. Digital Storytelling
  10. Data Journalism courses
  11. Examples
  12. Blogs
  13. Working with API
  14. GIS
  15. Data Zeef
  16. Longreads
  17. Questions-Answers
  18. Long Read Examples
  19. Data Science
Если у вас есть полезные ссылки, которыми вы желаете поделиться, то предлагайте их, пожалуйста, прямо на ресурсе Zeef.com. Для этого надо нажать на плюсик после списка ссылок.

пятница, 11 декабря 2015 г.

Moscow Science Week - 2015

Moscow Science Week - 2015
Всю эту неделю (c 7 по 12 декабря) в Москве проходило мероприятие "Moscow Science Week - 2015", неделя науки (http://ift.tt/1sB9HoT).
9 декабря 2015 года я приняла участие в Форсайт-сессия "Будущее исследований и будущее науки" (http://ift.tt/1IJAGI2).
На сессии я рассказывала про концепцию Открытой науки и о тех проектах, которые сейчас идут у нас в Лаборатории в ИТМО (например, о платформе связанных открытых данных: http://lod.ifmo.ru/, вот здесь можно посмотреть на визуализацию на основе связанных открытых данных: http://ift.tt/1Ng1Y7K).
Мою презентацию с этой сессии можно посмотреть здесь: http://ift.tt/1IJADMl
by via Ирина Радченко

вторник, 29 сентября 2015 г.

Инструменты для дата-журналиста



SILK (http://silk.co/) - это замечательный сервис, позволяющий систематизировать, организовать, аннотировать и выложить в онлайне различные данные.
Именно на сайте SILK мне удалось найти весьма полезную подборку инструментов дата-журналиста: http://ift.tt/1jtrz2U


Более того, внизу можно посмотреть статистику по собранным инструментам.



Как видно, из статистики, больше всего представлено инструментов для визуализации данных (67 сервисов), затем идет инструментарий для сбора данных (22 сервиса) и для анализа данных (14 сервисов).
И как выяснилось, из представленных инструментов только 12% платные. Остальные либо бесплатные, либо представлены по типу Freemium.
Любопытно, что представленная статистика интерактивна, и при нажатии на конкретную группу, можно посмотреть список всех инструментов этой группы.
by via Ирина Радченко

среда, 9 сентября 2015 г.

Секция по Открытой науке в рамках конференции KESW - 2015



C 30 сентября по 2 октября в Москве будет проходить международная конференция KESW-2015 (http://2015.kesw.ru/).
Приглашаю всех заинтересованных в Открытой науке людей поучаствовать в работе секции по Открытой науке. Чуть позже я опубликую приблизительную тематику и расписание работы секции.
Буду рада пожеланиям и дискуссии, и особенно - инициативе выступления с докладом или мастер-классом.

Планируется, что эта секция проходить 2 октября с 16:30 до 18:00.
Мероприятие будет проходить по адресу: Москва, Ленинский пр., 4, университет МИСиС.
by via Ирина Радченко

вторник, 8 сентября 2015 г.

Data Science Week - 2015




С 24 по 30 августа в Digital October (Москва) проходило мероприятие Data Science Week - 2015 (http://ift.tt/1E45q4y).
25 августа в рамках мероприятия я выступила на сессии "Открытые данные" с докладом "Как обучать работе с открытыми данными".
Слайды моего выступления можно посмотреть здесь: http://ift.tt/1EMRhZT.
Программа и материалы: http://ift.tt/1EMRhZW
А вот здесь в Dropbox лежат материалы со всего мероприятия: http://ift.tt/1K5dpKF
by via Ирина Радченко

понедельник, 15 июня 2015 г.

Первый центральноазиатский хакатон (Open Data Hackathon in Kyrgyzstan)

Open Data Hackathon

В начале июня сначала в Бишкеке, а потом на озере Иссык-Куль проходил первый центральноазиатский хакатон. Мероприятие было ориентировано не только на создание приложений на открытых данных, но также на создание статей в стили дата-журналистики, а также инициации действий гражданских активистов (создание запросов на получение актуальной информации из гос. органов, Civic Hacking и тд)
Коллеги из Всемирного банка меня пригласили поучаствовать в хакатоне в качестве консультанта и наставника команд. В результате я прочитала участникам несколько лекций и провела мастер-классы. Некоторые материалы по традиции выложены на слайдшер: http://ift.tt/1R0FjLT.
Надо отдельно отметить удивительно дружескую атмосферу мероприятия, наполненную энтузиазмом и взаимопомощью. Все участники работали в очень интенсивном режиме, и несмотря на это были готовы помочь и посотрудничать в мастер-классах.
Например, Алмаз Чанаев по моей просьбе рассказал журналистам и активистам о преимуществах, предоставляемых для совместной работы веб-сервисом GitHub (презентацию можно посмотреть здесь: http://ift.tt/1egYaGT).
Приятно удивило то, сколько данных имеется в наличии на сайтах гос. органов Кыргызстана.
Отдельно стоит отметить портал открытых данных РК, организованный инициативной группой: http://opendata.kg/
В номинации "статья в стиле дата-журналистики" первое место заняла статья Фариштамох Гуловой о женском образовании в республике Таджикистан. По договоренности эта статья была размещена в совместном блоге, посвященном журналистике данных: http://ift.tt/1R0FgzX
by via Ирина Радченко

понедельник, 13 апреля 2015 г.

среда, 11 марта 2015 г.

Международная неделя открытого образования - 2015 (Open Education Week - 2015)

Скриншот 2015-03-11 14.32.37

С 9 по 16 марта весь научно-образовательный мир отмечает неделю Открытого образования (Open Education Week - 2015).

К этому событию приурочены различные мероприятия, как образовательного, так и просветительного характера (http://ift.tt/zrEXSV).

Наше российское отделение Open Knowledge тоже не осталось в стороне.

Как и в прошлом году, когда мы с Анной Сакоян написали пост в блог UK Web Focus (http://ift.tt/1EUqo31), мы решили продолжить начинание и опубликовали два поста в блоге Open Knowledge.

Первый пост был посвящен обзору российских открытых образовательных ресурсов (http://ift.tt/1KmgHPY), второй пост освещает наши дата-экспедиции (http://ift.tt/1b1JedJ).



Если у вас есть открытые образовательные проекты, то расскажите о них.

В социальных сетях для этого мероприятия используется хэштэг #openeducationwk.

by via Ирина Радченко

понедельник, 2 марта 2015 г.

Скрейпинг (scraping)

photo912100_355948436

Веб-Скрейпинг - это технология получения данных из веб-страниц.

К сожалению, пока что в русскоязычной Википедии нет страниц, посвященных скрейпингу. А вот в англоязычной Википедии такие статьи уже есть (Web-scraping, Data-scraping).

Краткий обзор инструментария для скрейпинга в блоге, посвященному скрейпингу: http://ift.tt/1AOFWE1



Инструментарий для веб-скрейпинга

ScraperWiki



Онлайн-сервис, позволяющий не только писать свой скрейперы при помощи HTML, JavaScript и Python (и не только), но и переводить документы из формата PDF в формат CSV.



logo-openrefine-40





Мощный инструмент по работе с "сырыми данными", и в числе прочих функций, позволяет скрейпить данные. Под OpenRefine написано множество программных расширений.

Есть отличная книга по OpenRefine (Ruben Verborgh, Max De Wilde "Using OpenRefine"): http://ift.tt/1AOFV31








import.io





Быстро растущий сервис, в котором разработчики постоянно реализовывают новые функции, см. http://ift.tt/1t0Zwv6



Можно визуализировать данные через другой сервис -- plot.ly (http://ift.tt/1FNoRdf)

chrome-extension-256





Инструкция от Филиппа Каца, Как сделать скрейпер за 15 минут: http://ift.tt/1AOFWE5



OutWit Hub


Расширение под Firefox, позволяющее вытягивать различные данные из веб-страниц.

Creating a Scraper for Multiple URLs, Simple Method: http://ift.tt/1FNoP58





Google Web Scraper




Расширение под Google Chrome.



Scrapy


Фреймворк для написания краулеров. Поддерживает написание программного кода на языке Python 2.7.



Список информационных источников



by via Ирина Радченко

четверг, 26 февраля 2015 г.

Расследовательская журналистика

Скриншот 2015-02-26 17.40.17

Любопытная статья по расследовательской журналистике и тому, как использовать "цифровой инструментарий": http://ift.tt/1BAin4g


Скриншот 2015-02-26 17.37.17


Ссылка на учебник по верификации:http://ift.tt/1b7fLIV

И ссылка на сервис по верификации происшествий: https://veri.ly/


Пока что, к сожалению, все на английском языке.

Излишне говорить о том, что было бы здорово, если бы кто-нибудь перевел это на русский язык.




by via Ирина Радченко

вторник, 24 февраля 2015 г.

Международный день Открытых данных в Москве (Moscow Open Data Day 2015)

Скриншот 2015-02-24 11.28.22



21 февраля, в субботу, по всему миру было отпраздновано событие -- международный день Открытых данных.

Всего в мероприятии приняло участие 248 команд из 61 страны со всего мира.

Статистику участников можно посмотреть здесь: http://ift.tt/1zcfGhI



В Москве международный день Открытых данных прошел при поддержке НП "Информационная культура" (http://infoculture.ru/) и Российского отделения фонда Открытых знаний (OKFN-RU: http://ru.okfn.org/).


Мероприятие посетило свыше 40 человек, обладающих самыми различными навыками. Среди участников были замечены как представители гуманитарных направлений (пиар, реклама, журналистика и тп), так и разработчики, программисты и дата-аналитики.

Были представлены не только доклады с презентациями, но и рассказы, анонсы мероприятий в свободной форме.

Мою презентацию, посвященную Открытой науке, можно посмотреть здесь: http://ift.tt/1B7YIH6, сопутствующие материалы здесь: http://ift.tt/1zcfGhK

Были также представлены презентации о визуализациях (презентация Ивана Бегтина: http://ift.tt/1B7YGii), понятном языке (презентация Ростислава Яворского: http://ift.tt/1zcfFdQ) и использовании Leaflet.js (презентация Ивана Игнатьева: http://ift.tt/1B7YIXm, материалы: http://ift.tt/1zcfGhR, http://ift.tt/1B7YGio.

В результате хакатона было сделано около 4 прототипов приложений.

Некоторые участники показали желание участвовать в проекте Open Science Labs (проект об Открытой науке, призванный популяризировать и продвигать концепт Открытой науки в России).

Заявку на участие в проекте Open Science Labs можно заполнить здесь: http://ift.tt/1B7YIXo




by via Ирина Радченко

вторник, 3 февраля 2015 г.

Семинары по дата-журналистике в Перми и Новосибирске

DDJ

С 21 по 23 января 2015 г. в Перми и с 26 по 28 января 2015 г. в Новосибирске вместе с Оксаной Силантьевой (Силамедиа) я проводила мастер-классы и семинары по дата-журналистике, в ходе которых я написала несколько довольно несложных инструкций для журналистов по работе с онлайн-сервисами Google.

Итак, ссылка на инструкцию по тому, как завести себе почтовый ящик в Гугл.

И ссылка на инструкцию о том, как создать и работать с гуглотаблицей.

Некоторые журналисты интересовались нормативно-правовой базой открытых данных. Именно для них я написала отдельный пост в своем блоге: http://ift.tt/1zSLkqv

Многие журналисты занимаются довольно интересными расследованиями, результаты которых они вскоре планируют опубликовать.

Очень надеюсь, что наши семинары помогли им в освоении нового инструментария по работе с открытыми данными!




by via Ирина Радченко

вторник, 27 января 2015 г.

Российская нормативно-правовая база для открытых данных

Open Data



Список российских нормативно-правовых актов в области открытых данных



Федеральный закон от 27.07.2006 № 149-ФЗ «Об информации, информационных технологиях и о защите информации»

Ссылка: http://ift.tt/1sBwVsp



Федеральный закон от 09.02.2009 № 8-ФЗ «Об обеспечении доступа к информации о деятельности государственных органов и органов местного самоуправления»

Ссылка: http://ift.tt/1JUVeYO



Постановление Правительства РФ от 24 ноября 2009 года № 953 «Об обеспечении доступа к информации о деятельности Правительства РФ и федеральных органов исполнительной власти»

Ссылка: http://ift.tt/1jAYmwx



Федеральный закон № 112-ФЗ «О внесении изменений в Федеральный закон "Об информации, информационных технологиях и о защите информации"» и Федеральный закон «Об обеспечении доступа к информации о деятельности государственных органов и органов местного самоуправления»

Ссылка: http://ift.tt/18nTb3R



Указ Президента Российской Федерации 7 мая 2012 года N 601

Ссылка: http://ift.tt/18nTb3T



Приказ Министерства связи и массовых коммуникаций Российской Федерации (Минкомсвязь России) от 27 июня 2013 г. № 149

Ссылка: http://ift.tt/1jAYkow



Постановление Правительства Российской Федерации от 10 июля 2013 г. N 583 г. Москва «Об обеспечении доступа к общедоступной информации о деятельности государственных органов и органов местного самоуправления в информационно-телекоммуникационной сети "Интернет" в форме открытых данных»

Ссылка: http://ift.tt/1hasGQl



Распоряжение Правительства РФ от 10 июля 2013 года № 1187-р

Ссылка: http://ift.tt/1hasIYt



Федеральный закон Российской Федерации от 12 марта 2014 г. N 35-ФЗ

Ссылка: http://ift.tt/18nT9Ji



Методические рекомендации по публикации открытых данных государственными органами и органами местного самоуправления и технические требования к публикации открытых данных (версия 3.0)»

Ссылка: http://ift.tt/1JUVdnz

by via Ирина Радченко