- Data Journalism
- Data Expedition
- Find the data
- Data Sources
- Scrape the data
- Clean the data
- Visualize the data
- Visualizations
- Digital Storytelling
- Data Journalism courses
- Examples
- Blogs
- Working with API
- GIS
- Data Zeef
- Longreads
- Questions-Answers
- Long Read Examples
- Data Science
вторник, 22 декабря 2015 г.
Полезные ссылки по дата-журналистике и работе с открытыми данными
пятница, 11 декабря 2015 г.
Moscow Science Week - 2015
Всю эту неделю (c 7 по 12 декабря) в Москве проходило мероприятие "Moscow Science Week - 2015", неделя науки (http://ift.tt/1sB9HoT).
9 декабря 2015 года я приняла участие в Форсайт-сессия "Будущее исследований и будущее науки" (http://ift.tt/1IJAGI2).
На сессии я рассказывала про концепцию Открытой науки и о тех проектах, которые сейчас идут у нас в Лаборатории в ИТМО (например, о платформе связанных открытых данных: http://lod.ifmo.ru/, вот здесь можно посмотреть на визуализацию на основе связанных открытых данных: http://ift.tt/1Ng1Y7K).
Мою презентацию с этой сессии можно посмотреть здесь: http://ift.tt/1IJADMl
by via Ирина Радченко
среда, 7 октября 2015 г.
вторник, 29 сентября 2015 г.
Инструменты для дата-журналиста
SILK (http://silk.co/) - это замечательный сервис, позволяющий систематизировать, организовать, аннотировать и выложить в онлайне различные данные.
Именно на сайте SILK мне удалось найти весьма полезную подборку инструментов дата-журналиста: http://ift.tt/1jtrz2U
Более того, внизу можно посмотреть статистику по собранным инструментам.
Как видно, из статистики, больше всего представлено инструментов для визуализации данных (67 сервисов), затем идет инструментарий для сбора данных (22 сервиса) и для анализа данных (14 сервисов).
И как выяснилось, из представленных инструментов только 12% платные. Остальные либо бесплатные, либо представлены по типу Freemium.
Любопытно, что представленная статистика интерактивна, и при нажатии на конкретную группу, можно посмотреть список всех инструментов этой группы.
by via Ирина Радченко
среда, 9 сентября 2015 г.
Секция по Открытой науке в рамках конференции KESW - 2015
C 30 сентября по 2 октября в Москве будет проходить международная конференция KESW-2015 (http://2015.kesw.ru/).
Приглашаю всех заинтересованных в Открытой науке людей поучаствовать в работе секции по Открытой науке. Чуть позже я опубликую приблизительную тематику и расписание работы секции.
Буду рада пожеланиям и дискуссии, и особенно - инициативе выступления с докладом или мастер-классом.
Планируется, что эта секция проходить 2 октября с 16:30 до 18:00.
Мероприятие будет проходить по адресу: Москва, Ленинский пр., 4, университет МИСиС.
by via Ирина Радченко
вторник, 8 сентября 2015 г.
Data Science Week - 2015
С 24 по 30 августа в Digital October (Москва) проходило мероприятие Data Science Week - 2015 (http://ift.tt/1E45q4y).
25 августа в рамках мероприятия я выступила на сессии "Открытые данные" с докладом "Как обучать работе с открытыми данными".
Слайды моего выступления можно посмотреть здесь: http://ift.tt/1EMRhZT.
Программа и материалы: http://ift.tt/1EMRhZW
А вот здесь в Dropbox лежат материалы со всего мероприятия: http://ift.tt/1K5dpKF
by via Ирина Радченко
понедельник, 15 июня 2015 г.
Первый центральноазиатский хакатон (Open Data Hackathon in Kyrgyzstan)
В начале июня сначала в Бишкеке, а потом на озере Иссык-Куль проходил первый центральноазиатский хакатон. Мероприятие было ориентировано не только на создание приложений на открытых данных, но также на создание статей в стили дата-журналистики, а также инициации действий гражданских активистов (создание запросов на получение актуальной информации из гос. органов, Civic Hacking и тд)
Коллеги из Всемирного банка меня пригласили поучаствовать в хакатоне в качестве консультанта и наставника команд. В результате я прочитала участникам несколько лекций и провела мастер-классы. Некоторые материалы по традиции выложены на слайдшер: http://ift.tt/1R0FjLT.
Надо отдельно отметить удивительно дружескую атмосферу мероприятия, наполненную энтузиазмом и взаимопомощью. Все участники работали в очень интенсивном режиме, и несмотря на это были готовы помочь и посотрудничать в мастер-классах.
Например, Алмаз Чанаев по моей просьбе рассказал журналистам и активистам о преимуществах, предоставляемых для совместной работы веб-сервисом GitHub (презентацию можно посмотреть здесь: http://ift.tt/1egYaGT).
Приятно удивило то, сколько данных имеется в наличии на сайтах гос. органов Кыргызстана.
Отдельно стоит отметить портал открытых данных РК, организованный инициативной группой: http://opendata.kg/
В номинации "статья в стиле дата-журналистики" первое место заняла статья Фариштамох Гуловой о женском образовании в республике Таджикистан. По договоренности эта статья была размещена в совместном блоге, посвященном журналистике данных: http://ift.tt/1R0FgzX
by via Ирина Радченко
понедельник, 13 апреля 2015 г.
среда, 11 марта 2015 г.
Международная неделя открытого образования - 2015 (Open Education Week - 2015)
С 9 по 16 марта весь научно-образовательный мир отмечает неделю Открытого образования (Open Education Week - 2015).
К этому событию приурочены различные мероприятия, как образовательного, так и просветительного характера (http://ift.tt/zrEXSV).
Наше российское отделение Open Knowledge тоже не осталось в стороне.
Как и в прошлом году, когда мы с Анной Сакоян написали пост в блог UK Web Focus (http://ift.tt/1EUqo31), мы решили продолжить начинание и опубликовали два поста в блоге Open Knowledge.
Первый пост был посвящен обзору российских открытых образовательных ресурсов (http://ift.tt/1KmgHPY), второй пост освещает наши дата-экспедиции (http://ift.tt/1b1JedJ).
Если у вас есть открытые образовательные проекты, то расскажите о них.
В социальных сетях для этого мероприятия используется хэштэг #openeducationwk.
by via Ирина Радченко
понедельник, 2 марта 2015 г.
Скрейпинг (scraping)
Веб-Скрейпинг - это технология получения данных из веб-страниц.
К сожалению, пока что в русскоязычной Википедии нет страниц, посвященных скрейпингу. А вот в англоязычной Википедии такие статьи уже есть (Web-scraping, Data-scraping).
Краткий обзор инструментария для скрейпинга в блоге, посвященному скрейпингу: http://ift.tt/1AOFWE1
Инструментарий для веб-скрейпинга
- ScraperWiki: http://ift.tt/nHMmeA
Онлайн-сервис, позволяющий не только писать свой скрейперы при помощи HTML, JavaScript и Python (и не только), но и переводить документы из формата PDF в формат CSV.
- OpenRefine - http://openrefine.org/
Мощный инструмент по работе с "сырыми данными", и в числе прочих функций, позволяет скрейпить данные. Под OpenRefine написано множество программных расширений.
Есть отличная книга по OpenRefine (Ruben Verborgh, Max De Wilde "Using OpenRefine"): http://ift.tt/1AOFV31
- import.io - https://import.io/
Быстро растущий сервис, в котором разработчики постоянно реализовывают новые функции, см. http://ift.tt/1t0Zwv6
Можно визуализировать данные через другой сервис -- plot.ly (http://ift.tt/1FNoRdf)
- Kimono http://ift.tt/1pmq70J
Инструкция от Филиппа Каца, Как сделать скрейпер за 15 минут: http://ift.tt/1AOFWE5
- OutWit Hub http://ift.tt/VYveEg
Расширение под Firefox, позволяющее вытягивать различные данные из веб-страниц.
Creating a Scraper for Multiple URLs, Simple Method: http://ift.tt/1FNoP58
- Google Web Scraper http://ift.tt/UrLiRq
Расширение под Google Chrome.
- Scrapy http://scrapy.org/
Фреймворк для написания краулеров. Поддерживает написание программного кода на языке Python 2.7.
Список информационных источников
- Paul Bradshaw. Scraping for journalists. http://ift.tt/TN8Uyv
- A Guide to Web Scraping Tools. http://ift.tt/1BFy0DO
- Scraping Web sites using Scraper extension for Chrome: http://ift.tt/1rKRCCi
- Data Minig with Google Refine: http://ift.tt/1FNoRdn
- Scraping Using OpenRefine: http://ift.tt/1AOFXYG
- Scraping multiple Pages using the Scraper Extension and Refine: http://ift.tt/1AOFXYK
by via Ирина Радченко
четверг, 26 февраля 2015 г.
Расследовательская журналистика
Любопытная статья по расследовательской журналистике и тому, как использовать "цифровой инструментарий": http://ift.tt/1BAin4g
Ссылка на учебник по верификации:http://ift.tt/1b7fLIV
И ссылка на сервис по верификации происшествий: https://veri.ly/
Пока что, к сожалению, все на английском языке.
Излишне говорить о том, что было бы здорово, если бы кто-нибудь перевел это на русский язык.
by via Ирина Радченко
вторник, 24 февраля 2015 г.
Международный день Открытых данных в Москве (Moscow Open Data Day 2015)
21 февраля, в субботу, по всему миру было отпраздновано событие -- международный день Открытых данных.
Всего в мероприятии приняло участие 248 команд из 61 страны со всего мира.
Статистику участников можно посмотреть здесь: http://ift.tt/1zcfGhI
В Москве международный день Открытых данных прошел при поддержке НП "Информационная культура" (http://infoculture.ru/) и Российского отделения фонда Открытых знаний (OKFN-RU: http://ru.okfn.org/).
Мероприятие посетило свыше 40 человек, обладающих самыми различными навыками. Среди участников были замечены как представители гуманитарных направлений (пиар, реклама, журналистика и тп), так и разработчики, программисты и дата-аналитики.
Были представлены не только доклады с презентациями, но и рассказы, анонсы мероприятий в свободной форме.
Мою презентацию, посвященную Открытой науке, можно посмотреть здесь: http://ift.tt/1B7YIH6, сопутствующие материалы здесь: http://ift.tt/1zcfGhK
Были также представлены презентации о визуализациях (презентация Ивана Бегтина: http://ift.tt/1B7YGii), понятном языке (презентация Ростислава Яворского: http://ift.tt/1zcfFdQ) и использовании Leaflet.js (презентация Ивана Игнатьева: http://ift.tt/1B7YIXm, материалы: http://ift.tt/1zcfGhR, http://ift.tt/1B7YGio.
В результате хакатона было сделано около 4 прототипов приложений.
Некоторые участники показали желание участвовать в проекте Open Science Labs (проект об Открытой науке, призванный популяризировать и продвигать концепт Открытой науки в России).
Заявку на участие в проекте Open Science Labs можно заполнить здесь: http://ift.tt/1B7YIXo
by via Ирина Радченко
вторник, 3 февраля 2015 г.
Семинары по дата-журналистике в Перми и Новосибирске
С 21 по 23 января 2015 г. в Перми и с 26 по 28 января 2015 г. в Новосибирске вместе с Оксаной Силантьевой (Силамедиа) я проводила мастер-классы и семинары по дата-журналистике, в ходе которых я написала несколько довольно несложных инструкций для журналистов по работе с онлайн-сервисами Google.
Итак, ссылка на инструкцию по тому, как завести себе почтовый ящик в Гугл.
И ссылка на инструкцию о том, как создать и работать с гуглотаблицей.
Некоторые журналисты интересовались нормативно-правовой базой открытых данных. Именно для них я написала отдельный пост в своем блоге: http://ift.tt/1zSLkqv
Многие журналисты занимаются довольно интересными расследованиями, результаты которых они вскоре планируют опубликовать.
Очень надеюсь, что наши семинары помогли им в освоении нового инструментария по работе с открытыми данными!
by via Ирина Радченко
вторник, 27 января 2015 г.
Российская нормативно-правовая база для открытых данных
Список российских нормативно-правовых актов в области открытых данных
Федеральный закон от 27.07.2006 № 149-ФЗ «Об информации, информационных технологиях и о защите информации»
Ссылка: http://ift.tt/1sBwVsp
Федеральный закон от 09.02.2009 № 8-ФЗ «Об обеспечении доступа к информации о деятельности государственных органов и органов местного самоуправления»
Ссылка: http://ift.tt/1JUVeYO
Постановление Правительства РФ от 24 ноября 2009 года № 953 «Об обеспечении доступа к информации о деятельности Правительства РФ и федеральных органов исполнительной власти»
Ссылка: http://ift.tt/1jAYmwx
Федеральный закон № 112-ФЗ «О внесении изменений в Федеральный закон "Об информации, информационных технологиях и о защите информации"» и Федеральный закон «Об обеспечении доступа к информации о деятельности государственных органов и органов местного самоуправления»
Ссылка: http://ift.tt/18nTb3R
Указ Президента Российской Федерации 7 мая 2012 года N 601
Ссылка: http://ift.tt/18nTb3T
Приказ Министерства связи и массовых коммуникаций Российской Федерации (Минкомсвязь России) от 27 июня 2013 г. № 149
Ссылка: http://ift.tt/1jAYkow
Постановление Правительства Российской Федерации от 10 июля 2013 г. N 583 г. Москва «Об обеспечении доступа к общедоступной информации о деятельности государственных органов и органов местного самоуправления в информационно-телекоммуникационной сети "Интернет" в форме открытых данных»
Ссылка: http://ift.tt/1hasGQl
Распоряжение Правительства РФ от 10 июля 2013 года № 1187-р
Ссылка: http://ift.tt/1hasIYt
Федеральный закон Российской Федерации от 12 марта 2014 г. N 35-ФЗ
Ссылка: http://ift.tt/18nT9Ji
Методические рекомендации по публикации открытых данных государственными органами и органами местного самоуправления и технические требования к публикации открытых данных (версия 3.0)»
Ссылка: http://ift.tt/1JUVdnz
by via Ирина Радченко