SlideShare ist ein Scribd-Unternehmen logo
1 von 18
Downloaden Sie, um offline zu lesen
Сервисы
инфраструктуры
данных для
исследователей
Иван Бегтин
UK Data Service
UK Data Service (www.ukdataservice.ac.uk)
Задача
История
Предоставление доступа
исследователей, центральных
и местных властей, бизнеса и
НКО к данным.
Основано в 2012 году при
научном совете по экономике
и соц. исследованиям (ESRC)
Примеры данных
• Перепись населения
• Финансируемые государством
опросы населения
• Исследования с географической
привязкой (опросы домохозяйств)
• Кросс-национальные опросы
• Международные микроданные,
например, от Всемирного Банка
Цель
Развитие научных исследований в экономике и социальных науках
UK Data Service. Управление доступом
• Режим доступа к данным без ограничений
• Применяется когда полностью отсутствует риск
раскрытия персональных данных
Open Data
• Данные позволяющие идентифицировать человека
при связке, например, с частными базами
• Требует регистрации и авторизации
Safeguarded
• Данные позволяющие идентифицировать человека
• Требует особой виртуальной или физической
среды
Controlled
UK Data Service. Ограниченные режимы доступа
Safeguarded (защищённый)
• Данные позволяющие идентифицировать человека при
связке, например, с частными базами
• Могут быть ограничения на коммерческое использование
• Могут требоваться дополнительные соглашения
• Требуют идентификации и авторизации
Controlled (Контролируемый)
• Персональные или иные крайне чувствительные данные
• Специальная защищённая инфраструктура
• Обязательное прохождение обучения
• Обязательное соглашение и предупреждение об
ответственности
UK Data Service. Важные особенности
- Access Secure Lab – лаборатория ограниченного доступа
с физическими местами для доступа к данным.
- Взимание платы с коммерческих проектов – по 450 евро
за каждый проект
- Исследовательский центр – проводят множество
исследований по накопленным данным. Исследования
финансируются ESRC
- Каталог данных – более 7800 наборов данных онлайн с
DOI и цитированием для каждого набора
Australian
National Data
Service
Australian National Data Service (www.ands.org.au)
Задача
История
Предоставление спектра
сервисов вокруг данных и
самих данных для учёных
Основано в 2008 году при
Университете Монаша, в 2018
году вошло в ARDC
Примеры сервисов
• Каталог данных (RDA)
• Цитирование данных (DOI)
• Идентификация данных
• Разработка руководств по работе с
чувствительными данными
• Тренинги по FAIR (гайд по
доступности данных)
Цель
Повышение полезности научных данных для учёных и нации
Australian National Data Service. Важные особенности
- Госфинансирование – финансируются из проекта
National Collaborative Research Infrastructure Strategy
(NCRIS).
- Платный доступ для университетов – доступ к данным
для университетов через Australian Access Federation,
единая академическая система авторизации. Стоимость
подключения $9 617 и годовая подписка $12 840, а также
$5.58 за каждого сотрудника в год.
Australian
Research Data
Commons
Australian Research Data Commons (ardc.edu.au)
Задача
История
Развитие инфраструктуры
научных данных и цифровых
платформ для
исследователей
Основано в 2018 году на базе
ANDS, NECTAR и RDS
Бюджет
• На 2019-2023 годы $110 000 000
(около $22 000 000 в год)
• Из них капитальные инвестиции
$72 000 000
Цель
Создание единой научной инфраструктуры
Australian Research Data Commons. Важные особенности
- Интеграция ANDS – включает в себя инфраструктуру
ANDS и принципы её работы
-
- Госфинансирование – инициатива федерального
правительства и прямая господдержка
- Виртуальные лаборатории – на основе NECTAR Cloud,
инфраструктуры для учёных для дистанционного доступа
к данным
Swedish
National
Data
Service
Swedish National Data Service (snd.gu.se)
Задача
История
Хранение и обмен
информацией научных
исследований
Основано в 2008 году
консорциумом универистетов
Примеры сервисов
• Каталог данных (RDA)
• Обучение
Цель
Создание национальной инфраструктуры открытого доступа
Другие инициативы
- US National Data Service – участвует только университет
Иллинойса, не развивается
- National Data Infrastructure Framework (Канада) – пока на
уровне ежегодных конференций под эгидой Research
Data Canada
Резюме
- практически все существующие инициативы находятся
на госфинансировании прямом или через подписку
университетов/исследовательских центров (ARDC, ANDS,
UK DS)
- инициативы переходят в создание инфраструктуры для
научной деятельности (ARDC)
- большая часть инициатив учреждены государством или
консорциумами университетов (UK DS, ANDS, ARDC)
- практически всегда есть требования по передаче
исследований в централизованный репозиторий
Инструменты
- DataIku – http://dataiku.com
- JupiterHub – http://Jupiter.org
- CKAN – http://ckan.org
- Harvard Dataverse – http://dataverse.org
- Zenodo – http://zenodo.org
Вопросы?
Иван Бегтин, ibegtin@infoculture.ru
Председатель Ассоциации участников рынка данных
Директор АНО “Информационная культура”

Weitere ähnliche Inhalte

Ähnlich wie Сервисы инфраструктуры данных для исследователей

Интернет Вещей тренды проблемы инвестиции Sk 2014
Интернет Вещей тренды проблемы инвестиции Sk 2014Интернет Вещей тренды проблемы инвестиции Sk 2014
Интернет Вещей тренды проблемы инвестиции Sk 2014Vasily Ryzhonkov
 
!Predictive analyticbasics part1
!Predictive analyticbasics part1!Predictive analyticbasics part1
!Predictive analyticbasics part1Vladimir Krylov
 
презентация экбсон 2014(мгу)
презентация экбсон 2014(мгу)презентация экбсон 2014(мгу)
презентация экбсон 2014(мгу)Irinka Bilan
 
03 ананьев сиис13
03 ананьев сиис1303 ананьев сиис13
03 ананьев сиис13Marina_creautor
 
Ananjev SIIS13
Ananjev SIIS13Ananjev SIIS13
Ananjev SIIS13Sib_Inf
 
Документы и данные в облаке: Проблемы этики и доверия. Результаты проекта Int...
Документы и данные в облаке: Проблемы этики и доверия. Результаты проекта Int...Документы и данные в облаке: Проблемы этики и доверия. Результаты проекта Int...
Документы и данные в облаке: Проблемы этики и доверия. Результаты проекта Int...Natasha Khramtsovsky
 
IoT Challenges & Promissing Trends Sk 2015
IoT Challenges & Promissing Trends Sk 2015IoT Challenges & Promissing Trends Sk 2015
IoT Challenges & Promissing Trends Sk 2015Vasily Ryzhonkov
 
Flexicapture Archive
Flexicapture ArchiveFlexicapture Archive
Flexicapture ArchiveEOS-soft
 
Облачный архив медицинских изображений нипк электрон (Cloud PACS)
Облачный архив медицинских изображений нипк электрон (Cloud PACS)Облачный архив медицинских изображений нипк электрон (Cloud PACS)
Облачный архив медицинских изображений нипк электрон (Cloud PACS)Anton Dexter
 
Опыт эффективной организации интеллектуального архива
Опыт эффективной организации интеллектуального архиваОпыт эффективной организации интеллектуального архива
Опыт эффективной организации интеллектуального архиваSergey Poltev
 
Решения крок для учебных заведений
Решения крок для учебных заведенийРешения крок для учебных заведений
Решения крок для учебных заведенийКРОК
 
Особенности разработки для подключенных устройств
Особенности разработки для подключенных устройствОсобенности разработки для подключенных устройств
Особенности разработки для подключенных устройствCEE-SEC(R)
 
Выступление на Solit-2013
Выступление на Solit-2013Выступление на Solit-2013
Выступление на Solit-2013ushchent
 
презентация смарт сити 08 12 2229
презентация смарт сити 08 12 2229презентация смарт сити 08 12 2229
презентация смарт сити 08 12 2229Yerbol Kopzhassar
 
Nk russia symposium 2012 corp overview
Nk russia symposium 2012 corp overviewNk russia symposium 2012 corp overview
Nk russia symposium 2012 corp overviewDenis Pavlov
 

Ähnlich wie Сервисы инфраструктуры данных для исследователей (20)

Презентация ИРИ
Презентация ИРИПрезентация ИРИ
Презентация ИРИ
 
Интернет вещей: идеи для стартапов
Интернет вещей: идеи для стартаповИнтернет вещей: идеи для стартапов
Интернет вещей: идеи для стартапов
 
Интернет Вещей тренды проблемы инвестиции Sk 2014
Интернет Вещей тренды проблемы инвестиции Sk 2014Интернет Вещей тренды проблемы инвестиции Sk 2014
Интернет Вещей тренды проблемы инвестиции Sk 2014
 
!Predictive analyticbasics part1
!Predictive analyticbasics part1!Predictive analyticbasics part1
!Predictive analyticbasics part1
 
презентация экбсон 2014(мгу)
презентация экбсон 2014(мгу)презентация экбсон 2014(мгу)
презентация экбсон 2014(мгу)
 
03 ананьев сиис13
03 ананьев сиис1303 ананьев сиис13
03 ананьев сиис13
 
Ananjev SIIS13
Ananjev SIIS13Ananjev SIIS13
Ananjev SIIS13
 
Документы и данные в облаке: Проблемы этики и доверия. Результаты проекта Int...
Документы и данные в облаке: Проблемы этики и доверия. Результаты проекта Int...Документы и данные в облаке: Проблемы этики и доверия. Результаты проекта Int...
Документы и данные в облаке: Проблемы этики и доверия. Результаты проекта Int...
 
IoT Challenges & Promissing Trends Sk 2015
IoT Challenges & Promissing Trends Sk 2015IoT Challenges & Promissing Trends Sk 2015
IoT Challenges & Promissing Trends Sk 2015
 
Flexicapture Archive
Flexicapture ArchiveFlexicapture Archive
Flexicapture Archive
 
Bez lect-7
Bez lect-7Bez lect-7
Bez lect-7
 
єіас
єіасєіас
єіас
 
Облачный архив медицинских изображений нипк электрон (Cloud PACS)
Облачный архив медицинских изображений нипк электрон (Cloud PACS)Облачный архив медицинских изображений нипк электрон (Cloud PACS)
Облачный архив медицинских изображений нипк электрон (Cloud PACS)
 
Опыт эффективной организации интеллектуального архива
Опыт эффективной организации интеллектуального архиваОпыт эффективной организации интеллектуального архива
Опыт эффективной организации интеллектуального архива
 
Решения крок для учебных заведений
Решения крок для учебных заведенийРешения крок для учебных заведений
Решения крок для учебных заведений
 
Особенности разработки для подключенных устройств
Особенности разработки для подключенных устройствОсобенности разработки для подключенных устройств
Особенности разработки для подключенных устройств
 
Выступление на Solit-2013
Выступление на Solit-2013Выступление на Solit-2013
Выступление на Solit-2013
 
презентация смарт сити 08 12 2229
презентация смарт сити 08 12 2229презентация смарт сити 08 12 2229
презентация смарт сити 08 12 2229
 
Взгляд на Data Science
Взгляд на Data ScienceВзгляд на Data Science
Взгляд на Data Science
 
Nk russia symposium 2012 corp overview
Nk russia symposium 2012 corp overviewNk russia symposium 2012 corp overview
Nk russia symposium 2012 corp overview
 

Mehr von Ivan Begtin

Alternative data by Ivan Begtin
Alternative data by Ivan BegtinAlternative data by Ivan Begtin
Alternative data by Ivan BegtinIvan Begtin
 
Дата расследования в России.
Дата расследования в России.Дата расследования в России.
Дата расследования в России.Ivan Begtin
 
API в проектах Инфокультуры
API в проектах ИнфокультурыAPI в проектах Инфокультуры
API в проектах ИнфокультурыIvan Begtin
 
Цифровое культурное наследие
Цифровое культурное наследиеЦифровое культурное наследие
Цифровое культурное наследиеIvan Begtin
 
Основные источники информации о госфинансах в России (обзор систем)
Основные источники информации о госфинансах в России (обзор систем)Основные источники информации о госфинансах в России (обзор систем)
Основные источники информации о госфинансах в России (обзор систем)Ivan Begtin
 
Как не запутаться в справочниках и классификаторах бюджетной системы
Как не запутаться в справочниках и классификаторах бюджетной системыКак не запутаться в справочниках и классификаторах бюджетной системы
Как не запутаться в справочниках и классификаторах бюджетной системыIvan Begtin
 
Как устроена бюджетная система России (обзор данных и структуры)
Как устроена бюджетная система России (обзор данных и структуры)Как устроена бюджетная система России (обзор данных и структуры)
Как устроена бюджетная система России (обзор данных и структуры)Ivan Begtin
 
Проекты на данных криминальной статистики в России и в мире
Проекты на данных криминальной статистики в России и в миреПроекты на данных криминальной статистики в России и в мире
Проекты на данных криминальной статистики в России и в миреIvan Begtin
 
Простой и понятный русский язык (plainrussian.ru)
Простой и понятный русский язык (plainrussian.ru)Простой и понятный русский язык (plainrussian.ru)
Простой и понятный русский язык (plainrussian.ru)Ivan Begtin
 
Государство как платформа. Обзор и практика
Государство как платформа. Обзор и практикаГосударство как платформа. Обзор и практика
Государство как платформа. Обзор и практикаIvan Begtin
 
Открытые государственные финансовые исторические данные
Открытые государственные финансовые исторические данныеОткрытые государственные финансовые исторические данные
Открытые государственные финансовые исторические данныеIvan Begtin
 
Государственные субсидии (федеральный уровень)
Государственные субсидии (федеральный уровень) Государственные субсидии (федеральный уровень)
Государственные субсидии (федеральный уровень) Ivan Begtin
 
Международные проекты по открытости расходов государства
Международные проекты по открытости расходов государстваМеждународные проекты по открытости расходов государства
Международные проекты по открытости расходов государстваIvan Begtin
 
Открытые финансовые данные: потребность, доступность, использование
Открытые финансовые данные: потребность, доступность, использованиеОткрытые финансовые данные: потребность, доступность, использование
Открытые финансовые данные: потребность, доступность, использованиеIvan Begtin
 
Скрытые данные. Какие данные спрятаны на госсайтах
Скрытые данные. Какие данные спрятаны на госсайтахСкрытые данные. Какие данные спрятаны на госсайтах
Скрытые данные. Какие данные спрятаны на госсайтахIvan Begtin
 
Где взять данные дата-журналисту?
Где взять данные дата-журналисту?Где взять данные дата-журналисту?
Где взять данные дата-журналисту?Ivan Begtin
 
Иван Бегтин "Цифровые архивы"
Иван Бегтин "Цифровые архивы"Иван Бегтин "Цифровые архивы"
Иван Бегтин "Цифровые архивы"Ivan Begtin
 
Умное государство. Миф или антиутопия?
Умное государство. Миф или антиутопия?Умное государство. Миф или антиутопия?
Умное государство. Миф или антиутопия?Ivan Begtin
 
Открытые и большие государственные данные и их практическая применимость
Открытые и большие государственные данные и их практическая применимостьОткрытые и большие государственные данные и их практическая применимость
Открытые и большие государственные данные и их практическая применимостьIvan Begtin
 
Карты преступности и обзор сайтов МВД/ОВД России
Карты преступности и обзор сайтов МВД/ОВД РоссииКарты преступности и обзор сайтов МВД/ОВД России
Карты преступности и обзор сайтов МВД/ОВД РоссииIvan Begtin
 

Mehr von Ivan Begtin (20)

Alternative data by Ivan Begtin
Alternative data by Ivan BegtinAlternative data by Ivan Begtin
Alternative data by Ivan Begtin
 
Дата расследования в России.
Дата расследования в России.Дата расследования в России.
Дата расследования в России.
 
API в проектах Инфокультуры
API в проектах ИнфокультурыAPI в проектах Инфокультуры
API в проектах Инфокультуры
 
Цифровое культурное наследие
Цифровое культурное наследиеЦифровое культурное наследие
Цифровое культурное наследие
 
Основные источники информации о госфинансах в России (обзор систем)
Основные источники информации о госфинансах в России (обзор систем)Основные источники информации о госфинансах в России (обзор систем)
Основные источники информации о госфинансах в России (обзор систем)
 
Как не запутаться в справочниках и классификаторах бюджетной системы
Как не запутаться в справочниках и классификаторах бюджетной системыКак не запутаться в справочниках и классификаторах бюджетной системы
Как не запутаться в справочниках и классификаторах бюджетной системы
 
Как устроена бюджетная система России (обзор данных и структуры)
Как устроена бюджетная система России (обзор данных и структуры)Как устроена бюджетная система России (обзор данных и структуры)
Как устроена бюджетная система России (обзор данных и структуры)
 
Проекты на данных криминальной статистики в России и в мире
Проекты на данных криминальной статистики в России и в миреПроекты на данных криминальной статистики в России и в мире
Проекты на данных криминальной статистики в России и в мире
 
Простой и понятный русский язык (plainrussian.ru)
Простой и понятный русский язык (plainrussian.ru)Простой и понятный русский язык (plainrussian.ru)
Простой и понятный русский язык (plainrussian.ru)
 
Государство как платформа. Обзор и практика
Государство как платформа. Обзор и практикаГосударство как платформа. Обзор и практика
Государство как платформа. Обзор и практика
 
Открытые государственные финансовые исторические данные
Открытые государственные финансовые исторические данныеОткрытые государственные финансовые исторические данные
Открытые государственные финансовые исторические данные
 
Государственные субсидии (федеральный уровень)
Государственные субсидии (федеральный уровень) Государственные субсидии (федеральный уровень)
Государственные субсидии (федеральный уровень)
 
Международные проекты по открытости расходов государства
Международные проекты по открытости расходов государстваМеждународные проекты по открытости расходов государства
Международные проекты по открытости расходов государства
 
Открытые финансовые данные: потребность, доступность, использование
Открытые финансовые данные: потребность, доступность, использованиеОткрытые финансовые данные: потребность, доступность, использование
Открытые финансовые данные: потребность, доступность, использование
 
Скрытые данные. Какие данные спрятаны на госсайтах
Скрытые данные. Какие данные спрятаны на госсайтахСкрытые данные. Какие данные спрятаны на госсайтах
Скрытые данные. Какие данные спрятаны на госсайтах
 
Где взять данные дата-журналисту?
Где взять данные дата-журналисту?Где взять данные дата-журналисту?
Где взять данные дата-журналисту?
 
Иван Бегтин "Цифровые архивы"
Иван Бегтин "Цифровые архивы"Иван Бегтин "Цифровые архивы"
Иван Бегтин "Цифровые архивы"
 
Умное государство. Миф или антиутопия?
Умное государство. Миф или антиутопия?Умное государство. Миф или антиутопия?
Умное государство. Миф или антиутопия?
 
Открытые и большие государственные данные и их практическая применимость
Открытые и большие государственные данные и их практическая применимостьОткрытые и большие государственные данные и их практическая применимость
Открытые и большие государственные данные и их практическая применимость
 
Карты преступности и обзор сайтов МВД/ОВД России
Карты преступности и обзор сайтов МВД/ОВД РоссииКарты преступности и обзор сайтов МВД/ОВД России
Карты преступности и обзор сайтов МВД/ОВД России
 

Сервисы инфраструктуры данных для исследователей

  • 3. UK Data Service (www.ukdataservice.ac.uk) Задача История Предоставление доступа исследователей, центральных и местных властей, бизнеса и НКО к данным. Основано в 2012 году при научном совете по экономике и соц. исследованиям (ESRC) Примеры данных • Перепись населения • Финансируемые государством опросы населения • Исследования с географической привязкой (опросы домохозяйств) • Кросс-национальные опросы • Международные микроданные, например, от Всемирного Банка Цель Развитие научных исследований в экономике и социальных науках
  • 4. UK Data Service. Управление доступом • Режим доступа к данным без ограничений • Применяется когда полностью отсутствует риск раскрытия персональных данных Open Data • Данные позволяющие идентифицировать человека при связке, например, с частными базами • Требует регистрации и авторизации Safeguarded • Данные позволяющие идентифицировать человека • Требует особой виртуальной или физической среды Controlled
  • 5. UK Data Service. Ограниченные режимы доступа Safeguarded (защищённый) • Данные позволяющие идентифицировать человека при связке, например, с частными базами • Могут быть ограничения на коммерческое использование • Могут требоваться дополнительные соглашения • Требуют идентификации и авторизации Controlled (Контролируемый) • Персональные или иные крайне чувствительные данные • Специальная защищённая инфраструктура • Обязательное прохождение обучения • Обязательное соглашение и предупреждение об ответственности
  • 6. UK Data Service. Важные особенности - Access Secure Lab – лаборатория ограниченного доступа с физическими местами для доступа к данным. - Взимание платы с коммерческих проектов – по 450 евро за каждый проект - Исследовательский центр – проводят множество исследований по накопленным данным. Исследования финансируются ESRC - Каталог данных – более 7800 наборов данных онлайн с DOI и цитированием для каждого набора
  • 8. Australian National Data Service (www.ands.org.au) Задача История Предоставление спектра сервисов вокруг данных и самих данных для учёных Основано в 2008 году при Университете Монаша, в 2018 году вошло в ARDC Примеры сервисов • Каталог данных (RDA) • Цитирование данных (DOI) • Идентификация данных • Разработка руководств по работе с чувствительными данными • Тренинги по FAIR (гайд по доступности данных) Цель Повышение полезности научных данных для учёных и нации
  • 9. Australian National Data Service. Важные особенности - Госфинансирование – финансируются из проекта National Collaborative Research Infrastructure Strategy (NCRIS). - Платный доступ для университетов – доступ к данным для университетов через Australian Access Federation, единая академическая система авторизации. Стоимость подключения $9 617 и годовая подписка $12 840, а также $5.58 за каждого сотрудника в год.
  • 11. Australian Research Data Commons (ardc.edu.au) Задача История Развитие инфраструктуры научных данных и цифровых платформ для исследователей Основано в 2018 году на базе ANDS, NECTAR и RDS Бюджет • На 2019-2023 годы $110 000 000 (около $22 000 000 в год) • Из них капитальные инвестиции $72 000 000 Цель Создание единой научной инфраструктуры
  • 12. Australian Research Data Commons. Важные особенности - Интеграция ANDS – включает в себя инфраструктуру ANDS и принципы её работы - - Госфинансирование – инициатива федерального правительства и прямая господдержка - Виртуальные лаборатории – на основе NECTAR Cloud, инфраструктуры для учёных для дистанционного доступа к данным
  • 14. Swedish National Data Service (snd.gu.se) Задача История Хранение и обмен информацией научных исследований Основано в 2008 году консорциумом универистетов Примеры сервисов • Каталог данных (RDA) • Обучение Цель Создание национальной инфраструктуры открытого доступа
  • 15. Другие инициативы - US National Data Service – участвует только университет Иллинойса, не развивается - National Data Infrastructure Framework (Канада) – пока на уровне ежегодных конференций под эгидой Research Data Canada
  • 16. Резюме - практически все существующие инициативы находятся на госфинансировании прямом или через подписку университетов/исследовательских центров (ARDC, ANDS, UK DS) - инициативы переходят в создание инфраструктуры для научной деятельности (ARDC) - большая часть инициатив учреждены государством или консорциумами университетов (UK DS, ANDS, ARDC) - практически всегда есть требования по передаче исследований в централизованный репозиторий
  • 17. Инструменты - DataIku – http://dataiku.com - JupiterHub – http://Jupiter.org - CKAN – http://ckan.org - Harvard Dataverse – http://dataverse.org - Zenodo – http://zenodo.org
  • 18. Вопросы? Иван Бегтин, ibegtin@infoculture.ru Председатель Ассоциации участников рынка данных Директор АНО “Информационная культура”