SlideShare a Scribd company logo
1 of 10
Download to read offline
OAI-PMH Harvester a Provider - jednoduše a rychle




OAI-PMH Harvester a Provider
jednoduše a rychle

Ivan Hanzlík, EEA
ARCHIVY, KNIHOVNY, MUZEA V DIGITÁLNÍM SVĚTĚ 2012
Praha 28.11.2012


     EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
OAI-PMH Harvester a Provider - jednoduše a rychle


 OAI-PMH Provider

Aplikácia na poskytovanie matadát z repozitára iným
systémom prostredníctvom protokolu OAI-PMH.
                                                                                        HTTP request

                              Transf.                                         OAI-PMH požiadavky
                              modul

                                            Provider
                                             server
                            Konektor                                               Metadata - XML
  Úložište                 na úložište




        EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
OAI-PMH Harvester a Provider - jednoduše a rychle


  OAI-PMH Harvester

Systém na pravidelný, inkrementálny, diferencovaný
harvesting (sklízení) metadát (a abstrakcií) z rôznych dátových
zdrojov. Zabezpečuje transformáciu, validáciu, obohacovanie
a ukladanie.
                                                                          HTTP request
                            Validátor



                                                 Harvester - klient
                                                                      OAI-PMH, FTP, HTTP, File
                              Transf.
                              modul

                            Konektor
  Úložište                 na úložište                                                      XML




        EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
OAI-PMH Harvester a Provider - jednoduše a rychle


  Použitie

Provider
  Poskytovanie metadát pre iné subjekty, agregátory
  Poskytovanie metadát v rámci organizácie
Harvester
  harvesting v rámci organizácie, skupiny organizácií, domény,
krajiny - vymena dat, replikacia, lokalna agregacia,
transformacia / migracia, ...
  vybudovanie agregátora s prístupom k dátam
Použitie aj mimo kultúrne inštitúcie (napr. Verejný sektor a
OpenData)


       EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
OAI-PMH Harvester a Provider - jednoduše a rychle


                                                     OAIS




EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
OAI-PMH Harvester a Provider - jednoduše a rychle


 OAI-PMH Provider

 Konfigurovateľný
 umožňuje vytvoriť OAI-PMH rozhranie pre
 ľubovoľné repository (oddelený konektor)
 Plná implementácia protokolu
 Pripravené pre CIDOC-CRM, custom RDF, ESE,
 MARC, DC
 Konektory: JCR (Alfresco, Jackrabbit), Fedora
 Aplikácia v JAVA (WAR)
Hotové transformácie: DublinCore, Marc, ESE

      EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
OAI-PMH Harvester a Provider - jednoduše a rychle


OAI-PMH Harvester

+ obohacovanie dát (napr. o referencované dáta)
Metadata harvester, Abstraction harvester (PDF,text,image,...)
Indexovanie metadát – fulltext – SOLR (fazety)
Scheduller – plánovanie
Agregátor – prepojenie na slovníky, poskytovanie cez Provider
Editor transformácií
Konvertor súborov
Integrácia na: Image server (IIPImage, Djatoka), prezentačný modul
(portál)
J2EE aplikácia, komponenty integrované na MULE ESB
Ukladanie v ESE, CIDOC/CRM, MARC , DC



     EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
OAI-PMH Harvester a Provider - jednoduše a rychle


  Nasadenie

  Licencie zdarma - LGPL
  Inštalácia (WAR)
Provider (5-10 MD – základné formáty)
  Pripojenie na úložište – JCR, Fedora, iné = 10MD
  Konfigurácia transformácií – XSLT
Harvester (10-15 MD – základné formáty a funkcie)
  Analýza zdrojov, návrh harvestingu
  Konfigurácia systému, voľba formátu ukladania
  Vytvorenie trasformáćií – XSLT
  Prípadne pripojenie a konfigurácia: Image servera, SOLR
  full-text, Portálu, Provider
       EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
OAI-PMH Harvester a Provider - jednoduše a rychle


Příklady použitia

SNG CEDVU + WEB
Slovakiana – národný agregátor
Europeana Local
NDK – Logica
OpenData Node – projekt OpenData




    EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
OAI-PMH Harvester a Provider - jednoduše a rychle


OTÁZKY ?




  Tel: 604 133 113
  Mail: hanzlik@eea.cz




   EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz

More Related Content

Viewers also liked

Filipino men’s familial roles and domestic violence
Filipino men’s familial roles and domestic violenceFilipino men’s familial roles and domestic violence
Filipino men’s familial roles and domestic violenceJerry Jose
 
Cawasa newsletter 1st quarter 2011
Cawasa newsletter   1st quarter 2011Cawasa newsletter   1st quarter 2011
Cawasa newsletter 1st quarter 2011CAWASA
 
UID degree project - research presentation
UID degree project - research presentationUID degree project - research presentation
UID degree project - research presentationKilian Kreiser
 
Konference Archivy, knihovny, muzea v digitálním světě 2010, Praha, 1.12.2010
Konference Archivy, knihovny, muzea v digitálním světě 2010, Praha, 1.12.2010Konference Archivy, knihovny, muzea v digitálním světě 2010, Praha, 1.12.2010
Konference Archivy, knihovny, muzea v digitálním světě 2010, Praha, 1.12.2010Ivan Hanzlík
 
CAWASA Newsletter : 2nd Quarter 2012
CAWASA Newsletter : 2nd Quarter 2012CAWASA Newsletter : 2nd Quarter 2012
CAWASA Newsletter : 2nd Quarter 2012CAWASA
 
Open Courseware on Indigenous Communities and Culture, Nutrition, Health, Dr...
Open Courseware on Indigenous Communities and Culture, Nutrition,  Health, Dr...Open Courseware on Indigenous Communities and Culture, Nutrition,  Health, Dr...
Open Courseware on Indigenous Communities and Culture, Nutrition, Health, Dr...Asian University Digital Resource Network
 
Catalogo golf ed. 2011 incipit
Catalogo golf ed. 2011   incipitCatalogo golf ed. 2011   incipit
Catalogo golf ed. 2011 incipitDiscovering Veneto
 
At udl project -science
At udl project -scienceAt udl project -science
At udl project -sciencecmchaddy1212
 

Viewers also liked (14)

Filipino men’s familial roles and domestic violence
Filipino men’s familial roles and domestic violenceFilipino men’s familial roles and domestic violence
Filipino men’s familial roles and domestic violence
 
Integrating local knowledge in College Teaching and Learning
Integrating local knowledge in  College Teaching and LearningIntegrating local knowledge in  College Teaching and Learning
Integrating local knowledge in College Teaching and Learning
 
Cawasa newsletter 1st quarter 2011
Cawasa newsletter   1st quarter 2011Cawasa newsletter   1st quarter 2011
Cawasa newsletter 1st quarter 2011
 
UID degree project - research presentation
UID degree project - research presentationUID degree project - research presentation
UID degree project - research presentation
 
Konference Archivy, knihovny, muzea v digitálním světě 2010, Praha, 1.12.2010
Konference Archivy, knihovny, muzea v digitálním světě 2010, Praha, 1.12.2010Konference Archivy, knihovny, muzea v digitálním světě 2010, Praha, 1.12.2010
Konference Archivy, knihovny, muzea v digitálním světě 2010, Praha, 1.12.2010
 
Ch1 v1
Ch1 v1Ch1 v1
Ch1 v1
 
Miriam College eLearning Moodle Experience & the Bigger Picture
Miriam College eLearning Moodle Experience & the Bigger PictureMiriam College eLearning Moodle Experience & the Bigger Picture
Miriam College eLearning Moodle Experience & the Bigger Picture
 
Presentation Christ University, Dr. Kennedy thomas
Presentation Christ University,  Dr. Kennedy thomasPresentation Christ University,  Dr. Kennedy thomas
Presentation Christ University, Dr. Kennedy thomas
 
Designing medea
Designing medeaDesigning medea
Designing medea
 
CAWASA Newsletter : 2nd Quarter 2012
CAWASA Newsletter : 2nd Quarter 2012CAWASA Newsletter : 2nd Quarter 2012
CAWASA Newsletter : 2nd Quarter 2012
 
Dumalongdong 2011
Dumalongdong 2011Dumalongdong 2011
Dumalongdong 2011
 
Open Courseware on Indigenous Communities and Culture, Nutrition, Health, Dr...
Open Courseware on Indigenous Communities and Culture, Nutrition,  Health, Dr...Open Courseware on Indigenous Communities and Culture, Nutrition,  Health, Dr...
Open Courseware on Indigenous Communities and Culture, Nutrition, Health, Dr...
 
Catalogo golf ed. 2011 incipit
Catalogo golf ed. 2011   incipitCatalogo golf ed. 2011   incipit
Catalogo golf ed. 2011 incipit
 
At udl project -science
At udl project -scienceAt udl project -science
At udl project -science
 

Similar to OAI-PMH Harvester a Provider jednoduše a rychle

LoCloud Technical Poster - Nad mraky
LoCloud Technical Poster -  Nad mrakyLoCloud Technical Poster -  Nad mraky
LoCloud Technical Poster - Nad mrakylocloud
 
5. 3. O Digitalizace A Vedecke Digitalni Knihovny Martin Lhotak
5. 3. O Digitalizace A  Vedecke  Digitalni Knihovny  Martin Lhotak5. 3. O Digitalizace A  Vedecke  Digitalni Knihovny  Martin Lhotak
5. 3. O Digitalizace A Vedecke Digitalni Knihovny Martin LhotakKISK FF MU
 
Pracovní snídaně: Zavádíme integrační platformu v 75 minutách
Pracovní snídaně: Zavádíme integrační platformu v 75 minutáchPracovní snídaně: Zavádíme integrační platformu v 75 minutách
Pracovní snídaně: Zavádíme integrační platformu v 75 minutáchProfinit
 
Entity Framework: Optimalizace a záludnosti
Entity Framework: Optimalizace a záludnostiEntity Framework: Optimalizace a záludnosti
Entity Framework: Optimalizace a záludnostiProfinit
 
EZproxy a Shibboleth - Seminar v NTK 20.10.10
EZproxy a Shibboleth - Seminar v NTK 20.10.10EZproxy a Shibboleth - Seminar v NTK 20.10.10
EZproxy a Shibboleth - Seminar v NTK 20.10.10Petr
 
Profinit: Prezentace snídaně integrace aplikací 2016
Profinit: Prezentace snídaně integrace aplikací 2016Profinit: Prezentace snídaně integrace aplikací 2016
Profinit: Prezentace snídaně integrace aplikací 2016Profinit
 
Datová úložiště CESNET
Datová úložiště CESNETDatová úložiště CESNET
Datová úložiště CESNETCESNET
 

Similar to OAI-PMH Harvester a Provider jednoduše a rychle (10)

LoCloud Technical Poster - Nad mraky
LoCloud Technical Poster -  Nad mrakyLoCloud Technical Poster -  Nad mraky
LoCloud Technical Poster - Nad mraky
 
5. 3. O Digitalizace A Vedecke Digitalni Knihovny Martin Lhotak
5. 3. O Digitalizace A  Vedecke  Digitalni Knihovny  Martin Lhotak5. 3. O Digitalizace A  Vedecke  Digitalni Knihovny  Martin Lhotak
5. 3. O Digitalizace A Vedecke Digitalni Knihovny Martin Lhotak
 
EZproxy Seminar Multidata
EZproxy Seminar MultidataEZproxy Seminar Multidata
EZproxy Seminar Multidata
 
Pracovní snídaně: Zavádíme integrační platformu v 75 minutách
Pracovní snídaně: Zavádíme integrační platformu v 75 minutáchPracovní snídaně: Zavádíme integrační platformu v 75 minutách
Pracovní snídaně: Zavádíme integrační platformu v 75 minutách
 
Entity Framework: Optimalizace a záludnosti
Entity Framework: Optimalizace a záludnostiEntity Framework: Optimalizace a záludnosti
Entity Framework: Optimalizace a záludnosti
 
EZproxy a Shibboleth - Seminar v NTK 20.10.10
EZproxy a Shibboleth - Seminar v NTK 20.10.10EZproxy a Shibboleth - Seminar v NTK 20.10.10
EZproxy a Shibboleth - Seminar v NTK 20.10.10
 
Profinit: Prezentace snídaně integrace aplikací 2016
Profinit: Prezentace snídaně integrace aplikací 2016Profinit: Prezentace snídaně integrace aplikací 2016
Profinit: Prezentace snídaně integrace aplikací 2016
 
Datová úložiště CESNET
Datová úložiště CESNETDatová úložiště CESNET
Datová úložiště CESNET
 
Lotus Notes 7
Lotus Notes 7Lotus Notes 7
Lotus Notes 7
 
Red hat virtualization
Red hat virtualizationRed hat virtualization
Red hat virtualization
 

OAI-PMH Harvester a Provider jednoduše a rychle

  • 1. OAI-PMH Harvester a Provider - jednoduše a rychle OAI-PMH Harvester a Provider jednoduše a rychle Ivan Hanzlík, EEA ARCHIVY, KNIHOVNY, MUZEA V DIGITÁLNÍM SVĚTĚ 2012 Praha 28.11.2012 EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
  • 2. OAI-PMH Harvester a Provider - jednoduše a rychle OAI-PMH Provider Aplikácia na poskytovanie matadát z repozitára iným systémom prostredníctvom protokolu OAI-PMH. HTTP request Transf. OAI-PMH požiadavky modul Provider server Konektor Metadata - XML Úložište na úložište EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
  • 3. OAI-PMH Harvester a Provider - jednoduše a rychle OAI-PMH Harvester Systém na pravidelný, inkrementálny, diferencovaný harvesting (sklízení) metadát (a abstrakcií) z rôznych dátových zdrojov. Zabezpečuje transformáciu, validáciu, obohacovanie a ukladanie. HTTP request Validátor Harvester - klient OAI-PMH, FTP, HTTP, File Transf. modul Konektor Úložište na úložište XML EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
  • 4. OAI-PMH Harvester a Provider - jednoduše a rychle Použitie Provider Poskytovanie metadát pre iné subjekty, agregátory Poskytovanie metadát v rámci organizácie Harvester harvesting v rámci organizácie, skupiny organizácií, domény, krajiny - vymena dat, replikacia, lokalna agregacia, transformacia / migracia, ... vybudovanie agregátora s prístupom k dátam Použitie aj mimo kultúrne inštitúcie (napr. Verejný sektor a OpenData) EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
  • 5. OAI-PMH Harvester a Provider - jednoduše a rychle OAIS EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
  • 6. OAI-PMH Harvester a Provider - jednoduše a rychle OAI-PMH Provider Konfigurovateľný umožňuje vytvoriť OAI-PMH rozhranie pre ľubovoľné repository (oddelený konektor) Plná implementácia protokolu Pripravené pre CIDOC-CRM, custom RDF, ESE, MARC, DC Konektory: JCR (Alfresco, Jackrabbit), Fedora Aplikácia v JAVA (WAR) Hotové transformácie: DublinCore, Marc, ESE EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
  • 7. OAI-PMH Harvester a Provider - jednoduše a rychle OAI-PMH Harvester + obohacovanie dát (napr. o referencované dáta) Metadata harvester, Abstraction harvester (PDF,text,image,...) Indexovanie metadát – fulltext – SOLR (fazety) Scheduller – plánovanie Agregátor – prepojenie na slovníky, poskytovanie cez Provider Editor transformácií Konvertor súborov Integrácia na: Image server (IIPImage, Djatoka), prezentačný modul (portál) J2EE aplikácia, komponenty integrované na MULE ESB Ukladanie v ESE, CIDOC/CRM, MARC , DC EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
  • 8. OAI-PMH Harvester a Provider - jednoduše a rychle Nasadenie Licencie zdarma - LGPL Inštalácia (WAR) Provider (5-10 MD – základné formáty) Pripojenie na úložište – JCR, Fedora, iné = 10MD Konfigurácia transformácií – XSLT Harvester (10-15 MD – základné formáty a funkcie) Analýza zdrojov, návrh harvestingu Konfigurácia systému, voľba formátu ukladania Vytvorenie trasformáćií – XSLT Prípadne pripojenie a konfigurácia: Image servera, SOLR full-text, Portálu, Provider EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
  • 9. OAI-PMH Harvester a Provider - jednoduše a rychle Příklady použitia SNG CEDVU + WEB Slovakiana – národný agregátor Europeana Local NDK – Logica OpenData Node – projekt OpenData EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz
  • 10. OAI-PMH Harvester a Provider - jednoduše a rychle OTÁZKY ? Tel: 604 133 113 Mail: hanzlik@eea.cz EEA Communication solutions, Praha/Bratislava, www.eea.cz, tel: +420 604 133 113, mail: hanzlik@eea.cz