Jabes 2021 - Poster "CorHAL, une voie pour les chercheurs : simplifier le dép...
Jabes 2019 - Session plénière "Comprendre les flux de données du SI de l'Abes aujourd'hui et demain"
1. Comprendre les flux de données du SI
de l’Abes aujourd’hui... et demain
Carole Melzac & Stéphane Rey / ABES
Vers un nouveau système de gestion des
métadonnées de l’ABES
2. Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey 2
Une présentation en 3 axes
Présentation de l'existant
• Quels sont les flux de données dans le SI ABES aujourd'hui
• Comment ont-ils été construits
• Les problèmes rencontrés
Un circuit de traitement RDF des métadonnées d’éditeurs
• Tentative (réussie !) pour penser, réaliser et effectuer des chaines de traitement sur des
données
• Les problèmes rencontrés
Projection vers l'avenir (Carole)
• Les principes qui guident nos réflexions
• Les besoins côté ABES (stockage, performance, maintenance..)
• Les services aux établissements
3. Nous voulons passer de
3Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey
5. 5
SI ABES – les applications et les flux
Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey
Theses.fr
STEP
Guide
méthodologique
Catalogue Sudoc
www.sudoc.abes.fr
WinIBW
Application de catalogage
CBS
Cœur du Sudoc
Webstats
Statistiques
MicroWebServices
(webservices)
IdRef
Autorités
WebServices
pour IdRef
SELF
Exports
STAR V1
Bibserv / GTD
Transferts
Réguliers
Base XML
Biblio &
Autorités
APCC
Exports de
données
SudocAD /
Qualinca
API Modification
Exemplarisat°
auto (ABES)
Demandes
d’exemplarisation
PEB
Manuscrits
et Archives
THESES SUDOC
CALAMES
BASE XML & API SUDOC
Périscope
Colodus
Exemplaires
HUB de
métadonnées
(Worme)
Cidémis
ISSN
BACON
Editeurs
PPN
STAR V2 TEF
MARC
XML
MARC
EAD
MarcRDF
Kbart
Marc
XML
Paprika
7. 7
SI ABES – les applications et les flux
Les décisions prises
• Nouvelles missions
• Par choix de l’ABES
• Contraintes (techniques ou liées
à l’existant)
• Difficulté pour maîtriser le cœur
(CBS)
Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey
8. 8
SI ABES – les données
Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey
9. 9
SI ABES – les données
Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey
10. 10
SI ABES – les données
1 document = 1 bloc de
données
• 1 caractère modifié = 1 bloc
de données qui circule
• Pas d’historisation des
modifications
• Des données de gestion dans
les données bibliographiques
• Des conséquences sur les
performances du système
Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey
11. Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey 11
Une présentation en 3 axes
Présentation de l'existant
• Quels sont les flux de données dans le SI ABES aujourd'hui
• Comment ont-ils été construits
• Les problèmes rencontrés
Un circuit de traitement RDF des métadonnées d’éditeurs
• Tentative (réussie !) pour penser, réaliser et effectuer des chaines de traitement sur
des données
• Les problèmes rencontrés
Projection vers l'avenir (Carole)
• Les principes qui guident nos réflexions
• Les besoins côté ABES (stockage, performance, maintenance..)
• Les services aux établissements
12. Les imports de métadonnées éditeurs dans le Sudoc
marc marc marc
Imports courants
rdf
A
B
C
marc
Y
Z
Imports via WORME
13. Début
variabl
es
Focus sur les imports automatiques via WORME du flux ONIX de
Fichiers
FTP > Base
ORACLE
XML
Métadonnées
natives en ONIX
Base
ORACLE
> XSL >
Virtuoso
Vérifications
Validations
(SPARQL)
RDF
$$$
Alignements
Auteurs
Viaf > IdRef
$$$ = enrichissements des données
$$$
WorldCat
Indexation
matière
$$$
WorldCat
Alignements
Auteurs
MARC ISO2709
Monogr.
Revues
MARCXML
> Programme
JAVA >
MARC ISO2709
Données
enrichies
> XSL >
Notices
MARCXML
FIN
MARC
SIGB locaux
Monogr.
Revues
Monogr.
Revues
Exposition
RDF, Marc XML,
Z39-50, etc.
14.
15. Le système d’information ABES
Les enseignements
• Les faiblesses sont
identifiées
• Des solutions - imparfaites
- sont esquissées (Worme)
• De l’expérience acquise
• Des compétences
développées
• Une vision en construction
15Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey
16.
17. Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey 17
Une présentation en 3 axes
Présentation de l'existant
• Quels sont les flux de données dans le SI ABES aujourd'hui
• Comment ont-ils été construits
• Les problèmes rencontrés
Un circuit de traitement RDF des métadonnées d’éditeurs
• Tentative (réussie !) pour penser, réaliser et effectuer des chaines de traitement sur des
données
• Les problèmes rencontrés
Projection vers l'avenir (Carole)
• Les principes qui guident nos réflexions
• Les besoins côté ABES (stockage, performance, maintenance..)
• Les services aux établissements
26. 3 : ?
: / ?
K : / 7 ? >
J" 9
6 ? = : :
/ SS ? ! !: S
< : / /
/ SS ! !: S S: S S S 412!/ TUC
3 : / =
/ SS ! !: S S S3 V V)% V ! :
)+K = = )%
#W = ? : ! 3
= : E
27. I
O = = = )% H
: I + N : 5<3<! 6
!
% + N &)"< : =
:: !
3 ? :
)% ! = :
/ !
3 :!! + : =
!
? B
/ ? !!
< = / !! /
!
% = I : :
@
/ / E
37. Sources images
https://unsplash.com/photos/OO89_95aUC0 par Markus Spiske
https://unsplash.com/photos/ugV_7jiFRxM par Photo by Robert Anasch
https://pixabay.com/fr/photos/skittles-candy-alimentaire-couleurs-924835/ par StockSnap
https://unsplash.com/photos/OxK32aLJXWU par Krzysztof Niewolny
https://unsplash.com/photos/bJhT_8nbUA0 par Jukan Tateisi
https://unsplash.com/photos/7pmdVjyv2ac par Max Di Capua
https://pixabay.com/fr/photos/fleurs-bouquet-de-mari%C3%A9e-mariage-260897/
https://unsplash.com/photos/FsrRDNVBS2Y par Debby Hudson
https://unsplash.com/photos/rItGZ4vquWk par Sharon McCutcheon
https://unsplash.com/photos/Cu6I_d8gw5A par Sho Hatakeyama
https://commons.wikimedia.org/wiki/File:Glaucus_atlanticus_1.jpg
https://commons.wikimedia.org/w/index.php?curid=6248596
https://unsplash.com/photos/2X0WwC9f2DQ par Rohit Rao
https://unsplash.com/photos/GEyXGTY2e9w par Brandon Green
35Comprendre les flux de données du SI ABES- Carole Melzac & Stéphane Rey