DESARROLLAMOS TECNOLOGÍA PARA COSECHADORES NACIONALES
LA Referencia, por medio de su Equipo Técnico, ha desarrollado una plataforma de software libre (GPL 3) para la cosecha de información que, además de soportar el nodo central de la red regional, funciona como un servicio agregador y portal nacional para los países miembros. La solución tecnológica se originó de la fase piloto del proyecto BID de marzo a septiembre de 2013. A mediados del 2014, con recursos de los organismos de Ciencia y Tecnología, se determinó la necesidad de una solución transferible y con un conjunto de mejoras tecnológicas.
Desde el 2015, la tecnología de LA Referencia se instaló en:
- Argentina (MINCYT)
- Brasil (IBICT)
- Colombia (Renata, Colciencias, Ministerio de Eduación)
- Costa Rica (CONARE)
- Chile (CONICYT. LR Harvester y LR Provider)
- Ecuador (CEDIA, SENECYT)
- El Salvador (en instalación, CBUES, Viceministerio de CyT)
- Perú (CONCYTEC)
- Uruguay (ANII)
- Portugal (RCAAP)
- México (en evaluación)
-
Panamá (en evaluación)
La plataforma está integrada por tres componentes que funcionan coordinados:
LRHarvester: componente de cosecha, transformación y validación de metadatos OAI-PMH. Responsable de la cosecha de fuentes OAI, validación de registros de metadatos y su transformación para el cumplimiento de las directrices de calidad de la red. El componente de cosecha se basó inicialmente en OCLCHarvester2. La plataforma está desarrollada en lenguaje Java 1.7, utilizando el framework Spring y el motor de base de datos PostgreSQL 9.X. También funciona sobre MySQL.
LRProvider: componente responsable de la publicación de metadatos mediante el protocolo OAI-PMH, actualmente derivado del software Dspace-XOAI, que ofrece una alta flexibilidad y escalabilidad para la interoperabilidad con otros agregadores internacionales de metadatos.
Buscador/Portal de servicios: portal web de publicación de los metadatos agregados que ofrece un interfaz de búsqueda amigable y adaptativa para dispositivos móviles. Además brinda estadísticas sobre calidad de metadatos y evolución de las cosechas. Este componente está basado en el software libre Vufind (http://vufind.org) sobre el que se han desarrollado módulos específicos.
Su última versión (3.0) tiene mejoras como:
- Interfaz de administración responsiva y más amigable
- Rediseño del mecanismo de validación y transformación orientado a la implementación de reglas que trabajen con directrices más complejas
- Ampliación de los objetos de dominio para reflejar y almacenar validadores, transformadores, valores controlados y diccionarios de transformación
- Rediseño de la estructura relacional para mejorar performance.
- Almacenamiento de mayor cantidad de detalles de diagnóstico sobre motor Solr
- Rediseño de interfaz de diagnóstico y reportes
- Validación multireglas, multicampo y mejoras para cosechas a OJS
Los principios de diseño definidos el 2014 -2015 siguen siendo válidos:
- Transferible: la versión del nodo central debe ser la misma que los nodos nacionales.
- Responsiva: acceso por dispositivos móviles (bootstrap)
- Multilingue: soporte al menos en Inglés y Portugués
- Orientada al negocio: foco en validaciones y transformaciones de metadatos en OAI.
- Soporte para directrices OpenAIRE y flexibilidad para actualización de nuevas directrices
- Escalable: debe cosechar cientos de repositorios y más de un millón de registros en menos de 24 horas.
- Administrable y amigable: herramientas de diagnóstico, validación y reportes para administradores. Posibilidad de manejo por especialistas en información y no sólo técnicos informáticos.
- OpenSource: desarrollo y uso de componentes y soluciones (eg. VuFind para el front end o use de bases de datos conocidas como MySQL, PostGres, y lenguaje Java).
- Estadísticas: desarrollo de nuevos módulos
- Económica: basada en distribuciones Linux gratuitas como Ubuntu y por un nodo nacional “promedio”, una máquina de dos núcleos, con 8 GB Ram, 500 GB de espacio
El software y documentación están disponibles en el repositorio GITHUB.
DOCUMENTOS CLAVES
-Uso de la Plataforma LRHarvester de LA Referencia
NOTICIAS
-Se firmó acuerdo de cooperación entre la FCT de Portugal y LA Referencia
-Ciencia de datos para la ciencia
-LA Referencia presente en Open Repositories 2019
-La Referencia presente en la Reunión Anual de OpenAIRE - Pisa 2019
