龙源期刊网 https://www.wendangku.net/doc/7e958375.html,
大数据架构下的文献资源管理与应用
作者:解飞
来源:《电子技术与软件工程》2017年第21期
摘要本文介绍了在图书馆情报领域数据管理中存在的信息孤岛、数据类型缺乏统一架构
等问题,通过对实际应用中数据类型的分析,利用大数据存储的系统架构,使用关系型数据库与非关系型数据库结合,同时辅以内存数据库和分布式文件系统,对内部用户提供统一元数据管理,对外部提供统一数据访问平台和统一数据搜索引擎,从而实现对多种结构数据资源的管理和应用。
【关键词】图书馆大数据数据存储异构数据非关系型数据库
作为以图书馆为基础的情报研究机构,随着近年数据资源量的不断增加,各类文献、图书、期刊、基础数据等都需要进行稳定的存储与高效率的分析。同时,基于这些数据的知识库、咨询服务智库等系统的建设也都迫在眉睫。
为了能充分管理众多数据,为各类系统提供数据基础,有必要建设一个结构统一、技术先进、可重复利用的数据资源平台,统一管理各类数字化资源。
1 存在问题
面对大量的数据资源,在信息化过程中通常会碰到以下问题:
1.1 信息孤岛现象
这种现象是指需求建设的应用系统存在相互之间在功能上不关联互助、信息无法共享互换以及信息与业务流程和应用相互脱节等问题,缺乏统一元数据管理。
1.2 多种类型数据缺乏统一数据架构
每个业务环节都会有大量非结构化、结构化、半结构化数据,如何对这类数据进行统一分析管理。在这些多种结构的数据中存在大量内在关联,只有统一数据存储,才能进一步挖掘出数据中存在的深层价值。
1.3 软硬件环境重复购买现象
在信息化建设过程中,新建应用系统都会根据自身需求重新搭建软件、硬件环境,大部分系统运行所需软硬件并没有达到资源的满负荷利用。
1.4 缺乏统一数据标准