看杂志的软件有哪些内容 基于大数据环境的黄河文明文献资源建设构想(3)

3 基于大数据环境的黄河文明文献资源建设

随着互联网技术的迅猛发展，移动端应用的高速普及，大数据的研究已经为各行各业广泛关注。大数据同时具备价值性、多样性、规模性和高速性，即大数据的4V特性[1]。看杂志的软件有哪些内容大数据的数据结构复杂，数量庞大、分布广泛[2]，黄河文明文献资源与大数据的数据特性有异曲同工之处：大数据的服务是通过对数据集的分析来提供服务，黄河文明文献资源也是通过各个数据集之间的交换来实现对用户的信息化服务。所以，黄河文明文献资源的数据也同样具备大数据的各种特性。那么，基于大数据环境，黄河文明文献资源建设如何实现数据的发现、数据的存储、数据的组织、数据的检索以及搭建基于大数据环境的特色服务模式成为课题组研究的重要内容。

3.1 黄河文明文献资源的信息挖掘

基于大数据环境的黄河文明文献资源的信息挖掘工作主要包括三个方面。

3.1.3 定义方式。信息资源的发现主要表现为基于大型仓储数据的发现，基于大数据分析资源的发现。看杂志的软件有哪些内容基于大型仓储数据的发现，主要通过搭建一个庞大的数据池来实现，将所有资源的元数据汇总在一起，通过大数据的技术实现知识关联服务；基于大数据分析资源的发现，则需要拥有一个庞大的系统词表和信息记录机制，将用户的检索记录、检索方式、点击率等信息进行堆积、处理、分析，利用大数据技术找出潜在的信息资源。

3.2 黄河文明文献资源的信息存储

大数据时代，信息资源的增长呈爆炸性扩张，数据量也从GB级发展到TB和PB级别。目前的存储系统已经无法满足大数据的存储，特别是针对结构化数据、半结构化数据和非结构化数据进行分析、集成和融合是迫切需要解决的问题。大数据时代下的云计算和云存储能很好地解决这一问题。云计算环境下不仅它的软件是信息化，同时它的硬件也是信息化，硬件资源的动态调整和扩充能很好地解决大数据黄河文明文献资源的信息存储问题。

3.3 黄河文明文献资源的资源组织

大数据环境下，数据结构分为结构化数据、半结构化数据和非结构化数据[3]。就单一数据来说结构化数据是最有价值的，能充分地反映出数据对象的各种属性，但是在利用大数据的技术手段时，针对半结构化数据和非结构化数据的整理、分析，更能准确地反映出用户的真实需求，所以，基于大数据的黄河文明文献资源的资源组织就显得尤为重要。黄河文明文献资源的数据组织不仅要采用传统的主题法和分类法，同时还将利用其关系型数据对象分类法所产生的交叉索引进行元数据资源组织。而针对半结构化数据和非结构化数据进行选择性搜集，利用科学方法，经过优化、加工、归类后，采用批处理的方法，使数据呈现一定规律。

3.4 基于大数据黄河文明文献资源的资源检索

黄河文明文献资源选用的SAP6.0平台，已经具备了大数据环境下资源的检索功能。用户可以根据自己的需求，关注多种检索点，选择对应的检索途径，实现全方位的信息检索。系统还可以依据用户查询时留下的检索痕迹进行信息追踪、挖掘和预测用户的需求，并能对用户的需求做出快速的反应，主动为用户推送检索结果。因为，拥有完备、丰富的资源库，灵活、多样的分类方法，方便、快捷地利用各种数据，是课题组建设黄河文明资源的初衷。所以，在建设的顶层设计上，课题组就开始考虑对不同的数据结构和数据对象进行收集、整理和归类，利用智能化的系统词表、检索结果，通过数据需求和数据价值进行排序，实时地优化搜索引擎，从而实现大数据环境下的黄河文明文献资源的资源检索服务。

建设特色是揭示某一领域、某一地域、某一时域文献信息特征的重要表现途径，其成果既可彰显资源的价值，又可使资源最大限度地被利用。但其建设所涉及的数据搜集、数据聚合、数据分类、数据规范、搜索引擎等是广泛和复杂的，特别是在大数据时代，特色建设对图书馆来说既是机遇，也是挑战。只有通过大数据、云计算等现代技术，认真分析不同类型的数据，深挖用户需求，才能最大限度地实现文献价值，确保特色的成功建设。

参考文献：

[1] 韩晶.大数据服务若干关键技术研究[D].北京：北京邮电大学，2013：1-2.

[2] Meng Y，Han J，Song M，et al.A carrier-grade service-oriented file storage architecture for cloud computing[C].Web society（SWS），2011 3rd Symposium on.IEEE，2011：16-20（EI：20120514737769）.

[3] 廖智博.云计算环境下的大数据分析[J].苏州大学学报，2014（2）：64-69.

（编校：崔 萌）

本文来自电脑杂谈，转载请注明本文网址：
http://www.pc-fly.com/a/shouji/article-78755-3.html