NSTL大数据管理与计算平台的设计与应用实践
发布时间:2021-10-12 14:19
本文针对国家科技图书文献中心(National Science and Technology Library,NSTL)业务流程再造目标,设计了满足NSTL需求的大数据管理和计算平台,提出了平台的业务架构、技术架构和平台构建的方案,并在大数据治理流程、分布式计算和微服务等方面开展了应用实践。大数据管理和计算平台建设解决了多源异构数据的存储问题和计算瓶颈,提高了数据管理和计算能力,为NSTL从文献服务向知识服务转变打下了坚实的数据平台基础。
【文章来源】:数字图书馆论坛. 2020,(07)CSSCI
【文章页数】:8 页
【文章目录】:
1 数据管理业务流程再造
1.1 业务流程再造目标
1.2 数据加工管理转型
2 大数据管理与计算平台设计
2.1 业务架构
2.2 技术架构
2.3 平台构建
2.3.1 技术规范制定
2.3.2 硬件设施部署
2.3.3 软件设施部署
3 应用实践
3.1 多来源异构数据治理流程应用
3.2 分布式计算技术应用
3.3 微服务技术应用
4 结语
【参考文献】:
期刊论文
[1]企业级大数据平台框架设计方法研究[J]. 尹航,谢汶姝,刘俊涛,单崇喆,何枫. 计算机与网络. 2018(11)
[2]信息分析视角下的大数据分析平台构架研究[J]. 肖源,郝杰,刘莹,王涛. 情报科学. 2016(09)
博士论文
[1]面向云计算的数据安全保护关键技术研究[D]. 刘婷婷.解放军信息工程大学 2013
硕士论文
[1]基于人工鱼群算法的Hadoop调度算法研究[D]. 吉鹏飞.北京林业大学 2014
本文编号:3432746
【文章来源】:数字图书馆论坛. 2020,(07)CSSCI
【文章页数】:8 页
【文章目录】:
1 数据管理业务流程再造
1.1 业务流程再造目标
1.2 数据加工管理转型
2 大数据管理与计算平台设计
2.1 业务架构
2.2 技术架构
2.3 平台构建
2.3.1 技术规范制定
2.3.2 硬件设施部署
2.3.3 软件设施部署
3 应用实践
3.1 多来源异构数据治理流程应用
3.2 分布式计算技术应用
3.3 微服务技术应用
4 结语
【参考文献】:
期刊论文
[1]企业级大数据平台框架设计方法研究[J]. 尹航,谢汶姝,刘俊涛,单崇喆,何枫. 计算机与网络. 2018(11)
[2]信息分析视角下的大数据分析平台构架研究[J]. 肖源,郝杰,刘莹,王涛. 情报科学. 2016(09)
博士论文
[1]面向云计算的数据安全保护关键技术研究[D]. 刘婷婷.解放军信息工程大学 2013
硕士论文
[1]基于人工鱼群算法的Hadoop调度算法研究[D]. 吉鹏飞.北京林业大学 2014
本文编号:3432746
本文链接:https://www.wllwen.com/tushudanganlunwen/3432746.html