基于大数据环境的科技管理数据集成平台研究
刘晓晨, 王卓昊
中国科学技术信息研究所,北京 100038
Research on Science and Technology Management Data Integration Platform Based on Big Data Environment
Liu Xiaochen, Wang Zhuohao
Institute of Scientific and Technical Information of China, Beijing 100038
摘要 科技管理数据是国家科技战略发展和科技管理改革的重要基础资源,科技管理数据的有效治理和利用,对优化科技管理决策、合理配置科技资源以及加强科技服务社会能力具有重要意义。通过分析科技管理信息系统和数据集成技术的发展现状,结合国家科技计划改革要求,本文提出了基于大数据环境的科技管理数据集成平台的系统架构和处理流程,并就其各项指标和今后面临的挑战进行了探讨,对合理有效地利用科技管理数据具有重要意义。
关键词 :
科技项目 ,
数据集成 ,
大数据 ,
容器
收稿日期: 2021-05-31
作者简介 : 刘晓晨,男,1980年生,硕士,助理研究员,主要研究领域为科技治理体系研究、科技管理政策研究;王卓昊,男,1977年生,博士,副研究员,主要研究领域为计算机应用、信息系统建设,E-mail:wangzh@istic.ac.c;
1 习近平: 在中国科学院第二十次院士大会、中国工程院第十五次院士大会、中国科协第十次全国代表大会上的讲话[EB/OL]. (2021-05-28). http://jhsjk.people.cn/article/32116542. 2 国务院印发关于深化中央财政科技计划(专项、基金等)管理改革方案的通知[EB/OL]. (2015-01-12) [2021-05-13]. http://www.gov.cn/zhengce/content/2015-01/12/content_9383.htm. 3 陈跃国, 王京春. 数据集成综述[J]. 计算机科学, 2004, 31(5): 48-51. 4 应毅, 刘亚军, 俞琰. 利用Docker容器技术构建大数据实验室[J]. 实验室研究与探索, 2018, 37(2): 264-268. 5 黄军英. 美国科技项目管理信息系统[J]. 全球科技经济瞭望, 2015, 30(1): 6-10. 6 曾建勋, 曹继东, 苏静. 国家科技管理信息系统构建及其对科技情报工作的影响[J]. 情报学报, 2016, 35(9): 900-910. 7 彭远红, 颜帅. 服务国家创新, 打造先进科技信息发布平台——以韩国科学技术信息研究院(KISTI)为例[J]. 科技与出版, 2015(1): 94-98. 8 国家科技管理信息系统公共服务平台[EB/OL]. (2015-07-29) [2021-05-13]. https://service.most.gov.cn. 9 胡明晖. 基于用户需求的科学基金网络信息系统评价研究[J]. 中国科学基金, 2016, 30(4): 360-364. 10 吴川徽, 黄仕靖, 储节旺, 等. 基于集成科研项目数据库的计量分析[J]. 情报科学, 2019, 37(6): 151-156. 11 王海丹, 高雪芹, 范维, 等. 科技服务集成标准化研究[J]. 制造业自动化, 2019, 41(11): 154-156. 12 李宗俊, 陈文杰. 区域科技服务资源集成与关联研究[J]. 中国科技资源导刊, 2019, 51(6): 1-5, 58. 13 刘坚, 马文娟, 李盛乐, 等. 基于大数据技术的地震科学数据集成共享研究[J]. 中国科技资源导刊, 2017, 49(5): 74-81. 14 张子晔, 刘玉龙, 呼北. 基于数据虚拟化技术的多来源数据集成方法[J]. 计算机与现代化, 2019(11): 18-22. 15 解鹏飞, 刘玉安, 赵辉, 等. 基于大数据的海洋环境监测数据集成与应用[J]. 海洋技术学报, 2016, 35(1): 93-101. 16 张薄. 基于Docker的可持续集成的环境PaaS平台的研究[D]. 保定: 河北农业大学, 2018. 17 黄丹池, 何震苇, 严丽云, 等. Kubernetes容器云平台多租户方案研究与设计[J]. 电信科学, 2020, 36(9): 102-111. 18 张军. 基于Hadoop和MPP架构的高校数据集成平台设计[J]. 电子元器件与信息技术, 2020, 4(9): 55-56. 19 张奎. 基于Haproxy+Keepalived的Web集群负载均衡研究与应用[J]. 新疆师范大学学报(自然科学版), 2019, 38(1): 91-96. 20 赵卓峰, 丁维龙, 韩燕波. 基于云架构的交通感知数据集成处理平台[J]. 计算机研究与发展, 2016, 53(6): 1332-1341. 21 刘扬. 基于Spring框架的数据集成与转换研究[D]. 青岛: 中国海洋大学, 2013. 22 崔有文, 周金海. 基于KETTLE的数据集成研究[J]. 计算机技术与发展, 2015, 25(4): 153-157. 23 陈永南, 许桂明, 张新建. 一种基于数据湖的大数据处理机制研究[J]. 计算机与数字工程, 2019, 47(10): 2540-2545. 24 Uprichard E, Dawney L. Data diffraction: challenging data integration in mixed methods research[J]. Journal of Mixed Methods Research, 2019, 13(1): 19-32.
[1]
梁继文, 杨建林, 王伟, 王飞. 科技项目及其成果文献的相关性评估研究 [J]. 情报学报, 2022, 41(2): 155-166.
[2]
王芳, 徐路路. 基于智能化公文主题分析的我国政策层级扩散倾向性研究 [J]. 情报学报, 2021, 40(4): 387-401.
[3]
巴志超, 刘学太, 马亚雪, 李纲. 国家安全大数据综合信息集成的战略思考与路径选择 [J]. 情报学报, 2021, 40(11): 1139-1149.
[4]
丁晓蔚. 数字金融时代的金融情报学:学科状况、学科内涵和研究方向 [J]. 情报学报, 2021, 40(11): 1176-1194.
[5]
杨昭. 基于元路径的机构名称归一化研究 [J]. 情报学报, 2020, 39(10): 1069-1080.
[6]
戴国强. 推进竞跑阶段的创新情报研究 [J]. 情报学报, 2019, 38(8): 771-777.
[7]
丁遒劲, 曾建勋. 文献元数据集成管理研究 [J]. 情报学报, 2019, 38(6): 568-577.
[8]
李品, 杨建林. 基于大数据思维的情报学科发展道路探究 [J]. 情报学报, 2019, 38(3): 239-248.
[9]
邓胜利, 赵海平. 信息泄露情境下的个人信息价值评估及个体差异:基于离散选择模型的实证研究 [J]. 情报学报, 2019, 38(3): 266-276.
[10]
刘冰, 庞琳. 国内外大数据质量研究述评 [J]. 情报学报, 2019, 38(2): 217-226.
[11]
丁晓蔚, 苏新宁. 基于区块链可信大数据人工智能的金融安全情报分析 [J]. 情报学报, 2019, 38(12): 1297-1309.
[12]
李阳, 孙建军. 面向智慧应急的情报资源保障能力建构 [J]. 情报学报, 2019, 38(12): 1310-1319.
[13]
赵志耘, 张均胜, 姚长青, 刘志辉. 面向管理与决策的中国科技创新图谱研究 [J]. 情报学报, 2018, 37(8): 774-781.
[14]
曾文, 徐红姣, 车尧, 李辉. 基于图书出版行业大数据的选题决策分析模型研究 [J]. 情报学报, 2018, 37(8): 813-821.
[15]
巴志超, 李纲, 周利琴, 毛进. 数据科学及其对情报学变革的影响 [J]. 情报学报, 2018, 37(7): 653-667.