招标
集团大数据中心研发建设项目(第二次)公开招标采购公告
金额
-
项目地址
-
发布时间
2024/06/21
公告摘要
项目编号-
预算金额-
招标公司-
招标联系人-
标书截止时间-
投标截止时间-
公告正文
在指标体系的基础上,通过专业BI工具,针对不同人群,采用不同的分析方法,实现多租户、多层级的协同 办公、财务、人力资源、供应链、糖酒等领域数据的分析和展示。
构建集团级综合大屏,从集团层面对公司经营情况进行全貌性的分析展示,构建业务板块大屏,总览公司总 体及各板块经营情况,为经营决策提供可视化指导。
构建多层级领导驾驶舱,实现关键业绩指标概览,主题式的指标经营看板,GIS地图展示等数据分析展示。
(四)数据报送
在报表平台基础上,构建集团多层级数据报送平台,实现数据的填报采集、多级汇总和数据上报。按照省国 资委要求对接省国资国企在线监管平台,实现数据上报。
四、需求分析(实质性要求)
(一)功能需求
1数据集成平台
建设数据集成平台,提供多样化的异构数据源、高效的数据自动化处理组件、全Web可视化配置开箱即用,拖 拽式“零”代码配置操作及智能化的实时监控等能力,减少数据集成流程的构建时间及复杂性,通过快速连接、高时效融合多种异构数据。插拔式整合Flink、Spark、Hive等流批计算框架,按需实现弹性自动扩缩存储、计算 服务,提供数据离线/实时集成同步标准化,规范化,工具化,系统化,加快研发效率提升。主要包括数据建模、数据采集、数据清洗/转换、数据加载、数据映射、数据处理监控、离线开发(数据库驱动管理、数据接入、数据 清洗与处理和可视化任务调度分配等)、资源调度(集群资源调度情况、租户资源配置等)、数据权限(组件权 限、权限配置等)、集群管理(集群硬件监控、集群角色管理、集群应用安装管理、集群应用配置等)、数据交 换、任务管理等模块。
2数据治理平台
建设数据治理平台,基于数据仓库分层方法,按业务主题域方式构建标准,统一数据模型,通过对数据从创 建到消亡的全过程的监控和治理,实现数据的统一管理,为企业保证了业务数据在采集、集中、转换、存储、应 用整个过程中的完整性、准确性、一致性和时效性,从而帮助企业建立起符合自身特征的数据架构和数据治理体 系。主要包括数据标准、主数据、元数据、数据质量、数据资产(数据资产可视化、数据目录资源管理、数据标 准管理以及数据质量管理等)、数据共享、数据安全、数据生命周期、数据门户等模块。
3数据分析平台
建设数据分析平台,为不同实施人员提供面向数据仓库的OLAP/OLTP数据分析展现能力,同时也为业务人员提 供自助式数据分析能力,全方位满足用户的数据应用场景,通过丰富的数据分析手段,为用户提供一站式数据分 析平台。主要包括报表分析、图表分析、报告分析、可视化大屏分析等模块。
4数据报送平台
构建集团多层级数据报送平台,实现数据的填报采集、多级汇总和数据上报。按照省国资委要求对接省国资 国企在线监管平台,实现数据上报。
5统一运维管理
搭建大数据平台统一运维管理,任务运维管理、离线运维、实时运维、任务管理、告警事件、任务监控等运 维功能,通过云服务统一提供动态可扩展的计算、存储、网络资源,通过集群部署保证平台的高可用。
(二)数据治理服务需求
数据治理是一个通过一系列信息相关的过程来实现决策权和职责分工的系统,为实现项目目标、提升数据的 价值,利用建成的大数据平台完成以下服务:
1数据标准体系建设
数据标准适用于业务数据描述、信息管理及应用系统开发,可以作为经营、管理中所涉及数据的规范化定义 和统一解释,也可作为信息管理的基础,同时也是作为应用系统开发时进行数据定义的依据。根据我公司实际情 况,制定符合我公司实际的数据标准体系,规范系统建设时对业务的统一理解,增强业务部门、技术部门、管理 部门等对数据的定义与使用的一致性。
2数据采集汇聚
在本项目实施过程中,全面梳理公司内外部数据资源,形成数据资源目录清单,同时利用可视化数据采集工 具,匹配相应的数据采集策略,创建数据采集任务,完成OA、财务、人力、供应链、糖酒业务等系统数据初步采 集,为后续数据治理与分析提供基础数据支撑。
3主数据管理
通过数据治理平台实现企业的主数据管理。
4元数据管理
通过数据治理平台实现技术元数据、业务元数据的统一管理。
5数据安全管理
数据安全管理贯穿于数据治理全过程,提供对隐私数据基于密码技术的加密、脱敏、模糊化处理、数据库授 权监控等多种数据安全管理措施,全方位保障数据的安全运作。
6数据存储管理
在大数据时代,对于数据爆炸式的增长,存储管理也将面临着一系列挑战。如何有效地降低存储资源的消耗,节省存储成本,也是数据治理的一个目标。对于数据存储,目前业界的一些主要的处理方式,包括数据压缩、数据重分布、数据垃圾检测和清理、数据生命周期管理等。
7数据质量管理建设
数据质量是用以描述数据对使用者有价值和有用的程度。在本项目建设实施过程中,基于数据一致性、准确 性、完整性、唯一性、规范性、及时性等衡量标准,完成财务数据、人力资源数据、供应链业务数据、糖酒业务 数据等进行数据质量检核工作。
8数据资产运营
数据资产运营主要是实现数据资产价值的社会化,从数据安全管理及合规性、数据资产成本及价值创造、组 织结构优化、数据质量提升等方面进行规划并不断迭代,持续优化数据资产管理能力,提供不限于财务、人力、供应链、糖酒业务的数据服务。
9数据可视化分析
根据公司战略及相关指标,建立数据分析模型,并利用数据分析平台将数据通过图表的方式传递出来,让用 户能够快速、准确地理解所要表达的信息,从而提高沟通效率。
10数据对接上报
按照国务院国有资产监督管理委员会相关要求,搭建数据采集与填报系统,并根据国资委监管体系数据标准,将公司数据上报至国资委监管平台,完成数据对接,同时建成集团各级企业统一的报送平台,实现数据的填报、汇集、报送等功能。
(三)非功能性需求
1研发技术路线
平台底层使用以Hadoop生态为基础的大数据框架,构建存储计算。以Yarn等开源分布式资源调度管理,对运 行的MapReduce、Hive、Spark、Flink等进行资源的分配和调度,达到共用集群资源的目的。
平台采用开源生态系统的基于Hadoop生态圈技术架构,通过J2EE技术架构封装大数据相关技术并提供Web端的 简易的操作界面,使ETL、BI分析、运维管理等人员摆脱大数据建设对复杂底层技术的要求,通过简单的脚本(SQ L、shell、Python等)即可在企业数据中台实施方面拥有快速的大数据服务能力,通过“低代码+BI”实现可视化 报表的敏捷开发,同时可基于集团现有的技术栈自由选择对应的存储计算平台。
平台是基于Hadoop生态圈集数据汇聚、数据存储、数据治理、数据开发、数据管理、数据服务的一站式数据 中台,能快速的迭代Hadoop生态圈的新技术、新功能、新组件的演进。
2技术需求
(1)规范性需求
本项目的实施必须严格按照项目管理要求进行,保证软件质量,同时确保项目文档的完整性、规范性。
(2)软件可控需求
本项目要求开放应用层源代码,并提供项目的所有文档,包括但不止于软件详细设计文档、软件需求分析文 档、软件设施方案、数据库表结构设计文档等文档。
(3)安全性需求
从系统层面保障业务、数据、用户等方面的安全,采用md5等加密方式确保数据在传输过程中的安全,通过日 志分析、系统审计等确保系统的安全,通过短信等二次认证方式确保账户的安全。
(4)二次开发需求
提供二次开发的标准文档、项目编程规范,提供二次开发深入培训,方便用户自行二次开发。
(5)国产化需求
支持适配国产芯片、国产操作系统及国产应用软件,原则上系统实现全国产化。
(6)性能要求
在单个场景下,获取数据源列表、获取数据通道列表、查看离线任务、查看实时任务,并发量为50时,平均 响应时间均小于2s。在混合测试场景下,50并发压力测试持续运行1小时过程中,平均响应时间需小于3S,且应当 保证并发数据安全
平台的响应时间应该在用户接受的范围内。用户登录、浏览、事务性处理页面:平均响应时间1秒,繁忙时段 响应时间2秒。统计分析记录操作:平均响应时间2秒,繁忙时段响应时间3秒。
持续并发,业务操作平均响应时间<=3s,复杂操作平均响应时间<=8s,错误率<0.1%;
疲劳压测,业务操作平均响应时间<=3s,复杂操作平均响应时间<=8s,错误率<0.1%;
(7)云资源及部署需求
计算、存储、网络资源满足系统稳定运行、数据收集、数据备份、数据安全等需求,需通过云服务方式进行 集群部署,支持动态扩展,保证高可用,云资源应当满足自项目初验后3年的测试开发环境、生产环境的资源需求。
(8)运维服务及其他需求
项目初验后,通过运维人员提供3年的运维服务。支持https、支持IPv6。
(四)其他需求
1本项目要求发表关于大数据方面的应用专利、论文至少一篇,申请著作权登记证书。
2系统研发过程中使用到的操作系统、数据库、中间件、BI等三方软件,需具备正版使用授权,三方软件需支 持全国产化适配。
3积极配合招标单位向相关部门申报奖项。
五、平台研发功能设计(实质性要求)
平台研发功能设计分为大数据基础平台、离线开发、实时开发、数据服务、数据资产、标签管理、BI可视化、统一报送、报表管理平台、系统管理十大子模块。
其中大数据基础平台完全兼容开源生态,提供高可靠、安全、易用的集群管理能力,还支持大规模集群的安 装部署、监控、告警、权限管理等功能。
离线开发支持多源异构数据的接入和处理,通过在集成开发环境完成代码的编写以完成数据开发工作,代码 编写完成后可以发布生产。实时开发提供低延迟、高吞吐、高可靠的分布式流数据实时分析能力,通过可视化图 形拖拽的方式或者页面向导方式快速构建实时计算作业,实现实时场景的计算分析。
提供快速生成数据API的数据服务能力,同时支持将现有的API快速注册到数据服务平台以统一管理和发布。提供全面数据应用能力,能助力领导层、管理层、执行层等多层级,以及多业务域的多场景数据可视化应用,如 复杂报表、数据填报、数据查询、管理驾驶舱等。提供全集团的数据报送,实现与国资平台数据对接。提供报表 管理平台,满足不同的分析场景。各模块的功能项及功能要求见下表:
六、实施要求(实质性要求)
(一)实施内容
投标人中标后将负责以下工作,投标人应针对这些工作内容提供实施方法、资源计划和时间计划:
1.投标人负责建设满足采购人功能需求、技术要求、安全要求的数据中心,提供完整系统软硬件解决方案和建议,并负责组织项目实施和项目质量控制;投标人所交付的数据中心应包含大数据中心相关的平台和平台的客户化工 作;
2.投标人负责提供保证大数据中心正常运行所必须的其他系统软件、安全产品、硬件设备的详细清单,并负责将 相关系统软件、安全产品、硬件设备进行集成;
3.投标人负责为采购人提供大数据中心相关的技术培训、业务培训,使采购人相关技术人员满足数据中心运行 维护、二次开发、业务运行、风险防范等工作的需要;
4.项目各阶段,投标人负责按计划提交合格完整的项目交付文档及源代码;
5.系统的售后服务和升级维护,并满足采购人所提出的服务要求。
(二)实施人员
项目实施以中标人一方的技术力量为主,采购人将派出一定数量的业务与技术人员配合项目建设。中标人负责 整个项目的设计、实施、进度和质量控制,对整个项目的完成进度和质量负责。采购人主要负责审核设计方案,明确 细化业务需求,全面掌握系统各项技术,为将来的运行维护、功能扩充作技术准备,并监督项目的实施。中标人的实 施人员需满足如下要求:
1.项目经理具有软件开发实施经验5年以上,并且是从事过大数据中心实施项目3年以上的项目经理,项目成员 需提供简历。
2.在项目实施过程中(包括运行维护服务期间),采购人有权要求对不符合项目建设要求的项目组成员进行更换,中标人承诺在三个工作日内提供相当于被替换人员资历的至少两名新人员简历,经采购人面试认可后,三个工作 日内到达项目现场,加入项目组工作。
3.中标人收到中标通知书后,应于10日内派需求分析师和核心技术人员前往采购人办公地点进行需求调研和明 确技术方案。
4.项目经理与核心成员必须长驻项目现场,在整个项目实施过程中(包括运行维护服务期间)人员离场或替换需 征得采购人的书面认可。
5.在项目实施过程中,项目实施团队人员必须专职、全程参与整个实施过程,在时间要求上必须100%保证。
6.基于项目实施工作整体计划表,明确核心成员个人工作时间,非计划内的休假要提前一周通知采购人,并取得 采购人书面同意。
(三)文档要求
在项目实施过程产生的过程文档归采购人所有,未经采购人同意,不得泄露。对中标人提供的文档基本要求如 下:
1.提供大数据中心应用软件的全部文档。
2.提供大数据中心建设过程中形成的全部文档。
3.所有文档必须采用简体中文编写,文档要保持完整性、准确性。
4.根据采购人的要求保证各类文档与生产环境的一致性。
5.采购人将对文档进行逐一评审。
6.中标人提供的相关文档包括但不限于:
《项目管理计划》,包括项目章程及项目管理相关各项规范、章程、方案、计划等。
《总体设计方案》、《需求功能规格说明书》、《概要设计说明书》、《详细设计说明书》、《数据库设计说明书》、《系统 测试计划及案例》、《程序开发规范》、《单元测试报告》、《集成测试报告》、《系统测试报告》、《性能测试报告》、《系统 上线方案》、《用户手册》、《运行运维手册》、《系统部署方案说明书》、《试运行报告》、《项目验收报告》。
(四)源码要求
1.在项目实施过程形成的源码、数据归采购人所有,且投标人须与采购人签订保密协议,中标人在项目实施过程 中应使用源代码管理软件。
2.对于不可提供给采购人的基本平台源码,按平台、分模块在投标书中列明,并注明该部分的详细功能和使用说 明。对于未列明的源码,均认为中标人免费提供给采购人。
3.有关业务逻辑部分的源码必须完整的,无封装的提供给采购人。并且采购人对这部分源码有修改维护权。4.二次开发的源码需要符合源码编写规范。
5.中标人需要向采购人提供对源码的培训。
6.源码中需要有充分的注释方便日后维护。
(五)系统测试
中标人必须在项目实施中提供如下测试方案:
1. 提交单元测试案例,承担主要的单元测试工作。
2. 2.提交集成测试案例,承担主要的集成测试工作。
3.积极配合完成用户测试。
4.提交系统压力测试案例,承担主要的压力测试工作。
5.提交系统安装程序测试案例,承担主要的安装程序测试工作。
6.对于测试过程中发现的缺陷,中标人应及时进行修复。
7.中标人的测试方案应非常详细,并与采购人讨论通过后,方可按计划进行测试。
(六)配置信息要求
1.无条件提供支持数据中心稳定运行所需的全部配置文件和参数。
2.按照上述要求按平台、分模块提供配置信息清单,并详细描述其使用范围和配置说明。
3.根据采购人的要求提供配置信息,并保证配置信息与生产环境的一致。
(七)技术转移
中标人在项目实施过程中应充分重视技术转移工作,确保能够与采购人一起完成技术转移,使采购人技术人员 具有独立开发、升级和维护的能力。技术转移内容包含知识转移与技能转移两部分。
1.知识转移
中标人需提供数据中心设计和实施过程中的所有相关文档,如遵循的开发方法、设计文档、应用规范等。
按照最终合同的约定,将文档和源程序代码交由采购人保存。
2.技能转移
采购人有权要求中标人通过定期培训、采购人参与开发以及其它采购人认为合适的方式实现大数据中心的技能 转移,技能转移内容包含但不限于:软件开发生命周期方法、软件工程方法、开发语言及工具的使用、相关第三方软 件的使用等,请投标人在投标书中提供具体的技能转移内容清单以及对应的具体措施;
采购人有权要求中标人通过培训以及其它采购人认为合适的方式实现业务需求分析方面的技能转移,技能转移 内容包含但不限于:业务需求分析方法、业务流程描述方法等,请投标人在投标书中提供具体的技能转移内容清单以 及对应的具体措施;
采购人有权要求中标人通过培训以及其它采购人认为合适的方式实现客户业务需求开发方面的技能转移,技能 转移内容包含但不限于:数据结构设计实现、应用接口开发方法等,请投标人在投标书中提供具体的技能转移内容清 单以及对应的具体措施;
采购人有权要求中标人通过培训以及其它采购人认为合适的方式实现项目集成、实施方面的技能转移。技能转 移内容包含但不限于:项目管理、整体实施架构设计、质量控制、集成测试以及用户验收测试等方法。请投标人在投 标书中提供具体的技能转移内容清单以及对应的具体措施。
采购人有权要求中标人通过培训以及其它采购人认为合适的方式实现应用投产维护方面的技能转移,技能转移 内容包含但不限于:产品投产流程、日常运行维护、出错的处理与解决、数据备份与恢复等,请投标人在投标书中提 供具体的技能转移内容清单以及对应的具体措施。
(八)项目管理要求
1.遵循科学的项目管理方法,合理制定项目计划、调配项目资源,加强沟通协作,有效控制项目进度,防范项目 风险,保障项目质量。
2.使用项目管理工具进行项目管理。
3.提供项目管理方案。
(九)二次开发与系统整合
提供二次开发的标准文档,并提供二次开发深入培训,方便用户自行二次开发。
(十)服务要求
1.培训服务
投标人中标后负责提供数据中心相关的技术培训和业务培训,使采购人相关技术人员能够满足数据中心二次开 发、运行维护、业务推广、风险防范等工作的需要。中标人应定详细的培训方案,培训方案应满足以下要求:(1)提供 培训人员需具有5年以上数据中心实施经验。(2)培训地点由采购人指定。(3)分别就项目实施期间、免费服务期内提 供全面、完整的培训方案。(4)提供培训录像和自学课程等资料。(5)在项目建设的各个阶段应免费提供相应的技术 培训和业务培训,培训完成后至少应达到以下效果:业务管理人员:熟悉数据中心功能特点,熟练掌握各项业务操作,具备利用大数据中心进行风险控制、业务创新、设计与管理的能力;了解数据中心功能特点,熟练利用大数据中心 完成本职工作。技术人员:掌握数据中心的整体架构及设计思想,具备独立的系统设计、应用开发以及系统运维管理 能力;
2.运行维护服务
(1)中标人必须提供至少36个月(但不限于36个月)的运行维护服务,运行维护服务期从系统通过初验收后双方 代表签字之日起计算,中标人应尽量满足运行维护服务期间的新增功能需求。(2)分别就运行维护服务期内、运行维 护服务期后提供全面、完整的售后服务方案;并注明运行维护服务期后的收费方式及标准。(3)运行维护服务期内原 则上应保证技术人员常驻用户现场。(4)在运行维护服务期间,中标人必须对所有软件和系统免费提供定期预防性维 护。中标人必须要有在2小时内对用户提出的临时性紧急维修要求作出回应并派出工程师进行现场支持的承诺。(5)如果中标人不能按照承诺及时提供相关产品和服务,采购人保留索赔的权利。(6)在运行维护服务期间,如果软件设 计厂家对采购人购买的产品有了升级版本,中标人应及时通知采购人。如果采购人有要求,中标人应向采购人免费
提供相同功能的相同软件升级和技术支持。(7)中标人有责任在运行维护服务期后提供以下形式的技术支持服务:电 话咨询:中标人必须为采购人提供技术支持电话,解答采购人在系统使用中遇到的问题,及时给出解决问题的建议和 操作方法。应急支持:中标人必须承诺根据采购人要求,在2小时内派出工程师进行现场支持,满足采购人的突发性 需求。(8)运行维护服务期结束后,中标人有义务在本系统的维护、运行管理和开发方面继续给予用户技术协作和咨 询,提供漏洞补丁服务。
(十一)其他要求
1.技术协作要求:本着长期应用发展的需求,以及与公司其它系统集成的要求,中标人必须与公司的其他技术支 持单位进行充分的技术合作,满足本项目二次开发及与其他应用系统集成的要求。
2.产权要求:投标人承诺所使用软件、技术等的合法性及无相关法律瑕疵;项目涉及的非投标人所拥有的产品、软件、技术等产权由投标人处理,费用包含于本项目范围内。中标人应提供本项目开发实施成果的所有资料(包括但 不限于源代码、设计文档、设计图片、数据等),并保证源代码等资料的完整性。针对本项目开发实施成果,甲方享有 知识产权。
七、商务要求(实质性要求)
1、服务时间
1.本项目研发及服务期限为12个月,项目初验后提供3年运维服务。2.该项目实施周期为12个月,合同签订10 个月内须完成基础数据管理平台搭建及省国资委国资国企在线监管平台对接。
2、履约地点
四川省商投信息技术有限责任公司,采购人指定地点。
3、付款条件及进度
(1)项目完成合同签订,云资源部署到位,数据中台系统、数据报送系统上线试运行,采购人收到中标人提 交的试运行确认单后,支付合同总金额50%的费用。(2)项目试运行1年后,根据服务合同约定服务内容,按实 际完成工作量进行终验,经采购人终验确认后,采购人按分项报价进行支付,本次最大支付金额为合同总金额40%的费用。(3)项目3年运维结束后,支付本合同总金额10%的费用。
4、验收、交付标准和方法
1.试运行
(1)系统试运行期为3个月,在试运行期内如果出现重大问题,则试运行期顺延,直至系统运行稳定并得到采购 人认可为止。(2)试运行顺利完成之后,由采购人、中标人共同整理并签署项目试运行及测试报告,由中标人及时向 采购人提出书面初验申请。
2.初验
(1)中标人应负责在项目初验测试开始前将所有系统相关软件,各阶段相关文档,运行稳定可靠的目标系统及其 安装程序,注释清晰明了的、能够编译生成与目标运行系统一致的源代码,以及有关产品说明书、安装手册、技术文 件等文档汇集成册交付采购人。只有相关资料齐全后,采购人才予以初验。(2)采购人根据验收方案对系统每个模块 逐一进行验收。对文档进行逐一评审。(3)系统测试达到验收标准要求后,由采购人、中标人共同整理并签署项目初 验报告,项目正式上线,并进入运行维护期。
3.终验
初验完成,且项目合同签订1年之后,采购人收到终验申请后,确认能够达到本次采购项目的验收标准则为验收 合格,并由采购人和中标人双方共同签署终验报告。项目的终验标准至少包括如下三条:(1)中标人按照采购人要求 完成中标标的系统开发并在系统试运行3个月之后,采购人确认能够完全满足采购人的业务需求并且能够实现本次 采购项目的建设目标,完全符合采购人的技术要求并且能够实现本采购项目的系统要求,系统运行稳定。(2)中标人 按照采购人要求完成本次采购项目的业务与技术向采购人的完全转移,包括向采购人提供中标标的的培训。(3)中标 人按照采购人要求向采购人完成中标标的一切和应用有关的源代码、系统应用软件、项目文档及其介质的移交工作,源代码必须是可以正常编译和运行且与系统应用软件一致,提交件以光盘介质的形式提供,源代码、系统应用软件、相关文档材料各一套。
5、责任与解决争议的办法
(1)供应商提供的服务不符合本合同规定的,每出现一次违约(合同涉及“日期”和“天数”的,每逾期一 天或少一天,视为一次违约),供应商须向采购人支付本合同总价1%的违约金并且按采购人要求进行整改,出现 违约3次以上或未按采购人要求整改的,采购人有权无条件解除本合同并要求供应商退还已收取的费用。(2)采 购人无正当理由逾期未按照合同约定付款的,则每日按未付款金额的1‰向供应商偿付违约金,但累计违约金总额 不超过未付款总的10%。(3)供应商保证本合同产品的权利无瑕疵,包括产品所有权及知识产权等权利无瑕疵。如任何第三方经法院(或仲裁机构)裁决有权对上述产品主张权利,由供应商承担经济责任的,供应商除应向采 购人返还已收款项及利息外,还应另按合同总价的10%
向采购人支付违约金并赔偿因此给采购人造成的一切损失,包括采购人因诉讼产生的律师费、诉讼费等费用。(4
)双方应通过友好协商解决,经协商不能达成协议时,向供应商所在地人民法院起诉。
6、本项目所有工作成果知识产权归属
(1)供应商应保证在本项目中使用的任何产品和服务(包括部分使用),不会产生因第三方提出侵犯其专利 权、商标权或其它知识产权而引起的法律和经济纠纷,如因专利权、商标权或其它知识产权而引起法律和经济纠 纷,由供应商承担所有相关责任。(2)采购人享有本项目实施过程中产生的全部知识成果及知识产权。(3)如 采用供应商所不拥有的知识产权,则在投标报价中必须包括合法获取该知识产权的相关费用。
序 号 | 模 块 | 功能项 | 功能要求 | |
一 | 大 数 据 基 础 平 台 | 数据 存储 | 存储 数据 类型 | 1.具备结构化数据、非结构化数据、半结构化数据的存储能力,支持分布式文件系 统HDFS、对象存储等; 2.具备数据的存储现状进行分析、治理和优化能力;支持数据冷热程度分析,提出 治理建策略并执行。 |
存储 策略 管理 | 具备多种存储策略的配置、管理以及应用能力。 | |||
数据 计算 | 大数 据计 算能 力 | 具备离线数据、实时与准实时数据的大数据计算能力,支持主流计算引擎,如Hive、Spark、Flink、Kylin。 | ||
机器 学习 能力 | 具备机器学习能力接口,支持常用的AI计算引擎,如Tensorflow、JupyterNoteboo k。 | |||
数据 权限 | 租户 权限 管理 | 支持多租户管理,实现租户隔离,对集群的计算、存储、表格等资源按租户划分。 | ||
权限 认证 控制 | 支持服务组件权限控制,支持Kerberos、LDAP、Ranger管理方案。 | |||
资源 调度 | 资源 管理 分配 | 1.支持队列概览、查看队列详细信息、资源调度情况、租户资源配置,支持队列计 算资源配置; 2.支持HDFS相关配置; 3.支持租户资源配置。 | ||
集群 管理 | 可视 化运 维监 控 | 提供集群web管理工具,支持节点、服务、组件管理。 | ||
节点 管理 | 1.支持集群节点主机硬件指标监控,部署服务监控,例如CPU、内存、磁盘等;2.支持集群节点主机上下线、重启、添加、移除等管理; 3.支持集群节点角色启用、停止、删除等管理功能; 4.支持节点负载均衡配置。 5.支持集群应用安装; 6.支持集群应用的配置 | |||
服务 | 1.提供集群服务部署与升级,版本管理 |
管理 | 2.支持服务上下线、重启、更新、阈值预警;3.支持服务配置参数管理。 | |||
大数 据组 件 | 支持大数据组件,如Hadoop、Spark、Hive、Flink、Kafka、Hbase、Atlas、Zooke eper、Phoenix等的版本管理。 | |||
二 | 离 线 开 发 | 数据源管理 | 1.支持MySQL,Oracle,SQLServer,Hive,GreenPlum,PostgreSQL,MongoDB,HB ase,OTS,HDFS,OSS,HANA,DB2,Kingbase,Gbase,Dameng,GaussDB,Analyt icDB_MySQL,AnalyticDB_PostgreSQL,TiDB、DMDPC等数据源的连接,支持MPP,E xcel/CSV文本数据源,API接口,以及各种JDBC数据源,支持结构化、半结构化和 非结构化数据类型接入和写入。 2.支持驱动管理,连接池配置。 | |
数据接入和开 发 | 1.支持全量数据接入,增量数据接入。粒度细化到库、表,支持批量处理。2.支持数据接入映射关系配置。 3.支持集成和开发任务编辑配置、上线、下线、版本、事务、任务调度配置、任务 优先级、组合任务流管理。 4.具备离线数据清洗与处理能力,支持shell、python、jar包脚本任务上传。 | |||
数据运维 | 1.支持任务列表查看和筛选,查询作业信息、依赖信息、调度信息、执行失败信息; 2.支持配置化补数; 3.支持批量操作,支持批量暂停、批量恢复、批量修改责任人; 4.支持任务优先级调整,任务执行基线及预警管理; 5.支持可视化任务调度分配。 | |||
三 | 实 时 开 发 | 数据源管理 | 1.源端需要支持:Kafka、SQLServerCDC、MysqlBinlog、OracleLogminer、Postgr eSQL等;目的端需要支持:Hive、Kafka、Mysql、Oralce、PostgreSQL、Kudu、AD BPostgreSQL、ADBMyssql、Greenplum、dmdpc等; 2.支持表字段映射,支持可视化配置任务。支持脚本任务。 | |
数据接入和开 发 | 1.支持Flink框架,支持SQL、自定义Jar程序等开发 2.支持FlinkSQL实时计算作业: Source源表支持:Kafka,MySQLBinLog,OracleLogminer,HBase、MySQL、Kudu,PostgresqlCDC,Redis,AnalyticDBPostgreSQL,AnalyticDBMysqlSQL等;Sink结果表支持:Kafka、MySQL、Kudu,Hbase,PostgreSQL,Hive,Redis,Anal yticDBPostgreSQL,AnalyticDBMysqlSQL、MongoDB、Oracle、Elasticsearch;等; | |||
数据运维 | 1.支持实时作业列表及状态查看; 2.支持实时作业异常管理,支持版本管理,界面化属性配置和参数设置。 | |||
四 | 数 据 服 务 | API开发 | 1.支持标签接口、主流数据库的API开发; 2.支持http协议、https协议、Dubbo协议、WebService协议、TCP协议等5种主流协 议。 | |
API管理 | 1.支持API管理,包括API相关信息查看,支持配置式发布和编辑对外发布数据接口,支持配置式获取外部接口; 2.支持服务注册、服务路由、服务发现等服务治理功能。 | |||
五 | 数 据 资 产 | 资产全景 | 1.数据资产目录管理及维护,包括新建、删除、更新、发布、下线等。2.数据资产目录概览统计。 | |
数据地图 | 1.支持数据资产检索功能; 2.支持数据资产目录数据预览、数据详情分析。 | |||
数据标准 | 1.数据标准目录管理及维护,支持数据标准分类,包括新增、删除、更新、发布、下线、版本管理等; 2.数据标准编辑,包括字段结构、字段规则等; 2.支持数据编码规则、字典管理及维护; 4.支持基于数据标准进行数据质量检核规则设置。 | |||
数据模型 | 1.支持可视化逻辑表建模,可根据逻辑表自动生成物理表 2.支持数仓建模管理 | |||
数据质量 | 1.支持表级、字段级、关联关系的检核规则配置,支持质量问题告警;2.支持数据质量评估,支持配置数据质量报告模板并自动生成数据质量报告。 |
数据安全 | 1.支持数据分类分级,支持进行数据分类设置,包括类别设置、访问设置、脱敏设 置; 4.支持用户权限管理,包括库、表、字段的用户/角色权限管理,支持数据操作日 志查看。 | ||
主数据管理 | 1.主数据资源目录管理,包括新建、删除、更新、发布、下线、版本管理等。2.主数据模型管理,包括创建,展示,查看引用关系、变化追溯等。 3.主数据维护,支持主流数据库接入、EXCEL/CSV数据导入导出,数据查看、修改、日志查看。 | ||
数据门户 | 租户、用户的申请、待办等审批,及基本设置、安全设置。 | ||
元数据管理 | 1.支持主流数据库元数据自动化采集,支持实时采集、周期采集、立即采集,支持 采集任务管理; 2.支持对元数据目录的管理,包括对表、字段进行变更订阅,元数据导出功能;3.支持元数据维护,包括新增、修改、删除、维护、版本、订阅、导入、导出;4.支持元数据血缘关系管理和分析,包括重要程度、元数据质量问题、元数据影响 性分析等 | ||
六 | 标 签 管 理 | 标签总览 | 支持标签总览,展示标签中⼼的资源总数、标签使用统计信息 |
标签管理 | 1.支持标签集市,可以查阅检索标签,申请使用标签。 2.支持对象管理,管理标签的所属对象类目、对象实体。 3.支持标签审批管理,审批标签使用、上下架,包括查看我的申请、待我审批、我 已审批的记录。 | ||
标签应用 | 支持基于标签的用户画像分析应用。 | ||
七 | BI 功 能 | 数据集管理 | 支持主流数据库接入,支持数据集配置,支持主流数据库写入。 |
报表开发与管 理 | 1.支持离线OLTP、联机OLAP分析报表; 2.支持无代码可视化UI设计,支持主流多种图表、地图、交互、动画效果,交互支 持JS插件脚本开发;支持完全自定义前端开发;支持PC端、移动端页面适配;3.支持通知、采集报表http、https链接发布,支持接入其他业务系统; 4.支持表单数据采集。 | ||
系统功能 | 1.支持单点登录,支持用户、权限、资源页管理。 2.资源页发布管理,展示集团综合大屏、业务板块大屏、多层级领导驾驶舱、业务 分析页等。 | ||
八 | 统 一 报 送 功 能 | 数据采集 | 1.任务管理,省国资委下发任务自动领取解析,生成填报任务,同时支持自定义生 成填报任务; 2.自动补数,填报任务形成填报报表,可配置关系型数据库自动填数; 3.人工补数,通过http、https链接发布接入OA系统进行人工补数,支持EXCLE/CSV /TEXT等数据格式导入,支持批量导入; 4.提供数据检验和检查功能,对数据进行校验校对,找出异常数据。 |
数据上报 | 对接省国资国企在线监管平台完成上报,支持子公司数据接口上报。 | ||
九 | 系 统 管 理 | 系统管理功能 | 1.租户、用户管理,新建、编辑、删除等; 2.角色权限管理,资源页访问配置; 3.全局参数及局部参数管理,系统运行参数、脚本变量等; 4.日志管理及安全设置:用户登录、操作记录,系统日志、用户日志,系统数 据库备份、恢复、维护等。 |
返回顶部