中标
中国电信湖北公司与湖北公众公司2023年数据集市改造项目单一来源采购公示
金额
-
项目地址
湖北省
发布时间
2023/07/27
公告摘要
项目编号hbdylycggs2023072703
预算金额-
招标公司中国电信股份有限公司湖北分公司
招标联系人-
招标代理机构中邮通建设咨询有限公司
代理联系人-15364911165
中标公司湖北公众信息产业有限责任公司
中标联系人-
公告正文
单一来源采购公示 | |||||||
采购公示名称: | 中国电信湖北公司与湖北公众公司2023年数据集市改造项目单一来源采购公示 | 采购公示编号: | HBDYLYCGGS2023072703 | ||||
采购公示开始时间: | 2023-07-28 00:00:00 | 采购公示结束时间: | 2023-08-01 00:00:00 | 终止: | 否 |
采购公示正文 | |||||||
中国电信湖北公司与湖北公众公司2023年数据集市改造项目单一来源采购公示 〔中国电信湖北公司与湖北公众公司2023年数据集市改造项目〕采购人为〔中国电信股份有限公司湖北分公司〕,项目资金已落实,现已具备采购条件,拟采取单一来源方式采购,现进行公示。 一、采购内容 本期建设的主要内容如下: (一)数据集市重构 1.技术架构改造 技术架构由当前的Teradata 数据模型仓库、0racle 数据应用仓库通过Trinity 分发工具和Dblink直连访问的方式改为HIVE数据模型仓库、PG数据应用仓库通过能力开放平台和安全网管进行安全管控和审批的总体实施架构。取消现有的Dblink访问方式,改为大数据平台源数据入湖并对数据加工处理同步到数据共享库并提供数据分权分域的操作给地市提供数据模型访问权限。根据大数据平台生产库数据完成情况同步数据文件到数据共享库并生成数据共享库的数据模型,配置ETL流程调度及监控,发布数据模型,开发同步脚本和数据分权分域处理等能力。 2.数据清理 将现有各专业中心、分公司数据集市用户访问的Terada库,直连生产库数据共计310张表清理下线,并同步在大数据HIVE库重构数据加工、分发任务,创建同名库和同名表,保障大融合项目、承包助手项目、两图两单项目、政企沙盘项目、智慧客服项目等生产任务稳定运行,减少下游适配改造负担。 (二)数据共享库建设 1.数据模型建设 对数据集市现有的各类业务模型、口径进行梳理、抽象、归类,总结出实用度较高应用较广的数据需求,开发构建口径统一、模型统一的通用数据模型。 2.数据同步 (1)数据模型迁移:在大数据平台数据共享库构建分权分域的数据模型,发布对应的数据模型供地市及业务部门负责人订阅,配合地市及业务部门支撑人员验证数据质量是否合格。 (2)调度作业开发:在大数据平台数据共享库新建ETL流程任务,配置定时任务或依赖任务,生成大数据平台数据共享库信号量用于触发地市及业务部门的数据任务。 (3)数据处理任务开发:按照业务需求,将生产库数据模型的数据文件同步配置到共享库目录下,针对相关数据需求,补充相应数据模型的历史数据给地市或业务部门查询;提供数据模型字段中文解释,对省内数据模型新增本地网分区字段;根据地市及业务部门需求对数据模型的历史数据定期清洗。 (4)数据分权分域:将数据模型区分成三个数据分权分域的场景:数据模型中含有本地网字段信息的直接分成17张地市数据模型供地市订阅;数据模型中没有分本地网字段信息的但可通过其他字段信息关联得到本地网内容的,根据关联条件拆分成17张本地网的数据模型供地市订阅;数据模型是维度数据、配置数据或全省通用数据,直接将数据模型提供给地市订阅。 (三)数据集市应用支撑 1.新老数据并行验证 新老数据库的数据总量比对、抽样数据验证、重点指标核对等,验证大数据平台共享库ETL流程任务时效性是否能够满足地市及业务部门的要求并提供相关解决方案。 2.配合数据集市分批割接 按数据库清理时间点要求发布地市数据集市0racle数据库停服的业务通知单;停止原有数据同步任务,监控数据共享库的ETL流程任务执行情况。 3.问题处理与优化 处理平台数据模型订阅权限问题,解决业务部门及地市无法.访问数据模型的问题,优化平台功能模块,提升数据模型发布流程和数据处理效率;优化数据分权分域的处理过程,减少任务配置流程。 4.地市公司与业务部门使用支撑 整理大数据平台数据共享库已发布的模型清单,输出在线文档,添加模型中文说明,更新频率,模型数据来源,存储周期等;每日更新大数据平台数据共享库模型清单,按审批规范要求审核数据共享的订阅需求;支撑地市及业务部门对新数据模型的共享订阅需求,包括历史数据的补充和验证,数据导出和数据下发流程;支撑地市及业务部门对数据口径的问询需求,以及保障监控重点任务的完成情况等。 二、单一来源采购原因 鉴于本项目属于对现有数据集市的深度改造,故采购方式拟为定向谈判方式。 三、单一来源采购供应商 湖北公众信息产业有限责任公司 四、公示媒介和期限 本公示仅在中国电信供应链系统(CTSC)(https://caigou.chinatelecom.com.cn/ctsc-portal/ctscPortal)上发布,其他媒介转载无效。 公示期:2023年07月28日至2023年07月31日 五、 联系方式 单位名称:中邮通建设咨询有限公司 电话:15364911165 地址:武汉市江汉经济开发区发展二路3号俊隆科技园B栋第六层 邮编:430000 异议接收方式:登录中国电信阳光采购网(https://caigou.chinatelecom.com.cn/ctsc-portal/ctscPortal)后,通过“采购协同-异议处理-提出异议”模块提出。 采购人:中国电信股份有限公司湖北分公司 日 期:2023年07月27日 |
返回顶部