招标
大数据平台系统项目需求公示
金额
163.5万元
项目地址
广东省
发布时间
2020/05/12
公告摘要
公告正文
项目名称 | 大数据平台系统项目 | 采购类型 | 服务类 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
采购人名称 | 深圳市气象局 | 采购方式 | 公开招标 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
财政预算限额(元) | 1635000 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
项目背景 | 气象行业累积海量的数据,具有大数据的海量特征,面向气象服务及气象敏感行业的数据种类繁多,包括各类结构化和非结构化数据,具有大数据的多样性以及大数据的更新的高速性等特征。同时,气象的发展也早已融入到政治、经济、民生等各领域发展中,国家防灾减灾救灾体系建设、生态文明建设、一带一路战略以及关乎国家安全的军民融合工程建设,均提出了对气象数据及服务产品的明确需求。 因此,通过本项目建立深圳市气象局大数据平台系统,充分利用气象部门在发展大数据具有的先天优势和迫切需求,推动气象大数据的应用及气象数据的开放共享。根据我局工作部署,对接深圳市新型智慧城市建设有关完善气象服务平台的需求,通过搭建大数据交换汇集系统、大数据治理平台、大数据智能分析平台、大数据可视化平台,对我局的智气象数据网进行整合升级,三维立体、常规预报、海洋预报、临近预报、基于历史数据分析的灾情风险、空气质量指数、行业服务等网格数据处理与服务产品开发,并对网格服务产品形成规格说明文档。 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
投标人资质要求 | 2、投标人必须具有独立企业法人资格,持有有效营业执照,遵守中华人民共和国的相关法律、法规。 3、近三年内无行贿犯罪记录,由供应商营业执照、事业单位法人证书或社会团体法人登记证书住所地人民检察院出具《行贿犯罪档案查询告知函》。此项由采购中心统一查询,投标人无须单独出具。 4、本项目不接受任何形式的联合体投标,投标人不得采用与其有隶属关系的母公司、全资子公司及其控股公司的资质和案例作为投标人的资质和案例,否则投标将不被接受。 5、本项目不接受进口产品和服务投标。 1、是深圳市政府采购中心注册的供应商(供应商注册网址:http://www.cgzx.sz.gov.cn); | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
服务类清单 |
| |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
具体技术要求 | 1大数据交换汇集系统 1.1 搭建Redis智能网格服务内存数据库环境 目前我局关系型数据库的读写能力在200-1000次/秒不等,这导致我局智能网格服务在提供高并发的情况下,需要访问的数据可能会被锁住,使得响应速度变慢,体验度不佳。为解决上述问题,搭建一套快速响应的Redis内存数据库。Redis是一款nosql的数据库,也是一种键值对数据库。相比传统的关系型数据库,跑在内存里的Redis,读写数据也达到了30万次/秒,这可以极大地提升智能网格服务效率。同时Redis提供了持久化的支持,数据会同时写进磁盘,使得智能网格服务的数据可以正常保存。 1、将3天的网格实况数据、10天的网格预报数据、全国自动站数据、广东省自动站数据、深圳自动站数据及其他被频繁调用的数据,存入到内存数据库中,并进行实时快速更新。 2、Redis部署在两个高性能计算机节点上,利用节点上内存256G存储最近三天的网格服务数据。 1.2 搭建Cassandra分布式图片数据库环境 为满足海量(百万级)文件的检索与查询,搭建Cassandra分布式数据库,实现海量雷达产品图片、卫星产品图片的秒级检索与显示。其主要内容包括: 1.2.1、搭建Cassandra分布式数据库 雷达和卫星气象数据具有海量特征且不同气象观测手段获取的数据具有不同的时间和空间分辨率,气象数据具有多元性和复杂性。为满足各类气象业务系统对雷达和卫星数据进行快速读取、处理、存储和分析、信息共享等方面的需求,利用Cassandra的分布式存储技术,建立动态可扩充分布式数据库,为海量雷达和卫星数据服务及研究应用、归档、检索等奠定基础。 首先利用Cassandra技术建立一个分布式数据库,将分散在多台服务器上的雷达拼图产品、卫星云图产品数据进行聚合并分成多个节点,并将所有节点统一组建一个集群。气象局的其他业务系统通过访问该集群来获得所需的各种产品数据。 系统把所有存放雷达和卫星产品数据的服务器分成多个个数据节点,再把所有数据节点随机分配到一致性哈希的圆环上。在系统节点间相互连通之后,将大规模的雷达和卫星产品数据集合进行切分,并存放到各个节点上。可实现系统数据分区和节点数据的动态增减管理,并采取Cassandra中的副本策略建立系统数据副本,提高系统读性能并保证系统可靠性。 2大数据可视化平台 为进一步做好深圳市气象局气象资料管理,解决我局数据共享方面存在的问题,建立大数据治理平台,对我局的气象数据网、智创平台等对外服务与共享的系统进行整合,合并成“气象数据科技创新平台”,提供数据共享、数据开放、数据应用、数据研究一体化的数据生态链服务,解决我局数据共享方面存在的问题。 2.1 实时数据产品共享接口开发 为政府决策部门提供时的数据接口,主要包括:天气预警、天气预报、实况数据(气温、风、小时降雨)。并跟踪这些数据使用情况,对使用部门的信息进行管理。通过程序监控接口是数据更新是否正常。对下列数据开发访问接口 1、地面观测:(区域气象观测站观测实况(40个站点)),要素(气温、降水、相对湿度、风向风速、气压、能见度),深圳地区2000+个格点数据,时间范围:近7天; 2、遥感遥测:(中国区域红外卫星云图、泛华南天气雷达组合反射率),时间范围分别是:近几小时、最近1小时; 3、预警预报:灾害性天气预警、天气预报、环境气象预报、健康气象、台风路径、日(月)出日(月)落、旅游气象、海洋气象; 4、气候资料:气候信息、统计值、节假日气候统计值、二十四节气统计值、大中型水库逐日降水数据查询、公园实况数据;继续完善气象数据接口:40个自动站的天气监测数据接口、天气雷达图片接口、灾害性天气预警接口、旅游气象接口、健康气象、定点天气接口、未来十天天气预报、未来十二小时天气预报。 2.2气象数据主题库整合 整合智慧气象共享与应用创新平台主题库,包括:港口、旅游、保险、物流、健康5大气象数据主题库。实现支持通过不同数据类别、不同数据范围,查询筛选各类气象主题服务产品,提供主题服务产品介绍,详情、使用指南说明等。 2.3 建设科技创新模块 2.3.1 科研数据共享管理 根据科研单位及科研课题对气象数据的需求,开发科研数据共享平台。该平台主要是为了让科研人员更好的使用科学气象数据,同时分享各自的科研成果。按照课题、天气过程给气象数据进行分类整理。并把这些数据进行归档整理。开发对这些数据进行增删改查的管理功能。同时开发数据共享情况的统计功能。 2.3.2 科研共享用户管理 实现科研用户用户身份认定功能模块、科研用户信息资料入库管理模块、科研用户研究成果管理认定。 2.4 用户使用情况反馈 针对数据下载和接口调用页面,开发用户评价功能、效益反馈,收集用户使用意见,为我局的数据共享服务的优化做参考。 2.5 后台统计分析 对数据的使用频率,使用量进行分析,然后通过数据中间件实现负载均衡。 1)统计展示调用接口的单位、企业(个人)及数据应用情况 2)统计各个接口的调用次数 3)统计各个接口的调用频率 4)一屏展示数据网用户、页面浏览、下载量等信息 3、大数据智能分析平台 3.1、常规预报网格服务数据处理及产品开发 将国内0~240H的常规预报数据从自动站监测数据、WRF-RTFDDA、EC、EC-GUST、QPE、QPF、全国智能网格实况融合分析产品、省网格数据等渠道采集,并进行智能拼接及融合,形成常规预报网格服务产品和常规预报网格分灾种风险等级预警提示服务产品,并将其分别存储到Redis智能网格服务内存数据库和Cassandra分布式图片数据库,为其他系统调用。 该模块的建设内容主要包括国省市智能网格预报数据拼接及融合;常规预报网格Redis内存数据库入库、出库服务后台建设;常规预报网格Cassandra分布式网格数据库入库、出库服务后台建设;常规预报网格服务产品制作;常规预报网格分灾种风险等级预警提示服务产品制作;常规数据获取渠道。 3.2、海洋预报网格服务数据处理及产品开发 将粤港澳大湾区0~7天的海洋预报网格服务数据从海洋自动站监测数据、IDEA、EC等渠道采集,并进行智能拼接及融合,形成海洋预报网格服务产品,并将其分别存储到Redis智能网格服务内存数据库和Cassandra分布式图片数据库,为其他系统调用。 该模块的建设内容主要包括广东省海洋格点预报指导数据提取及入库;海洋气象数值预报之风暴潮预报网格数据提取及入库;海洋气象数值预报之海浪预报网格数据提取及入库;海洋气象数值预报之漫滩淹没提取及入库;海洋预报网格服务产品制作。所有入库的内容均存到Redis内存数据库和Cassandra分布式网格数据库。 3.3、三维立体网格服务数据处理及产品开发 深圳是台风、暴雨、大风、高温等气象灾害多发区;深圳高层建筑和高空作业工地数量众多。高层建筑受大风、台风、暴雨、雷击等气象灾害的影响程度随着高度的增加而不断增大。因此,为了减轻或消除隐患,利用梯度观测数据及三维数值预报模式数据(FDDA)建立三维网格数据与服务产品,并将其分别存储到Redis智能网格服务内存数据库和Cassandra分布式图片数据库,为其他系统调用。 1、提取三维数值预报模式(FDDA)同化与预报结果,形成深圳区域内从地面到1000米高空10层的三维格点数据,要素包括风、温、相对湿度,空间分辨率为1公里,时间分辨率为10分钟。 2、高层建筑地理信息数据整理及入库 根据最新的深圳市精细化地图数据,选择建筑图层,通过GIS工具将其地理坐标、名称、建筑类型、高度、层数等特征值进行提取并保存到数据库中,作为高层建筑气象灾害风险评估分析的基础数据。 3、三维网格风垂直廓线的定点风险提示产品 在深圳区域内,可提取任一网格风廓线数据,结合一定与阈值,可以为不同高度进行实时大风灾害评估或预警提供参考值: (1)、分高度统计分析盛行和次行的风向、频率和平均风速值,并提取阈值入库; (2)、分高度统计分析最大风速及风向、 极大风速及风向,并提取阈值入库; (3)、分析风垂直廓线,给出不同高度的最大风速,模拟近地层风垂直变化曲线,并根据地面自动站风速监测推算高层风速,从而实现预警提示,预警级别以蓝、黄、橙、红四种级别来展示。 (4)、多高度大风风险预警与决策服务产品 根据风险等级定义,利用梯度观测资料、自动站资料、雷达径向风资料、FDDA三维风场资料,开发不同高度的大风风险分布一张图产品,将有安全风险的建筑物按等级进行分类显示;并对某具体建筑物,支持可以查看其垂直风廓线及按高度的预警详情的功能。 4、大数据治理平台 4.1、临近预报网格服务数据处理 采集省内10部双偏振雷达拼图、全国Cmacast下发的简化版雷达基数据拼图资料,并加工形成广东省范围10部双偏振雷达反射率、择优选取估测降水实况、择优选取0-3h逐6分钟估测降水预报网格数据、泛华南范围多普列雷达反射率、估测降水降水预报网格数据等产品,形成临近预报网格服务产品,并将其分别存储到Redis智能网格服务内存数据库和Cassandra分布式图片数据库,为其他系统调用。 该模块的建设内容主要包括广东省范围10部双偏振雷达反射率、择优选取估测降水实况、择优选取0-3h逐6分钟估测降水预报网格数据入库;泛华南范围多普列雷达反射率、估测降水降水预报网格数据入库;全国范围Cmacast下发的简化版雷达基数据拼图反射率网格数据及反演格点数据入库。所有入库的内容均存到Redis内存数据库和Cassandra分布式网格数据库。 4.2、基于历史数据分析的灾情风险网格数据处理及产品开发 根据近年来深圳市的气象灾情及对应的天气过程数据,结合精细化网格预报,形成一个综合的气象灾害风险决策服务产品,并将其分别存储到Redis智能网格服务内存数据库和Cassandra分布式图片数据库,为其他系统调用。 1、基于历史数据的气象灾情阈值网格数据提取及建库 结合深圳历史灾情数据及气象自动站实况数据和深圳市预警信号发布标准,提取台风暴雨等气象灾情阈值标准,分析深圳市范围内不同区域的气象灾情与降水、风力等要素的对应关系,并在Redis内存数据库和Cassandra分布式网格数据库建库和存储,为风险提示产品提供依据。 2、基于常规智能网格预报数据的灾情风险影响分析网格服务数据生成及入库 通过后台程序,根据当前实况气象数据和网格预报数据,基于气象灾情阈值分析生成当前天气过程的灾情风险影响分析网格服务数据,并入库到Redis智能网格服务内存数据库和Cassandra分布式图片数据库。 3、灾害天气影响决策服务网格数据及产品开发 灾害天气影响决策结果产品要做得简洁直观,通过一张分布图和简单的文字描述就能直观展示天气过程对深圳市总体的灾情风险影响预估,要对暴雨台风等信息进行整体综合分析,以蓝黄橙红四个预警等级来展示,并结合可能发生的暴雨大风影响的区、街道、社区等灾害预估方面进行整体描述。表现形式要与常规的天气预报区分开,满足为领导快速直观的决策服务需要。 4、人机互动式网格风险评估服务模型开发 在综合气象灾情决策服务产品的基础上,可对动态调整降雨、大风的量级,基于历史灾情及气象灾情阈值体系,形成动态、详细的台风、暴雨等灾情的风险评估,作为辅助分析依据。 4.3、空气质量指数网格服务数据处理及产品开发 将国内0~7天逐日的空气质量指数从深圳地区空气质量指数、全国空气质量指数等渠道采集,并进行就近插值,形成空气质量指数网格服务产品,并将其分别存储到Redis智能网格服务内存数据库和Cassandra分布式图片数据库,为其他系统调用。 该模块的建设内容主要包括深圳地区空气质量指数(利用雾霾预报系统的输出数据加工);网格数据入库;全国空气质量指数(利用中国天气网全国空气质量指数小时数据就近插值)网格数据入库;空气质量指数网格服务产品制作。所有入库的内容均存到Redis内存数据库和Cassandra分布式网格数据库。 4.4、行业服务网格数据处理 采集粤港澳大湾区高速公路路况、船舶实时信息、灾情信息,并进行网格化处理,形成行业服务网格产品,并将其分别存储到Redis智能网格服务内存数据库和Cassandra分布式图片数据库,为其他系统调用。 4.5 网格服务产品的规格说明 依托深圳市气象局智能网格数据,综合利用实况监测数据及短时临近预报、数值预报等各类预报数据,建立智能网格服务数据库和产品;在时间尺度上,将分钟级别的气象观测数据与不同预报时长的各类预报数据进行无缝融合,实现从0小时到30天的网格服务产品;从空间上,根据不同预报时长建立不同的格点(包括1公里*1公里和5公里*5公里),实现面向深圳全市范围的精细化格点气象监测及预报服务产品。具体的格点预报空间与时间尺度的划分如下表所示:
| |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
商务需求 | 一、开发期限要求: 1.1 服务期:自合同签订之日起180个日历日内。 1.2 开发服务地点:深圳市气象局 1.3 中标人须具有良好的开发团队,能在深圳市气象局驻点开发,具备现场持续开发和服务的能力。 1.4 项目分为需求分析、系统设计、系统开发、测试、部署实施、培训等6个阶段实施。 1)、需求分析阶段要求中标方的系统调研员充分了解我方系统的功能需求,形成详细的需求分析报告。 2)、系统设计阶段要求系统分析设计师根据需求说明书做好本项目详细设计,形成设计文档。 3)、系统开发阶段要求软件开发工程师按本项目的需求和功能模块完成软件系统开发。 4)、测试阶段要求中标方安排测试人员对本系统进行测试并通过,提供有效的自测报告。 5)、部署实施阶段要求部署工程师做好软件的部署与安装,确保可正常运行。 6)、培训阶段要求为我方提供不少于6个课时的培训及培训文字资料和讲义等相关用品。所有的资料必须是中文书写。 二、报价方式和币种 2.1本项目总报价为完成采购文件及合同条款所规定的工作内容的各项费用,以人民币为结算单位,包括软件开发费用、安装调试费、培训费用及税费等相关费用。如招标文件中要求分项报价而中标人未单独列明的分项价格,将被视为该费用已包含在其他分项中。 2.2投标货币:人民币 三、 付款方式 该项目费用以人民币结算,按深圳市财政局规定支付。 四、安装和验收 4.1验收要求主要以《项目验收技术指标》的量化指标进行验收。中标人应根据所提交的验收方案和实施办法,自行组织设备和人员,并在采购人监查下现场进行测试和验收。 4.2 验收由深圳气象局组织进行,中标人应在项目验收时将软件的全部有关产品说明书、技术文件、资料、及安装、验收报告等文档汇集成册交付采购人。 4.3 中标人应负责在项目验收时将软件的全部有关产品说明书、技术文件、资料、及安装、验收报告等文档及软件源代码汇集成册交付设备采购人。 五、质保期及质保期间处理 5.1质保期:本项目验收合格后12个月之内为质保期。 5.2维护服务:在质保期内,中标方应该免费提供7*24小时电话技术支持,对于电话支持无法解决的问题,赴现场解决故障的响应时间不超过4小时。 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
评标信息 |
| |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
其他 | | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
附件 | 大数据平台系统项目招标申报书20200512.doc.doc.doc |
返回顶部