公告摘要
项目编号-
预算金额-
招标联系人-
标书截止时间-
投标截止时间-
公告正文

铁塔智联2023年新型边缘CDN平台研发服务采购项目研发能力验证测试方案
目录
1 文档概述442 测试范围553 测试环境663.1 浏览器664 测试方法774.1 现场操作测试774.2 提供证明材料775 测试内容具体评价标准及分值885.1 功能测试【84分】885.1.1 快速热拔插【8分】885.1.2 网络压测和自动化压测【6分】995.1.3 智能网络监测与自适应调整【6分】995.1.4 IPv4/IPv6协议单双栈支持【6分】10105.1.5 实时硬件指标监控【4分】11115.1.6 实时性能指标监控【6分】12125.1.7 自动化节点初始化【6分】13135.1.8 流控及流量整形【6分】14145.1.9 基于轻量级容器技术部署边缘节点以及实例管理【6分】14145.1.10 业务敏捷部署与资源分配【6分】15155.1.11 告警列表【6分】16165.1.12 自适应流量预测【6分】17175.1.13 服务质量预测【6分】18185.1.14 用户请求调度功能【6分】18185.2 运营能力测试【16分】20205.2.1 带宽量级验证【8分】20205.2.2 资源丰富性验证【8分】2121
承诺书
铁塔智联技术有限公司:
我公司郑重承诺此次参与测试的内容、提供的材料完全真实、合法。如有不实之处,愿承担一切后果。
此次参与测试过程中涉及中国铁塔信息系统及相关业务的具体信息,包括但不限于:计算机软件、数据、协议、拓扑、代码及相关文档等,不得以直接、间接、口头或书面等形式向非相关方提供。如违反规定造成中国铁塔商业秘密泄露或信息安全问题,无论是否给中国铁塔造成实际损失,愿承担相应法律责任。
特此声明!
单位(盖章):
年 月 日
文档概述
随着数字经济的发展和智能移动设备的增加,以短视频为代表的多媒体音视频业务爆炸性增长,传统云计算模式(中心化)面临云端功耗过大、业务响应延迟等挑战,而边缘计算、边缘存储分发(CDN)技术的出现,使得大量数据在边缘进行处理,大幅增强用户的数据存储分发效率。
CDN业务一直是云厂商重要的收入板块,CDN能力下沉是当前行业大趋势。此外,国家相关政策也鼓励CDN能力的下沉,工信部《“十四五”信息通信行业发展规划 》中提到,“建设面向特定场景的边缘计算设施,推进边缘计算与CDN 融合下沉部署,加强边缘计算与云计算协同部署”。《北京市“十四五”信息通信行业发展规划》中提到,“推进内容分发网络(CDN)节点下沉,建设高密度CDN网络,提升CDN网络城域覆盖能力。推动CDN虚拟化,积极寻求与边缘计算融合,推进云化部署,向边缘云演进”。
现有边缘计算和CDN技术虽能够提高服务响应速度和缓解网络传输压力,但目前在以下几个方面仍存在问题:1) 地区间基础设施差异导致资源浪费;2) 数据中心资源在城市间分布不均;3) 新型高清视频业务对传统CDN方案构成挑战。
中国铁塔拥有海量站址和物联网设备,具备基于边缘网络和边缘轻量设备(如网关、工控机、小型服务器等)构建全国最大的边缘分布式存储分发网络的基础。本项目旨在研发新型边缘CDN能力,充分释放边缘节点的存储、传输和计算资源,打造全国最大的边缘分布式存储分发网络,服务于音视频媒体、海量数据存储等场景。
为了采购一个符合铁塔要求的边缘CDN平台软件开发服务供应商(以下简称“厂商”),降低项目风险,特安排应标厂商进行现场验证测试,参考技术规范书对其在平台软件的关键功能和性能指标方面的研发能力进行验证测试。测试范围
序号测试描述内容范围测试项
1功能测试涵盖节点快速热拔插、网络压测和自动化压测、智能网络监测与自适应调整、IPv4/IPv6协议单双栈支持、实时硬件指标监控、实时性能指标监控、自动化节点初始化、流控及流量整形、基于轻量级容器技术部署边缘节点以及实例管理、业务敏捷部署与资源分配、告警列表、自适应流量预测、服务质量预测模型、用户请求调度功能等内容。14项
2运营能力测试涵盖带宽量级验证、资源丰富性验证等内容2项
总共

测试环境
本次验证采用厂商自备验证环境进行验证。
厂商需自备一个验证环境,保证外网可以进行访问且网络稳定,软件版本功能齐全,终端产品成熟,最能代表厂商技术实力及完整应用场景,满足技术规范,同时提供操作手册,确保各项功能可测,支持功能测试和运营能力测试。浏览器
须支持谷歌 chrome 浏览器,建议采用最新版本。测试方法现场操作测试
对于所有通过性指标,由铁塔测试方按照平台说明书,操作手册在厂商提供的具备外网的验证环境,由测试人员在验证环境中登录平台进行测试。
对于平台新增节点、安装操作系统等测试用例,厂商在测试前需提前准备好相关资源,并详细说明操作过程。若由于厂商不提供相关资源,导致无法进行测试的情况,该测试项结果得分为0。提供证明材料
对于所有评价性指标,由厂商以“文字描述”+“截图”+“视频讲解”形式提供相关要求证明材料进行举证,证明材料必须真实有效,测试人员可进行抽查,如有不实,本次测试结果直接作废。测试内容具体评价标准及分值功能测试【84分】快速热拔插【8分】
测试编号T01
测试项目测试快速热拔插
测试要求■通过性指标 □评价性指标
测试方法详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有一键添加CDN节点,修改CDN节点拨号账号、修改CDN节点上报带宽属性、添加CDN节点标签等功能。 1.可实现添加CDN节点,可观察CDN节点是否添加成功; 2.可实现修改CDN节点的拨号账号,输入新的拨号账号,节点拨号账号属性更新; 3.可实现修改CDN节点的上报带宽,输入新的上报带宽,节点上报带宽属性更新; 4.可实现对CDN节点添加标签,并观察是否成功为CDN节点添加标签。 每一小点测试通过得2分,测试不通过得0分。共8分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

网络压测和自动化压测【6分】
测试编码T02
测试项目测试网络压测和自动化压测
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有对纳管服务器进行网络压测和自动化压测的功能,包括: 1.选中CDN节点,点击“压测”按钮后,系统应立即开始带宽压测,并在压测结束后,显示服务器的可用带宽; 2.压测结束后,系统显示线路及节点是否达标; 3.可实现为CDN节点定制“压测”计划,通过在链接中设定的“压测”周期来实现自动“压测”,并自动更新节点的可用带宽。(用压测后实际带宽值替代录入带宽值)。 每一小点测试通过得2分,测试不通过得0分。共6分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

智能网络监测与自适应调整【6分】
测试编码T03
测试项目测试智能网络监测与自适应调整
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有实时反馈和监测数据的可视化展示,包括:实时反馈:界面上应能看到边缘端实时上报的带宽和网络质量指标(网络时延、丢包率、TCP重传率),且展示粒度能够达到分钟级;历史信息:界面上应能看到边缘端历史的带宽和网络质量指标(网络时延、丢包率、TCP重传率),并可自由选择过往3个月内的时间片段进行历史展示,且展示粒度最细能够达到分钟级;可实现按照业务和地区展示系统中的带宽指标。每一小点测试通过得2分,测试不通过得0分。共6分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

IPv4/IPv6协议单双栈支持【6分】
测试编号T04
测试项目测试IPv4/IPv6协议单双栈支持
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有IPv4/IPv6协议支持的功能包括:IPv4协议支持:在界面中进行IPv4网络设置后,系统应立即为所选节点配置IPv4网络。完成后,可清晰地观测到节点的IPv4网络地址,并确保该地址是有效的IPv4格式;IPv4/IPv6双栈支持:在界面中为节点设置IPv4/IPv6双栈网络,系统应立即为所选节点配置双栈网络。完成后,应能清晰地观测到节点的IPv4和IPv6网络地址,并确保这两个地址分别为有效的IPv4和IPv6格式。每一小点测试通过得3分,测试不通过得0分。共6分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

实时硬件指标监控【4分】
测试编号T05
测试项目测试实时硬件指标监控
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有边缘CDN节点的实时硬件指标可视化监控功能包括: 1.CPU使用率,IO等待百分比; 2.硬中断百分比,软中断百分比; 3.内存使用率; 4. 磁盘大小/磁盘使用率/读写延迟/IOPS。 每一小点多个指标均满足得1分,测试不通过得0分。共4分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

实时性能指标监控【6分】
测试编号T06
测试项目测试实时性能指标监控;
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有可视化边缘CDN节点监控,实时监测反映边缘CDN节点状态和性能的关键指标包括:线路的IPv4地址,IPv6地址(IPv6地址如果未进行设置,则视为IPv6地址 通过);2.线路带宽的上行、下行速率; 3.每条线路的丢包、延迟、TCP重传率; 4.所有业务的网络吞吐流量; 5.CDN节点在线/离线状态; 6.每个节点的网络吞吐流量和拨号重播次数。 每一小点测试通过得1分,测试不通过得0分。共6分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

自动化节点初始化【6分】
测试编号T07
测试项目测试节点自动初始化的功能;
测试要求□通过性指标 ■评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 厂商提供“文字描述”+“截图”+“视频讲解”等形式的相关证明材料,材料中含有自动节点初始化的关键指标包括:厂商自备测试CDN节点,通过运行节点自动初始化脚本,实现一键自动安装Linux操作系统;根据业务的依赖,厂商通过脚本实现自动安装需要第三方组件比如:容器、python工具、日志服务、kubernetes组件等。每一小点测试通过得3分,测试不通过得0分。共6分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

流控及流量整形【6分】
测试编号T08
测试项目测试流控及流量整形功能;
测试要求□通过性指标 ■评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 厂商提供“文字描述”+“截图”+“视频讲解”等形式的相关证明材料,材料中含有的流控及流量整形的关键指标包括:厂商添加3个不同业务(业务A、业务B和业务C)的运行样例,监控是否能够根据业务特征(如端口、PID、CGROUPS信息)准确归属流量到相应的业务;厂商对每个业务设定一个最大和最小带宽的限制,调用边缘CDN节点监控网络性能的功能,监控是否实现每个业务流量的最大带宽限制,或者保证最低带宽的分配;每一小点测试通过得3分,测试不通过得0分。共6分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

基于轻量级容器技术部署边缘节点以及实例管理【6分】
测试编号T09
测试项目测试基于轻量级容器技术部署边缘节点以及实例管理
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有基于轻量级容器技术部署边缘节点以及实例管理的关键指标包括: 1、选择测试节点,设置并部署测试容器,检查是否支持在裸金属机器上一键部署不少于100个容器; 2、调用边缘CDN节点监控功能,监控容器上下行流量信息。 每一小点测试通过得3分,测试不通过得0分。共6分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

业务敏捷部署与资源分配【6分】
测试编号T10
测试项目测试业务敏捷部署与资源分配。
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有业务敏捷部署与资源分配的关键功能包括:输入节点ID,定位到需要部署业务的节点,并可以查询节点的“是否在线”状态;判断当前节点有无运行业务,若节点不存在运行中业务实例(业务docker),并能够将仓库中的新业务实例部署到节点上;判断当前节点有无运行业务,若节点存在运行中的业务实例(业务docker),可卸载该节点上的业务实例。每一小点测试通过得2分,测试不通过得0分。共6分 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

告警列表【6分】
测试编号T11
测试项目测试告警列表;
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有告警列表的关键功能包括:告警页面显示告警信息,可翻页,可定位到具体节点;支持按照设备进行搜索告警;支持按照告警等级进行查看。每一小点测试通过得2分,测试不通过得0分。共6分。 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

自适应流量预测【6分】
测试编号T12
测试项目测试自适应流量预测;
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有自适应流量预测的关键功能包括:页面中可以显示对未来4天的流量负载预测,按小时为粒度进行预测,即未来96个时间点的流量负载预测曲线;页面中可以显示流量预测准确率指标值。每一小点测试通过得3分,测试不通过得0分。共6分。 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

服务质量预测【6分】
测试编号T13
测试项目测试服务质量预测;
测试要求■通过性指标 □评价性指标
测试过程详见乙方平台说明书
测试预期与结果评价【测试预期】: 使用厂商提供的链接和测试账号,登陆链接,链接中含有服务质量预测的关键功能包括:页面中可以显示对未来4天的服务质量预测,按小时为粒度进行预测,即未来96个时间点的服务器时延、丢包率预测曲线;页面中可以显示服务器时延、丢包的预测准确率指标值。每一小点测试通过得3分,测试不通过得0分。共6分。 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

用户请求调度功能【6分】
测试编号T14
测试项目测试用户请求调度功能;
测试要求□通过性指标 ■评价性指标
测试过程提供证明材料
测试预期与结果评价【测试预期】: 厂商提供“文字描述”+“截图”+“视频讲解”等形式的相关证明材料,或提供相关论文等验证材料,材料中含有的用户请求调度功能的关键指标包括: 1.基于用户请求、服务器状态等CDN服务信息的数据,进行面向资源利用率最优化的用户请求调度,对所给出的全部用户请求进行合理调度,调度后CDN节点硬件资源利用率(CPU使用频率、内存使用频率)达到50%以上; 2.基于用户请求、服务器状态等CDN服务信息的数据,进行面向资源利用率最优化的用户请求调度,对所给出的全部用户请求进行合理调度,调度后CDN节点带宽资源利用率达到50%以上。 每一小点测试通过得3分,测试不通过得0分。共6分。 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

运营能力测试【16分】带宽量级验证【8分】
测试编号T15
测试项目带宽量级验证
测试要求■通过性指标 □评价性指标
测试过程【预置条件】: 1、厂商需要提供系统平台管理页面的url地址,和测试账号 【操作步骤】: 1、使用测试账号登陆厂商系统平台,跳转到厂商综合管理页面,查询纳管带宽量级与地区数量统计值。
测试预期与结果评价【测试预期】: 1.如果服务省级地区数量大于等于30个且服务市级地区数量大于等于200个,该环节得8分; 2.如果服务省级地区数量大于等于20个且服务市级地区数量大于等于150个,该环节得6分; 3.如果服务省级地区数量大于等于10个且服务市级地区数量大于等于100个,该环节得2分。 其余情况得0分。 注:(1)以上得分项按照案例所涉及的服务省级地区数量和服务市级地区数量所满足的最高得分项进行得分,不进行累计计分。 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

资源丰富性验证【8分】
测试编号T16
测试项目资源丰富性验证
测试要求■通过性指标 □评价性指标
测试过程【预置条件】: 1、厂商需要提供系统平台管理页面的url地址,和测试账号。 【操作步骤】: 1、使用测试账号登陆厂商系统平台,跳转到厂商综合管理页面,查询纳管节点的数量统计值。 2、通过筛选项,筛选符合要求的高质量节点(CPU核数:32,内存:64G,系统存储:100G SSD),查询纳管高节点的数量。
测试预期与结果评价【测试预期】: 1.如果边缘CDN节点数量大于或者等于5000个,且其中高质量节点数量大于或者等于2500个,该环节得8分; 2.如果边缘CDN节点大于或者等于2500个,且其中高质量节点数量大于或者等于600个,该环节得6分; 3.如果边缘CDN节点大于或者等于1000个,且其中高质量节点数量大于或者等于200个,该环节得2分; 其余情况得0分。 注:(1)以上得分项按满足的最高得分进行得分,不进行累计计分。 【测试结果】: □通过 □未通过
备注
分数
确认签字铁塔 厂商

返回顶部