SPDB(ZJ)-202409004-关于“浦发银行大数据平台软件产品服务入围采购“供应商征集公告

上海浦东发展银行总行

“2024-2027年大数据平台软件产品服务”入围采购供应商征集公告

一、    采购名称：2024-2027年大数据平台软件产品服务采购

二、    征集时间：2024年9月25日－2024年9月30日

三、    项目需求

本次项目针对我行大数据平台软件产品服务采购，要求产品满足信创要求，通过引入入围供应商产品，满足我行大数据平台的存算能力、批量处理分析能力、实时处理分析能力、迁移能力、集群管理运维能力要求。具体详细要求如下：

（包括平台监控管理能力需求、批处理及分析服务能力需求、实时计算及分析服务能力需求、非功能性需求等）

（一） 大数据平台监控管理能力需求

1.    平台运行管理能力，包括但不限于以下功能：

1）支持主机基本信息的监控图标展示和告警提醒，包括主机磁盘状态、CPU使用率、内存状态、网络状态

2）支持组件基本信息的监控图标展示和告警提醒，包括存储状态、内存状态、网络状态、CPU使用、GC情况、文件描述符使用等

3）支持集群、组件和实例的配置调整、调整历史查看和配置回滚

4）计算引擎服务支持任务信息查看、任务查杀、任务日志查看和下载

5）支持集群管理类和各组件服务的审计以及审计信息查看和下载

6）支持页面上对组件实例的日志检索、下载

7）集群所有组件服务均实现高可用和负载均衡

2.    平台安全及角色管理能力，包括但不限于以下内容：

1）支持满足各类管理权限的多用户类型，如运维管理员，配置管理员，审计管理员和只读用户等

2）用户管理及认证支持接入统一AD域控认证支持编辑字段的默认设置和属性

3.    其他能力：

1）数据存储服务支持页面上的目录查看、配额管理、快照管理和数据平衡等功能

2）产品支持分布式消息中间件，如Kafka等

3）支持外部系统接口调用，包括：主机和服务监控数据获取，集群组件和实例的启停、配置和日志下载，任务查看、查杀和下载，审计信息获取

（二） 大数据批量处理及分析服务能力需求

1.    数据加载能力，包括但不限于以下内容：

1)支持由Nas及S3获取数据文件

2)支持各类编码及各类文本分隔符的数据文件，支持现场景中各类字段类型及日期格式

3)支持动态分区等各类加载算法

4)支持数据加载的并发数不低于200

5)支持预设数据处理及数据质量校验工具

6)支持列加密

2.    批量处理能力，包括但不限于以下内容:

1)支持数据表的周期性加载，支持应用集市、基础作业跑批。规定时间规定并发完成跑批，结果一致。

3.    数据同步容灾备份能力, 包括但不限于以下内容:

1) 数据全量迁移：支持HDFS文件的同步、以及HIVE跨版本数据同步功能；

2) 数据同步：为保障现有大数据服务平台各集群与国产大数据集群同步需求，且符合现有集群数据应用场景，支持库、表为级别，高并发周期性进行现有大数据服务平台各集群与国产大数据集群库表数据同步功能。

3) 作业迁移：具备针对现有大数据服务平台各场景应用作业（加载、下发、跑批等）迁移承接及正常运行的能力，包含针对组件差异化支持及作业改造需求、语法兼容性需求，以满足作业迁移及运行。

4)各大数据组件支持主备容灾

4.    交互分析查询能力，包括但不限于以下内容:

1)支持读写数据湖引擎组件数据

2)支持历史记录的自动诊断服务

3)支持查询GaussDB数据源时支持多用户映射，进行细粒度的权限控制

4)支持大数据平台的跨域查询能力

5.    组件及任务管理能力，包括但不限于以下内容:

1)Hive元数据库支持分库分表，降低元数据库压力

2)Hive Beeline任务可靠性完备

3)具备大数据平台支持SQL拦截功能，能够防御低质量SQL的运行

4)具备大数据平台支持数据保护功能

5)平台支持根据异构存储类型自动存储冷热数据

6)具备大数据平台支持动态脱敏能力，配置脱敏列的数据可以参与计算，计算结果输出时不可见，在集群内脱敏策略会根据血缘关系自动传递，保障数据的隐私性

7)针对批处理组件支持在线滚动升级

8)支持自动健康检查和深度巡检，保障批处理服务能力稳定

9)支持多服务能力，解决批处理过程中各组件资源隔离或性能问题

10)根据租户场景，支持不同的批处理用户配置不同的权重、按资源百分比与绝对值灵活配置、保障任务服务等级最大化资源利用率

11)查询组件支持图形化管理RegionServer分组测试、支持热点自愈能力、单节点部署多RegionServer、查询组件支持双读能力

12)HDFS支持按节点标签选择存储

（三） 大数据实时处理及分析服务能力需求

1.    流式处理能力，包括但不限于以下内容:

1）支持基于事件时间和处理时间进行数据处理和窗口切分

2）支持反压、状态数据管理、精准一次、复杂事件处理（CEP）等流式处理功能

3）支持固定窗口、滑动窗口和会话窗口

4）支持流式SQL语法，以及维表join、流流join和基于窗口的聚合

5）支持在窗口时间内处理乱序数据

6）支持流批数据关联处理及查询访问

7）支持流作业中使用表达式或类SQL方式创建规则，并调用规则处理实时数据和规则动态更新

8）支持消息中间件的数据同步到国产关系型数据库

9）支持SQL中调用存储过程语法

10）支持用户自定义函数（UDF），且能够直接兼容Hive UDF

11）支持实时数据入库，并支持在库内自动计算指标

12）支持原生FlinkJar作业进行count、sum和avg聚合计算，在指定资源情况下，TPS不低于30万、checkpoint成功率为100%

13）支持原生FlinkSQL作业进行count、sum和avg聚合计算，在指定资源情况下，TPS不低于30万、checkpoint成功率为100%

2.    流式开发平台能力，包括但不限于以下内容:

1）支持作业按照任意保存点消费数据

2）支持作业运行中（不终止或下线作业）暂停消费来源数据

3）支持Jar模式、图形化界面模式、SQL模式3种流作业开发模式

4）支持作业调试功能

5）支持对数据源进行新增，修改，删除等统一管理

6）支持图形化方式的集群配置、服务配置、项目配置，提供角色/用户/用户组的权限管理

7）平台提供开发和运维规范最佳实践，提供开发SQL代码案例和样例

8）平台支持任务开发过程中辅助建表功能、辅助表关联功能、一键生成SQL

9）开发模式下支持SQL语法检查，一键优化

10）支持用户自定义函数（UDF）、差异、百分比差异、合计百分比、排序、百分位、移动平均等快速计算。

（四） 部署要求：

产品支持浦发银行信创云（华为HCSO）环境部署，包含云上裸金属环境、虚拟机环境。

（五） 非功能性需求

1.    公司基本情况、产品市场应用等情况

(1)  公司规模不低于300人，产品研发人数不低于100人；

2.    产品的服务支持度

(1)  售前售后服务的响应时间为7*24小时；

(2)  产品问题技术支持响应不超过1小时，解决时效不超过2小时；

(3)  具备产品知识转移方案（使用手册、教学视频、培训、运维等）。

3.    产品安全

(1)  高危漏洞：系统不存在高危漏洞，包括SQL注入、XSS跨站脚本，木马文件上传、远程命令执行、任意文件下载、越权、暴力破解、短信炸弹等。

四、    合格服务供应商基本资质要求

1.具有中华人民共和国境内独立法人资格的企业，持有工商行政管理部门或市场监督管理部门登记的《营业执照》,且《营业执照》经营（许可）范围与本项目相符。

2.企业注册资本不低于10，000万元人民币（或等值）；

3.近三年内（从2021年9月1日起至今），须具有国内系统重要性银行（中国工商银行、中国银行、中国建设银行、中国农业银行、交通银行、招商银行、兴业银行、中信银行、中国邮政储蓄银行、浦发银行、中国民生银行、中国光大银行、平安银行、华夏银行、宁波银行、广发银行、江苏银行、上海银行、北京银行、南京银行，下同）项目的成功案例；

4.近三年内（从2021年9月1日起至今），须具有国内系统重要性银行或其他全国性大型证券、保险机构大数据领域的成功案例；

5.须为产品的制造商（原厂商）或其合法代理商；如为代理商，须提供制造商（原厂商）针对本项目的授权，一家代理商只能代理一个品牌产品，同一品牌只允许一家代理商参与本项目报名，同一品牌的制造商（原厂商）和代理商不得同时参与本项目报名，代理商提供产品厂商（即原厂）对本项目的授权书和有效的代理商符合资格要求的证明材料，授权书应明确原厂对本项目所有报价项的承诺（提供制造商授权书和代理商资格证明）；

6.不接收联合体的申请。

五、    供应商报名提交资料

1.有效期内的公司营业执照、组织机构代码证、税务登记证（如果已经是三证合一，则只需要提供营业执照）；

2.加盖公章的参与本项供应商征集的确认函（扫描件，确认函模版见附件1）；

3、填制供应商信息表（扫描件，模版见附件2）；

4.公司简介（包括但不限于公司综合能力、财务能力、服务能力等内容介绍）；

5.其他本次项目要求满足度证明材料。

六、    报名资料提交方式

相关材料通过电子邮件发送我行联系人邮箱。

七、    声明

1.我行接受报名并不表示接受报名供应商参与本项目后续采购等工作；且我行有权对供应商征集审核结果不做任何说明；

2.供应商须对提供的所有信息的真实性负责；

3.在审核过程中，我行集中采购部门如认为必要，将安排对供应商进行实地考察、邀请参加POC测试等；

4.采购人保留要求报名服务供应商补充提交资料的权利；

5.本次公开征集不收取供应商任何费用。

八、    联系人及联系方式

联系人（一）：徐老师（采购部联系人）

电话：021-61618016

邮箱：xuj47@spdb.com.cn

联系人（二）：阮老师（采购申请部门联系人）

电话：021-31868138

邮箱：ruanq@spdb.com.cn

上海浦东发展银行股份有限公司 

二〇二四年九月二十五日

附件1：

参与XXXX采购供应商征集的确认函

致：上海浦东发展银行

我公司在此确认，将参加贵行XXXX采购的供应商征集，并同意按照有关供应商征集的要求配合贵行开展工作。

此致

[签署栏]

附件2：

供应商信息表

1、公司名称：

2、法人代表：

3、注册资金：

4、控股股东：

5、成立日期：

6、上一年度营业额：

7、信息获取渠道：招标投标公共服务平台/浦发官网/金采网等

8、联系人姓名：

9、联系人电话:

10、联系人邮箱: