@@ -41,7 +41,9 @@ DSS主要特点:
4141
4242   ;   ;   ;   ; 5、数据交换工具——[ Exchangis] ( https://github.com/WeBankFinTech/Exchangis ) (** 已支持免密跳转,等待Exchangis发版** )
4343
44-   ;   ;   ;   ; 6、数据Api服务——[ DataApiService] ( )
44+   ;   ;   ;   ; 6、数据Api服务——[ DataApiService] ( https://github.com/WeBankFinTech/DataSphereStudio-Doc/blob/main/zh_CN/%E4%BD%BF%E7%94%A8%E6%96%87%E6%A1%A3/DataApiService%E4%BD%BF%E7%94%A8%E6%96%87%E6%A1%A3.md )
45+
46+   ;   ;   ;   ; 7、流式应用开发管理工具——[ Streamis] ( https://github.com/WeBankFinTech/Streamis ) (** 即将开源** )
4547
4648   ;   ;   ;   ; ** DSS插拔式的框架设计模式,允许用户快速替换DSS已集成的各个Web系统** 。如:将 Scriptis 替换成Zeppelin,将 Schedulis 替换成DolphinScheduler。
4749
@@ -67,87 +69,21 @@ DSS主要特点:
6769
6870   ;   ;   ;   ; DSS通过实现多个AppConn,已集成了丰富多样的各种上层数据应用系统,基本可满足用户的数据开发需求。
6971
70-   ;   ;   ;   ; ** 用户如果有需要,也可以轻松集成新的数据应用系统,以替换或丰富DSS的数据应用开发流程。**
71-
72-   ;   ;   ;   ; 1、DSS的调度能力——Schedulis AppConn
73-
74-   ;   ;   ;   ;   ;   ; 用户的很多数据应用,通常希望具备周期性的调度能力。
75-
76-   ;   ;   ;   ;   ;   ; 目前市面上已有的开源调度系统,与上层的其他数据应用系统整合度低,且难以融通。
77-
78-   ;   ;   ;   ;   ;   ; DSS通过实现Schedulis AppConn,允许用户将一个编排好的工作流,一键发布到 Schedulis 中进行定时调度。
79-
80-   ;   ;   ;   ;   ;   ; DSS还为调度系统定义了一套标准且通用的DSS工作流解析发布规范,让其他调度系统可以轻松与DSS实现低成本对接。
81-
82- ![ Azkaban] ( images/zh_CN/readme/Azkaban_AppConn.gif )
83-
84-   ;   ;   ;   ; 2、数据开发——Scriptis AppConn
85-
86-   ;   ;   ;   ;   ;   ; 什么是[ Scriptis] ( https://github.com/WeBankFinTech/Scriptis ) ?
87-
88-   ;   ;   ;   ;   ;   ; Scriptis是一款支持在线写SQL、Pyspark、HiveQL等脚本,提交给[ Linkis] ( https://github.com/WeBankFinTech/Linkis ) 执行的数据分析Web工具,且支持UDF、函数、资源管控和智能诊断等企业级特性。
89-
90-   ;   ;   ;   ;   ;   ; Scriptis AppConn为DSS集成了Scriptis的数据开发能力,并允许Scriptis的各种脚本类型,作为DSS工作流的节点,参与到应用开发的流程中。
91-
92-   ;   ;   ;   ;   ;   ; 目前已支持HiveSQL、SparkSQL、Pyspark、Scala等脚本节点类型。
93-
94- ![ Scriptis] ( images/zh_CN/readme/Scriptis_AppConn.gif )
95-
96-   ;   ;   ;   ; 3、数据可视化——Visualis AppConn
97-
98-   ;   ;   ;   ;   ;   ; 什么是Visualis?
99-
100-   ;   ;   ;   ;   ;   ; Visualis是一个基于宜信开源项目Davinci二次开发的数据可视化BI工具,为用户在数据安全和权限方面,提供金融级数据可视化能力。
101-
102-   ;   ;   ;   ;   ;   ; Visualis AppConn为DSS集成了Visualis的数据可视化能力,并允许数据大屏和仪表盘,作为DSS工作流的节点,与上游的数据集市关联起来。
103-
104- ![ Visualis] ( images/zh_CN/readme/Visualis_AppConn.gif )
105-
106-   ;   ;   ;   ; 4、数据质量——Qualitis AppConn
107-
108-   ;   ;   ;   ;   ;   ; Qualitis AppConn 为DSS集成数据质量校验能力,将数据质量系统集成到DSS工作流开发中,对数据完整性、正确性等进行校验。
109-
110- ![ Qualitis] ( images/zh_CN/readme/Qualitis_AppConn.gif )
111-
112-   ;   ;   ;   ; 5、数据发送——Sender AppConn
113-
114-   ;   ;   ;   ;   ;   ; Sender AppConn为DSS集成数据发送能力,目前支持SendEmail节点类型,所有其他节点的结果集,都可以通过邮件发送。
115-
116-   ;   ;   ;   ;   ;   ; 例如:SendEmail节点可直接将Display数据大屏作为邮件发送出来。
117-
118-   ;   ;   ;   ; 6、信号节点——Signal AppConn
119-
120-   ;   ;   ;   ;   ;   ; EventChecker AppConn用于强化业务与流程之间的解耦和相互关联。
121-
122-   ;   ;   ;   ;   ;   ; DataChecker节点:检查库表分区是否存在。
123-
124-   ;   ;   ;   ;   ;   ; EventSender: 跨工作流和工程的消息发送节点。
125-
126-   ;   ;   ;   ;   ;   ; EventReceiver: 跨工作流和工程的消息接收节点。
127-
128-   ;   ;   ;   ; 7、功能节点
129-
130-   ;   ;   ;   ;   ;   ; 空节点、子工作流节点。
131-
132-   ;   ;   ;   ; 8、** 节点扩展**
133-
134-   ;   ;   ;   ;   ;   ; ** 根据需要,用户可以简单快速替换DSS已集成的各种功能组件,或新增功能组件。**
135-
136- ## 已集成应用工具
72+   ;   ;   ;   ; ** 如果有需要,也可以轻松集成新的数据应用系统,以替换或丰富DSS的数据应用开发流程。** [ 点我了解如何快速集成新的应用系统] ( https://github.com/WeBankFinTech/DataSphereStudio-Doc/blob/main/zh_CN/%E5%BC%80%E5%8F%91%E6%96%87%E6%A1%A3/%E7%AC%AC%E4%B8%89%E6%96%B9%E7%B3%BB%E7%BB%9F%E6%8E%A5%E5%85%A5DSS%E5%BC%80%E5%8F%91%E6%8C%87%E5%8D%97.md )
13773
13874| 应用工具 | 描述 | DSS0.X 版本要求 | DSS1.0 版本要求 | 版本规划 |
13975| --------------- | -------------------------------------------------------------------- | --------------------------------------------------------------------- | ---------- | ------ |
140- | ** ApiService ** | 数据API服务。可快速将脚本发布为一个Restful接口,提供访问能力 | 不支持 | >=1.0.0 | 已发布 |
141- | ** Airflow** | 支持将DSS工作流发布到Airflow进行定时调度 | >=0.9.1,尚未合并 | on going | [ 待规划] ( ) |
142- | ** Streamis** | 流式应用平台 。支持发布Flink Jar 和 Flink SQL ,提供流式应用的开发调试和生产管理能力,如:启停、状态监控、checkpoint等。 | 不支持 | >=1.0.0 | [ 即将发布] ( ) |
143- | ** UserManager** | 自动初始化一个DSS新用户所必须的所有用户环境,包含:创建Linux用户、各种用户路径、目录授权等 | >=0.9.1 | on going | 待规划 |
144- | ** EventCheck** | 提供跨业务、跨工程和跨工作流的信号发送能力 。 | >=0.5.0 | >=1.0.0 | 已发布 |
145- | ** SendEmail** | 提供数据发送能力,所有其他节点的结果集,都可以通过邮件发送 | >=0.5.0 | >=1.0.0 | 已发布 |
76+ | ** DataApiService ** | 数据API服务。可快速将SQL脚本发布为一个Restful接口,对外提供Rest访问能力 | 不支持 | >=1.0.0 | 已发布 |
77+ | ** Airflow** | 支持将DSS工作流发布到Airflow进行定时调度 | >=0.9.1,尚未合并 | on going | ** 待规划** |
78+ | ** Streamis** | 流式应用开发管理工具 。支持发布Flink Jar 和 Flink SQL ,提供流式应用的开发调试和生产管理能力,如:启停、状态监控、checkpoint等。 | 不支持 | >=1.0.0 | ** 即将发布** |
79+ | ** UserManager** | 自动初始化一个DSS新用户所必须的所有用户环境,包含:创建Linux用户、各种用户路径、目录授权等 | >=0.9.1 | on going | ** 待规划** |
80+ | ** EventCheck** | 提供跨业务、跨工程和跨工作流的信号通信能力 。 | >=0.5.0 | >=1.0.0 | 已发布 |
81+ | ** SendEmail** | 提供数据发送能力,所有其他工作流节点的结果集,都可以通过邮件进行发送 | >=0.5.0 | >=1.0.0 | 已发布 |
14682| [ ** Scriptis** ] ( https://github.com/WeBankFinTech/Scriptis ) | 支持在线写SQL、Pyspark、HiveQL等脚本,提交给[ Linkis] ( https://github.com/WeBankFinTech/Linkis ) 执行的数据分析Web工具。 | >=0.5.0 | >=1.0.0 | 已发布 |
14783| [ ** Visualis** ] ( https://github.com/WeBankFinTech/Visualis ) | 基于宜信开源项目Davinci二次开发的数据可视化BI工具,为用户在数据安全方面提供金融级数据可视化能力。 | >=0.5.0 | >=1.0.0 | 已发布 |
148- | [ ** Qualitis** ] ( https://github.com/WeBankFinTech/Qualitis ) | 数据质量校验工具,提供数据完整性、正确性等数据校验能力 | >=0.5.0 | >=1.0.0 | [ 待发布] ( ) |
84+ | [ ** Qualitis** ] ( https://github.com/WeBankFinTech/Qualitis ) | 数据质量校验工具,提供数据完整性、正确性等数据校验能力 | >=0.5.0 | >=1.0.0 | ** 待发布** |
14985| [ ** Schedulis** ] ( https://github.com/WeBankFinTech/Schedulis ) | 基于Azkaban二次开发的工作流任务调度系统,具备高性能,高可用和多租户资源隔离等金融级特性。 | >=0.5.0 | >=1.0.0 | 已发布 |
150- | [ ** Exchangis** ] ( https://github.com/WeBankFinTech/Exchangis ) | 支持对结构化及无结构化的异构数据源之间的数据传输的数据交换平台 | 不支持 | >=1.0.0 | [ 待发布] ( ) |
86+ | [ ** Exchangis** ] ( https://github.com/WeBankFinTech/Exchangis ) | 支持对结构化及无结构化的异构数据源之间的数据传输的数据交换平台 | 不支持 | >=1.0.0 | ** 待发布** |
15187
15288
15389## Demo试用环境
0 commit comments