|
10 | 10 |
|
11 | 11 | DataSphere Studio(简称DSS)是微众银行自研的一站式数据应用开发管理框架。 |
12 | 12 |
|
13 | | - 在统一的UI下,DataSphere Studio以工作流式的图形化拖拽开发体验,将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出应用等,数据应用开发全流程场景需求。 |
| 13 | + 在统一的 UI 下,DataSphere Studio 以工作流式的图形化拖拽开发体验,将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出应用等,数据应用开发全流程场景需求。 |
14 | 14 |
|
15 | | - **DSS通过插拔式的集成框架设计,让用户可以根据需要,简单快速替换DSS已集成的各种功能组件,或新增功能组件。** |
| 15 | + **DSS 通过插拔式的集成框架设计,让用户可以根据需要,简单快速替换 DSS 已集成的各种功能组件,或新增功能组件。** |
16 | 16 |
|
17 | 17 | ## 已集成应用工具 |
18 | 18 |
|
19 | | -| 应用工具 | 描述 | DSS0.X 版本要求 | DSS1.0 版本要求 | 版本规划 | |
20 | | -| --------------- | -------------------------------------------------------------------- | --------------------------------------------------------------------- | ---------- | ------ | |
21 | | -| **ApiService** | 数据API服务。可快速将脚本发布为一个Restful接口,提供访问能力 | 不支持 | >=1.0.0 | 已发布 | |
22 | | -| **Airflow** | 支持将DSS工作流发布到Airflow进行定时调度 | >=0.9.1,尚未合并 | on going | 待规划 | |
23 | | -| **Streamis** | 流式应用平台。支持发布Flink Jar 和 Flink SQL ,提供流式应用的开发调试和生产管理能力,如:启停、状态监控、checkpoint等。 | 不支持 | >=1.0.0 | 即将发布 | |
24 | | -| **UserManager** | 自动初始化一个DSS新用户所必须的所有用户环境,包含:创建Linux用户、各种用户路径、目录授权等 | >=0.9.1 | on going | 待规划 | |
25 | | -| **EventCheck** | 提供跨业务、跨工程和跨工作流的信号发送能力。 | >=0.5.0 | >=1.0.0 | 已发布 | |
26 | | -| **SendEmail** | 提供数据发送能力,所有其他节点的结果集,都可以通过邮件发送 | >=0.5.0 | >=1.0.0 | 已发布 | |
27 | | -| [**Scriptis**](https://github.com/WeBankFinTech/Scriptis) | 支持在线写SQL、Pyspark、HiveQL等脚本,提交给[Linkis](https://github.com/WeBankFinTech/Linkis)执行的数据分析Web工具。 | >=0.5.0 | >=1.0.0 | 已发布 | |
28 | | -| [**Visualis**](https://github.com/WeBankFinTech/Visualis) | 基于宜信开源项目Davinci二次开发的数据可视化BI工具,为用户在数据安全方面提供金融级数据可视化能力。 | >=0.5.0 | >=1.0.0 | 已发布 | |
29 | | -| [**Qualitis**](https://github.com/WeBankFinTech/Qualitis) | 数据质量校验工具,提供数据完整性、正确性等数据校验能力 | >=0.5.0 | >=1.0.0 | 待发布 | |
30 | | -| [**Schedulis**](https://github.com/WeBankFinTech/Schedulis) | 基于Azkaban二次开发的工作流任务调度系统,具备高性能,高可用和多租户资源隔离等金融级特性。 | >=0.5.0 | >=1.0.0 | 已发布 | |
31 | | -| [**Exchangis**](https://github.com/WeBankFinTech/Exchangis) | 支持对结构化及无结构化的异构数据源之间的数据传输的数据交换平台 | 不支持 | >=1.0.0 | 待发布 | |
| 19 | + DSS 通过实现多个 AppConn,已集成了丰富多样的各种上层数据应用系统,基本可满足用户的数据开发需求。 |
| 20 | + |
| 21 | + **如果有需要,也可以轻松集成新的数据应用系统,以替换或丰富 DSS 的数据应用开发流程。** [点我了解如何快速集成新的应用系统](zh_CN/开发文档/第三方系统接入DSS开发指南.md) |
| 22 | + |
| 23 | +| 应用工具 | 描述 | DSS0.X 版本要求 | DSS1.0 版本要求 | 版本状态 | |
| 24 | +| --------------- | -------------------------------------------------------------------- | --------- | ---------- | ------ | |
| 25 | +| [**DataApiService**](https://github.com/WeBankFinTech/DataSphereStudio-Doc/blob/main/zh_CN/%E4%BD%BF%E7%94%A8%E6%96%87%E6%A1%A3/DataApiService%E4%BD%BF%E7%94%A8%E6%96%87%E6%A1%A3.md) | 数据API服务。可快速将SQL脚本发布为一个 Restful 接口,对外提供 Rest 访问能力。 | 不支持 | >=1.0.0 | 已发布 | |
| 26 | +| [**Scriptis**](https://github.com/WeBankFinTech/Scriptis) | 支持在线写 SQL、Pyspark、HiveQL 等脚本,提交给[Linkis](https://github.com/WeBankFinTech/Linkis)执行的数据分析 Web 工具。 | >=0.5.0 | >=1.0.0 | 已发布 | |
| 27 | +| [**Schedulis**](https://github.com/WeBankFinTech/Schedulis) | 基于 Azkaban 二次开发的工作流任务调度系统,具备高性能,高可用和多租户资源隔离等金融级特性。 | >=0.5.0 | >=1.0.0 | 已发布 | |
| 28 | +| **EventCheck** | 提供跨业务、跨工程和跨工作流的信号通信能力。 | >=0.5.0 | >=1.0.0 | 已发布 | |
| 29 | +| **SendEmail** | 提供数据发送能力,所有其他工作流节点的结果集,都可以通过邮件进行发送 | >=0.5.0 | >=1.0.0 | 已发布 | |
| 30 | +| [**Qualitis**](https://github.com/WeBankFinTech/Qualitis) | 数据质量校验工具,提供数据完整性、正确性等数据校验能力 | >=0.5.0 | 1.0.1(当前筹备版本) | **预计年前发版** | |
| 31 | +| [**Streamis**](https://github.com/WeBankFinTech/Streamis) | 流式应用开发管理工具。支持发布 Flink Jar 和 Flink SQL ,提供流式应用的开发调试和生产管理能力,如:启停、状态监控、checkpoint 等。 | 不支持 | 1.0.1(当前筹备版本) | **预计年前发版** | |
| 32 | +| [**Exchangis**](https://github.com/WeBankFinTech/Exchangis) | 支持对结构化及无结构化的异构数据源之间的数据传输的数据交换平台,即将发布的 Exchangis1.0,将与 DSS 工作流打通 | 不支持 | 规划在1.0.2 | **开发实现中** | |
| 33 | +| [**Visualis**](https://github.com/WeBankFinTech/Visualis) | 基于宜信开源项目 Davinci 二次开发的数据可视化 BI 工具,为用户在数据安全方面提供金融级数据可视化能力。 | >=0.5.0 | 规划在1.0.2 | **开发实现中** | |
| 34 | +| [**Prophecis**](https://github.com/WeBankFinTech/Prophecis) | 一站式机器学习平台,集成多种开源机器学习框架。Prophecis 的 MLFlow 通过 AppConn 可以接入到 DSS 工作流中。 | 不支持 | 规划在1.0.2 | **开发实现中** | |
| 35 | +| **UserManager** | 自动初始化一个 DSS 新用户所必须的所有用户环境,包含:创建 Linux 用户、各种用户路径、目录授权等。 | >=0.9.1 | 规划在1.0.2 | **开发实现中** | |
| 36 | +| **DolphinScheduler** | Apache DolphinScheduler,分布式易扩展的可视化工作流任务调度平台,支持一键将DSS工作流发布到 DolphinScheduler。 | 不支持 | 规划在1.1.0 | **开发实现中** | |
| 37 | +| **UserGuide** | 包含帮助文档、新手指引、Dark模式换肤等。 | 不支持 | 规划在1.1.0 | **开发实现中** | |
| 38 | +| **DataModelCenter** | 主要提供数仓规划、数据模型开发和数据资产管理的能力。数仓规划包含主题域、数仓分层、修饰词等;数据模型开发包含指标、维度、度量、向导式建表等;数据资产打通 **Apache Atlas**,提供**数据血缘**能力。 | 不支持 | 规划在1.2.0 | **开发实现中** | |
| 39 | +| **Airflow** | 支持将 DSS 工作流发布到 Airflow 进行定时调度。 | >=0.9.1,尚未合并 | 不支持 | **尚无规划** | |
32 | 40 |
|
33 | 41 |
|
34 | 42 | ## 下载 |
|
43 | 51 |
|
44 | 52 | ## Demo试用环境 |
45 | 53 |
|
46 | | - 由于 DataSphereStudio 支持执行脚本风险较高,WeDataSphere Demo环境的隔离没有做完,考虑到大家都在咨询Demo环境,决定向社区先定向发放邀请码,接受企业和组织的试用申请。 |
| 54 | + 由于 DataSphereStudio 支持执行脚本风险较高,WeDataSphere Demo 环境的隔离没有做完,考虑到大家都在咨询 Demo 环境,决定向社区先定向发放邀请码,接受企业和组织的试用申请。 |
47 | 55 |
|
48 | | - 如果您想试用Demo环境,请加入DataSphere Studio社区用户群(**加群方式请翻到本文档末尾处**),联系团队成员获取邀请码。 |
| 56 | + 如果您想试用 Demo 环境,请加入 DataSphere Studio 社区用户群(**加群方式请翻到本文档末尾处**),联系团队成员获取邀请码。 |
49 | 57 |
|
50 | | - DataSphereStudio Demo环境用户注册页面:[点我进入](https://www.ozone.space/wds/dss/#/register) |
| 58 | + DataSphereStudio Demo 环境用户注册页面:[点我进入](https://dss-open.wedatasphere.com/#/register) |
51 | 59 |
|
52 | | - DataSphereStudio Demo环境登录页面:[点我进入](https://www.ozone.space/wds/dss/#/login) |
| 60 | + DataSphereStudio Demo 环境登录页面:[点我进入](https://dss-open.wedatasphere.com/#/login) |
53 | 61 |
|
54 | | - **DataSphereStudio1.0 Demo环境将在近期开放,敬请期待**。 |
| 62 | + **DataSphereStudio1.0 Demo 环境将在近期开放,敬请期待**。 |
55 | 63 |
|
56 | 64 | ## 文档目录 |
57 | 65 |
|
58 | | -请访问 [中文文档](zh_CN), 查看DSS的完整文档列表。 |
| 66 | +请访问 [中文文档](zh_CN), 查看 DSS 的完整文档列表。 |
59 | 67 |
|
60 | 68 | 以下为 DSS 相关 AppConn 插件的安装指南: |
61 | 69 |
|
62 | | -- [DSS的Visualis AppConn插件安装指南](zh_CN/安装部署/VisualisAppConn插件安装文档.md) |
| 70 | +- [DSS 的 Visualis AppConn 插件安装指南](zh_CN/安装部署/VisualisAppConn插件安装文档.md) |
63 | 71 |
|
64 | | -- [DSS的Schedulis AppConn插件安装指南](zh_CN/安装部署/SchedulisAppConn插件安装文档.md) |
| 72 | +- [DSS 的 Schedulis AppConn 插件安装指南](zh_CN/安装部署/SchedulisAppConn插件安装文档.md) |
65 | 73 |
|
66 | | -- [DSS的Qualitis AppConn插件安装指南](zh_CN/安装部署/QualitisAppConn插件安装文档.md) |
| 74 | +- [DSS 的 Qualitis AppConn 插件安装指南](zh_CN/安装部署/QualitisAppConn插件安装文档.md) |
67 | 75 |
|
68 | | -- [DSS的Exchangis AppConn插件安装指南](zh_CN/安装部署/ExchangisAppConn插件安装文档.md) |
| 76 | +- [DSS 的 Exchangis AppConn 插件安装指南](zh_CN/安装部署/ExchangisAppConn插件安装文档.md) |
69 | 77 |
|
70 | 78 |
|
71 | | -## 谁在使用DataSphere Studio |
| 79 | +## 谁在使用 DataSphere Studio |
72 | 80 |
|
73 | 81 | 我们创建了 [Who is using DSS](https://github.com/WeBankFinTech/DataSphereStudio/issues/1) issue 以便用户反馈和记录谁在使用 DSS,欢迎您注册登记. |
74 | 82 |
|
75 | | - DSS 自2019年开源发布以来,累计已有700多家试验企业和1000+沙盒试验用户,涉及金融、电信、制造、互联网等多个行业。 |
| 83 | + DSS 自 2019 年开源发布以来,累计已有 700 多家试验企业和 1000+ 沙盒试验用户,涉及金融、电信、制造、互联网等多个行业。 |
76 | 84 |
|
77 | 85 |
|
78 | 86 | ## 文档说明 |
79 | 87 |
|
80 | | - DataSphere Studio统一使用Gitbook进行管理,整个项目会整理成一个Gitbook电子书,方便大家下载和使用。 |
| 88 | + DataSphere Studio 统一使用 GitBook 进行管理,整个项目会整理成一个 GitBook 电子书,方便大家下载和使用。 |
81 | 89 |
|
82 | | - WeDataSphere后续会提供统一的文档阅读入口,关于Gitbook的使用方式,请参考:[GitBook文档](http://caibaojian.com/gitbook/)。 |
| 90 | + WeDataSphere 后续会提供统一的文档阅读入口,关于 GitBook 的使用方式,请参考:[GitBook文档](http://caibaojian.com/gitbook/)。 |
83 | 91 |
|
84 | 92 |
|
85 | 93 | ## 贡献 |
|
0 commit comments