通用的etl工具:通过写配置文件,实现数据的ETL。
# install
# 注意:可能需要sudo
python3 setup.py install
# 帮助
ibbdetl --help
# 使用方式
ibbdetl /path/to/config_file.yml
# 测试时,可以直接指定输出到控制台
ibbdetl /path/to/config_file.yml --console
见项目:https://github.com/ibbd-dev/ibbdETL-demos
python3 src/etl.py conf/hello.yml
- 目录:
./docs/
- 配置文件格式说明文档:
./docs/config.md
- 模块开发说明文档:
./docs/dev.md