1.总的调度流程，通过linux下的crontab定时执行一个包含kjb执行信息的shell脚本


2.XXXX_0_Execute_Judge转换下有两个作业，通过获取每天的同步状态值来判断是否执行同步工作，如果同步状态不满足，会发邮件告知


3.XXXX_A0_Connect_Next作业下含有四个并行执行的作业，Message_Prepare_Yes作业负责的获取到同步状态OK的Email邮件通知


4.四个并行执行的作业分别负责同步不同的模块数据(整个同步原则是小表直接同步，大表通过BCP导出，映射成GP对应的utf-8的txt外部表)


5.在所有的模块成功执行完成后，会发送同步完成的邮件通知


以上只是记录ETL项目的整理框架流程，整个过程比较复杂的地方在于超过十几个G的大表压缩传送，GBK到UTF-8的转码。


由于CSDN不能正常显示图片的问题，可以参考本人的博客园：


http://www.cnblogs.com/binguo2008/p/7260423.html

GitHub 加速计划 / li / linux-dash
11
2
下载
A beautiful web dashboard for Linux
最近提交(Master分支：2 个月前 )
186a802e added ecosystem file for PM2 5 年前
5def40a3 Add host customization support for the NodeJS version 5 年前
Logo
GitCode 开源社区

新一代开源开发者平台 GitCode，通过集成代码托管服务、代码仓库以及可信赖的开源组件库，让开发者可以在云端进行代码托管和开发。旨在为数千万中国开发者提供一个无缝且高效的云端环境，以支持学习、使用和贡献开源项目。

更多推荐

Rust编译时计算：`const` 函数、泛型与高级类型体操

摘要： Rust的编译时计算机制通过const函数、泛型和类型体操实现零成本抽象和错误预防。const fn允许纯净计算在编译期执行，支持控制流和断言检查。const泛型将值参数化到类型系统，实现数组尺寸的类型安全验证。类型级编程利用类型属性和Trait进行编译期逻辑验证。const与宏协作扩展元编程能力，用于构建静态配置数据结构。这些特性共同提升了代码安全性（将运行时错误转为编译错误）和性能（消

avatar GitCode 开源社区
cover

【Rust 探索之旅】Rust 微服务架构实战：构建百万级高并发电商系统

avatar GitCode 开源社区

Rust类型系统奇技淫巧：幽灵类型（PhantomData）——理解编译器与类型安全

Rust类型系统高阶技巧：幽灵类型PhantomData深度解析 PhantomData是Rust中一种零开销的编译期标记类型，用于在缺乏实际字段时维护类型系统的契约。它不占用内存，但能显著影响编译器对所有权、生命周期和并发安全的分析。 核心用途包括： 绑定生命周期参数（如PhantomData<&'a T>） 模拟所有权关系（如PhantomData<T>） 控制

avatar GitCode 开源社区