课程大纲

企业架构与管道设计

  • 多层ETL架构。
  • 设计模块化和可重用组件。
  • 跨系统的混合方法。

高级性能工程

  • 步骤级优化。
  • 并行和线程策略。
  • 监控高负载管道。

自动化、脚本和自定义扩展

  • 转换中的脚本编写。
  • 开发自定义插件。
  • 使用Java和JavaScript扩展PDI功能。

复杂数据处理与集成

  • 实时和流式集成。
  • 与大数据平台协作。
  • 高级文件和API处理。

数据治理、安全与合规

  • 保护转换和凭证。
  • 数据沿袭和可追溯性。
  • 法规和合规考虑。

企业编排与调度

  • 管理大型作业网络。
  • 错误恢复和故障转移设计。
  • 环境级编排。

仓库、版本控制与CI/CD

  • 企业仓库策略。
  • 将PDI与Git集成。
  • 持续部署模式。

部署、监控与生产操作

  • 跨环境推广解决方案。
  • 操作工具和仪表板。
  • 端到端生产就绪。

总结与下一步

要求

  • 理解ETL管道和数据建模。
  • 具备中级PDI转换经验。
  • 扎实的SQL和脚本技能。

受众

  • 高级数据工程师。
  • ETL架构师。
  • 管理复杂数据集成工作负载的专业人士。
 21 小时

客户评论 (2)

即将举行的公开课程

课程分类