官宣!Taier1.3新版本正式发布,新鲜功能抢先体验

官宣!Taier1.3新版本正式发布,新鲜功能抢先体验2022年11月7日,Taier1.3版本正式发布! Taier 是一个大数据分布式可视化的DAG任务调度系统,旨在降低ETL开发成本、提高大数据平台稳定性,大数据开发人员可以在 Taier 直接进行

官宣!Taier1.3新版本正式发布,新鲜功能抢先体验

2022年11月7日,Taier1.3版本正式发布!

Taier 是一个大数据分布式可视化的DAG任务调度系统,旨在降低ETL开发成本、提高大数据平台稳定性,大数据开发人员可以在 Taier 直接进行业务逻辑的开发,而不用关心任务错综复杂的依赖关系与底层的大数据平台的架构实现,将工作的重心更多地聚焦在业务之中。

Taier自今年2月份开源之后,得到了社区开发者的广泛支持,我们积极吸收社区开发者的意见建议,不断迭代版本,目前已发布了Taier1.1、Taier1.2这两个大的版本更新。

本次发布的Taier1.3版本,我们新增了Flink Standalone组件,融合了DataSourceX的模块,并新增了Python、Shell、ClickHouse、Doris SQL等多种任务,任务数据源绑定,任务支持指定队列运行,并进行了部署优化,同时对官网社区的UI进行了全新的升级改造。

目前新版本已在Github与Gitee上线,同时使用文档也在社区推送,大家可以随时下载查阅,欢迎大家前往体验(喜欢我们的项目欢迎大家点个Star),体验地址:

Github:

https://github.com/DTStack/Taier

Gitee:

https://gitee.com/dtstack_dev_0/taier

社区官网:

https://dtstack.github.io/Taier/

同时为了方便没有钉钉的开发者们更好的交流Taier开源技术,我们新建了Taier开源技术微信交流群,欢迎大家加入一起探讨开源技术~

file

Taier1.3版本详解

新增Flink Standalone组件,可以通过Flink Standalone使用Flink SQL、数据同步、实时采集等任务相关功能。移除Taier对Hadoop组件的强依赖,支持轻量化的数据处理。

file

02 DataSourceX融合

Taier融合DataSourceX模块,移除Taier外部插件依赖。新增数据源插件相关特性,支持后续Taier对接更多的RDBMS类型的SQL任务。

03 新增Python、Shell任务

新增Script组件,支持Python、Shell任务类型,可以在Taier上通过脚本类型任务进行操作。

file

file

04 新增ClickHouse、Doris SQL任务

新增ClickHouse、Doris SQL任务类型,支持数据同步脚本模式到ClickHouse、Doris,再进行任务调度处理。

05 任务数据源绑定

控制台组件移除SQL类型组件配置,SQL任务直接和数据源互相绑定,支持任务和数据源一对一的执行,将SQL执行域细分到具体的单个数据源。

file

06 任务支持指定队列运行

Hadoop类型任务支持指定队列运行,队列资源隔离细分到任务级别。

07 部署优化

Taier优化单机部署,优化前后端部署操作,简化docker镜像部署流程,降低上手难度。

08 官网升级

Taier社区新官网上线,UI设计全面升级。

file

后续版本规划

Taier今年更新了3个大的版本,按照社区规划,后续版本我们计划重点围绕关键点:

● 完善Taier Datasource 模板支持SQL任务

● HadoopMR、Spark Jar、PySpark 任务支持

● 任务告警

● Windows开发环境适配

我们欢迎社区的开发者们一起参与到Taier的版本建设中来,同时大家如果有其他的意见建议也可以给我们提一个Issue或者PR,大家可以来一起探讨怎么更好的共建项目。感兴趣的小伙伴们可以加入我们的技术交流社群,一起交流Taier的技术问题及难点,共建Taier!

袋鼠云开源框架钉钉技术交流qun(30537511),欢迎对大数据开源项目有兴趣的同学加入交流最新技术信息,开源项目库地址:https://github.com/DTStack/Taier

原文地址:https://www.cnblogs.com/DTinsight/archive/2022/11/08/16869217.html

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
转载请注明出处: https://daima100.com/4569.html

(0)
上一篇 2023-06-14
下一篇 2023-06-14

相关推荐

  • 安装oracle11g数据库使用的最小物理内存_oracleclient安装教程11g

    安装oracle11g数据库使用的最小物理内存_oracleclient安装教程11g安装oracle11g数据库 一、oracle11g下载 点击链接进入选择相应的版本下载。oracle11g版本有两个文件,下载的时候需要登录,你可以注册一个或者百度一下oracle账号。 二、or…

    2023-03-09
    156
  • 使用Pycharm安装Pandas指南

    使用Pycharm安装Pandas指南在Python编程领域中,Pandas是一个非常有用的工具。它提供高效、易于使用的数据结构和数据分析工具。然而,安装Pandas并不总是容易的,特别是当你不知道从哪里开始的时候。在本篇文章中,我们将介绍在Pycharm中如何安装Pandas。

    2024-05-14
    64
  • sql查看用户拥有的权限_oracle 用户权限

    sql查看用户拥有的权限_oracle 用户权限问题 经常在PG群里看到有人在问“为什么我对表赋予了权限;但是还是不能访问表” 解析 若你看懂德哥这篇文章PostgreSQL逻辑结构和权限体系介绍;上面对你就不是困扰你的问题 解决这个问题很简单;在

    2023-03-01
    156
  • 阿里规范不建议多表Join,可这SQL要怎么写?

    阿里规范不建议多表Join,可这SQL要怎么写?阿里开发手册的描述,禁止多表join: 手册上写着【强制】,相信很多同学项目里面的代码都不满足这个要求。 但是关键问题是:不用join,这SQL究竟要怎么写?! 分解关联查询 即对每个要关联的表进行…

    2022-12-15
    162
  • 跑批是什么意思啊_pjsk保底

    跑批是什么意思啊_pjsk保底摘要:SPL实现了更优算法,性能远远超过存储过程,能显著提高单机计算效率,非常适合跑批计算。 本文分享自华为云社区《Java开源专业计算引擎:跑批真的这么难吗?》,作者: Java李杨勇。 业务系统产

    2023-06-02
    151
  • 常见的python网络应用(python基础及应用)

    常见的python网络应用(python基础及应用)现在互联网发展迅速,众多行业巨头,都已经转投到人工智能领域,而人工智能的首选编程语言就是python,所以学好Python能够从事的工作还是很多的,而且前景非常不错。

    2023-11-19
    134
  • day05多表查询01「建议收藏」

    day05多表查询01「建议收藏」多表查询 前面讲过的基本查询都是对一张表进行查询,但在实际的开发中远远不够。 下面使用表emp,dept,salgrade进行多表查询 emp: dept: salgrade: 1.前置-mysql表

    2023-06-08
    141
  • 理解Spark运行模式(二)(Yarn Cluster)[通俗易懂]

    理解Spark运行模式(二)(Yarn Cluster)[通俗易懂]上一篇说到Spark的yarn client运行模式,它与yarn cluster模式的主要区别就是前者Driver是运行在客户端,后者Driver是运行在yarn集群中。yarn client模式一

    2022-12-19
    157

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注