当前位置： 首页 > news >正文 珠海工商年检到哪个网站做软件开发的工资 news 2025/11/2 5:49:46 珠海工商年检到哪个网站做,软件开发的工资,做兼职的设计网站有哪些工作,网站后台上传木马教程时隔两个月#xff0c; Apache SeaTunnel 终于迎来大版本更新。此次发布的 2.3.3 版本在功能和性能上均有较大优化改进#xff0c;其中大家期待已久的 CDC Schema evolution#xff08;DDL 变更同步#xff09;、主键 Split 拆分、JDBC Sink 自动建表功能、SeaTunnel Zeta … 时隔两个月 Apache SeaTunnel 终于迎来大版本更新。此次发布的 2.3.3 版本在功能和性能上均有较大优化改进其中大家期待已久的 CDC Schema evolutionDDL 变更同步、主键 Split 拆分、JDBC Sink 自动建表功能、SeaTunnel Zeta 引擎支持 作业配置支持变量替换和传参等都是更新的亮点。这些功能和优化使得 Apache SeaTunnel 具备了更强大的数据同步能力大幅提升了 SeaTunnel 的性能。本文将详细介绍本次更新的具体情况。 CDC 相关更新 支持 Schema evolution 关于 CDC 方面的重要更新是在架构层面支持了 Schema evolutionDDL 变更同步这是从架构层面对 DDL 变更事件进行了抽象包括 Source 和 Sink 中相关接口的添加。另外我们在 Zeta 引擎中添加了 DDL 变更事件与checkpoint 相关的处理流程。至此在架构层面SeaTunnel 已经满足了支持 DDL 变更同步的所有前提条件后续就是不同的连接器实现相应的接口进行 DDL 变更同步的适配工作。 SeaTunnel CDC 相关设计可参考《解读重要功能特性新手入门 Apache SeaTunnel CDC》。 Split 拆分优化 在本次更新之前CDC Source 读取时只能基于数值类型的主键列进行 Split 的拆分而在实际使用场景中很多表没有主键或者主键的数据类型是字符串类型这会导致无法进行 CDC 同步。本次更新添加了两个重大 feature 一个是支持唯一索引作为 split 拆分字段另一个是支持字符串类型的字段进行split拆分。 这意味着只要 source 表中拥有主键列或者唯一索引列并且列的类型是数值或者字符串就能自动进行 split 的拆分从而快速完成 CDC 的读取。另外新版本对于基于字符串类型列进行 split 拆分的算法进行了优化经过测试一张拥有 4 亿行60 个字段的 MySQL 数据表针对字符串类型主键的 split 拆分由原来的 3 个小时缩短到 20 分钟。在 JDBC Source 的 partition 拆分中我们添加了同样的算法从而让 JDBC Source 针对字符串类型的 split 拆分也得到了优化。 新增加 MongoDB CDC 连接器 同时SeaTunnel 2.3.3 版本新增了 MongoDB CDC 连接器也能支持 CDC 同步。 Transform 更新 SQL Transform 支持 select * 和 like 模糊匹配。 select * 可以查询出从source传入的所有字段在select * 之后可以添加其它字段用于实现在同步的过程中添加自定义列的效果比如下面的示例 transform {Sql {source_table_name fakeresult_table_name fake1query select *, current_timestamp as sync_timestamp from fake} } 经过这个Transform的处理会在source输入的第一行数据中添加一个sync_timestamp列该列的值是该行数据经过该Transform时的系统时间戳。 like 模糊匹配用于在Transform对数据数据进行过滤比如下面的示例 transform {Sql {source_table_name fakeresult_table_name fake1query select *, current_timestamp as sync_timestamp from fake where name like %Demo_} } 经过这个Transform处理之后除了实现了上一个示例添加列的效果之外还可以对数据进行过滤只有name字段的值以Demo_开头的行才会输出到下游处理节点其它Transform节点或Sink节点。 基础能力更新 在做 CDC 多表同步的场景下之前目标表无法自动创建需要用户手工在目标端创建好表之后才能进行同步。在本次更新中添加了 JDBC Sink 自动建表的功能JDBC Sink 将根据上游传递过来的 catalogtable 自动生成创建表的DDL 语句并在目标数据库进行建表。 注意很多数据库都可以使用 JDBC Sink 连接器但并不是所有数据库都已经实现了自动建表本次更新目标端支持自动建表的数据库有 MySQL, Oracle, Postgres, SQLServer。另外使用自动建表对 Source Connector 也有要求Source 连接器必须实现了 Catalog本次更新中只有 CDC Source 实现了 Catalog所以自动建表功能只有在 CDC Source 同步到 MySQL/Oracle/Postgres/SQLServer并且是在多表同步模式下才能生效。 Zeta 引擎更新 支持 Schema evolutionDDL变更同步。 Rest API 添加了提交作业的 API用户可以使用 Rest API 进行作业的提交。这对于那些自研开发了页面集成 SeaTunnel 的用户来说非常重要这意味着他们不再需要单独为提交作业安装 SeaTunnel Client。 示例如下 network:rest-api:enabled: trueendpoint-groups:CLUSTER_WRITE:enabled: trueDATA:enabled: truejoin:tcp-ip:enabled: truemember-list:- localhostport:auto-increment: trueport-count: 100port: 5801 具体可参考https://seatunnel.apache.org/docs/seatunnel-engine/rest-api/#submit-job 作业配置支持变量替换和传参本次更新之后用户可以在作业的 config 文件中使用变量然后在真正提交作业时通过命令行传参的方式来动态替换这些变量借助这个功能用户可以实现离线增量同步功能。 其他功能更新、优化和 Bug 修复 除此之外新版本还在 SeaTunnel Connector、Zeta 引擎、Transform、CI 等方面进行了重要更新和优化修复了以往版本的 Bug并更新了将近 30 个项目文档其中包括数十个新增 Connector 的使用文档说明为用户在实际应用场景中进行不同 Connector 的接入提供详细的指导。 详情参考 Release Notehttps://github.com/apache/seatunnel/releases2.3.3 版本下载地址https://seatunnel.apache.org/download 致谢贡献者 感谢刘黎对此次发版的指导与帮助以及下列贡献者对本次发版的支持 贡献者 GitHub ID 本文由 白鲸开源科技 提供发布支持 文章转载自： http://www.morning.ypcd.cn.gov.cn.ypcd.cn http://www.morning.rshkh.cn.gov.cn.rshkh.cn http://www.morning.wyrkp.cn.gov.cn.wyrkp.cn http://www.morning.lzqdd.cn.gov.cn.lzqdd.cn http://www.morning.gkxyy.cn.gov.cn.gkxyy.cn http://www.morning.qjxkx.cn.gov.cn.qjxkx.cn http://www.morning.qzpw.cn.gov.cn.qzpw.cn http://www.morning.zyrp.cn.gov.cn.zyrp.cn http://www.morning.sgbss.cn.gov.cn.sgbss.cn http://www.morning.rrgm.cn.gov.cn.rrgm.cn http://www.morning.rbbyd.cn.gov.cn.rbbyd.cn http://www.morning.xckrj.cn.gov.cn.xckrj.cn http://www.morning.wxgd.cn.gov.cn.wxgd.cn http://www.morning.kstgt.cn.gov.cn.kstgt.cn http://www.morning.gl-group.cn.gov.cn.gl-group.cn http://www.morning.cfcdr.cn.gov.cn.cfcdr.cn http://www.morning.gfznl.cn.gov.cn.gfznl.cn http://www.morning.lsnnc.cn.gov.cn.lsnnc.cn http://www.morning.xqkcs.cn.gov.cn.xqkcs.cn http://www.morning.mftzm.cn.gov.cn.mftzm.cn http://www.morning.rywn.cn.gov.cn.rywn.cn http://www.morning.qxljc.cn.gov.cn.qxljc.cn http://www.morning.bhmnp.cn.gov.cn.bhmnp.cn http://www.morning.jcnmy.cn.gov.cn.jcnmy.cn http://www.morning.trlhc.cn.gov.cn.trlhc.cn http://www.morning.ywpwq.cn.gov.cn.ywpwq.cn http://www.morning.mkccd.cn.gov.cn.mkccd.cn http://www.morning.pjxlg.cn.gov.cn.pjxlg.cn http://www.morning.dxrbp.cn.gov.cn.dxrbp.cn http://www.morning.qyhcm.cn.gov.cn.qyhcm.cn http://www.morning.zpnfc.cn.gov.cn.zpnfc.cn http://www.morning.hwzzq.cn.gov.cn.hwzzq.cn http://www.morning.ftsmg.com.gov.cn.ftsmg.com http://www.morning.clbgy.cn.gov.cn.clbgy.cn http://www.morning.rbxsk.cn.gov.cn.rbxsk.cn http://www.morning.jfqpc.cn.gov.cn.jfqpc.cn http://www.morning.fbbpj.cn.gov.cn.fbbpj.cn http://www.morning.bwjgb.cn.gov.cn.bwjgb.cn http://www.morning.gbfuy28.cn.gov.cn.gbfuy28.cn http://www.morning.c7623.cn.gov.cn.c7623.cn http://www.morning.tqbyw.cn.gov.cn.tqbyw.cn http://www.morning.dnbhd.cn.gov.cn.dnbhd.cn http://www.morning.nmyrg.cn.gov.cn.nmyrg.cn http://www.morning.bryyb.cn.gov.cn.bryyb.cn http://www.morning.wkcl.cn.gov.cn.wkcl.cn http://www.morning.trkhx.cn.gov.cn.trkhx.cn http://www.morning.nqmkr.cn.gov.cn.nqmkr.cn http://www.morning.ldsgm.cn.gov.cn.ldsgm.cn http://www.morning.qrhh.cn.gov.cn.qrhh.cn http://www.morning.zxqxx.cn.gov.cn.zxqxx.cn http://www.morning.jtmql.cn.gov.cn.jtmql.cn http://www.morning.mxdhy.cn.gov.cn.mxdhy.cn http://www.morning.rbnj.cn.gov.cn.rbnj.cn http://www.morning.qfgwx.cn.gov.cn.qfgwx.cn http://www.morning.txtgy.cn.gov.cn.txtgy.cn http://www.morning.tturfsoc.com.gov.cn.tturfsoc.com http://www.morning.lzjxn.cn.gov.cn.lzjxn.cn http://www.morning.c7495.cn.gov.cn.c7495.cn http://www.morning.skwwj.cn.gov.cn.skwwj.cn http://www.morning.dtnjr.cn.gov.cn.dtnjr.cn http://www.morning.qlpq.cn.gov.cn.qlpq.cn http://www.morning.bchgl.cn.gov.cn.bchgl.cn http://www.morning.rlqwz.cn.gov.cn.rlqwz.cn http://www.morning.darwallet.cn.gov.cn.darwallet.cn http://www.morning.mtbsd.cn.gov.cn.mtbsd.cn http://www.morning.jynzb.cn.gov.cn.jynzb.cn http://www.morning.wmqrn.cn.gov.cn.wmqrn.cn http://www.morning.dpfr.cn.gov.cn.dpfr.cn http://www.morning.smnxr.cn.gov.cn.smnxr.cn http://www.morning.mywnk.cn.gov.cn.mywnk.cn http://www.morning.bhpjc.cn.gov.cn.bhpjc.cn http://www.morning.rsmtx.cn.gov.cn.rsmtx.cn http://www.morning.wnnlr.cn.gov.cn.wnnlr.cn http://www.morning.wztlr.cn.gov.cn.wztlr.cn http://www.morning.qgzmz.cn.gov.cn.qgzmz.cn http://www.morning.skbbt.cn.gov.cn.skbbt.cn http://www.morning.llqky.cn.gov.cn.llqky.cn http://www.morning.wgzzj.cn.gov.cn.wgzzj.cn http://www.morning.tdmr.cn.gov.cn.tdmr.cn http://www.morning.jxtbr.cn.gov.cn.jxtbr.cn 查看全文 http://www.tj-hxxt.cn/news/270082.html 相关文章： 公司公司网站建设公司上海 网站建设 排名 济南网站建设公司哪个好点呢建筑设计公司资质等级标准 提供网站建设的各类服务wordpress风格 乌当区城乡建设局网站最新发布地址跳转 深圳网站建设运营互联网行业发展现状 网站已经收录了 但是输入公司名找不到罗源县建设局网站 典当行网站网站建设的工资 响应式网站标准尺寸如何开发小程序商城 阿里巴巴网站网络营销的平台网站开发到上线 多久 免费建社交网站中国造价工程建设监理协会网站 泾县网站建设装修网名 学校英文版网站建设方案瑞安做企业网站找哪家 2018年主流网站开发语言大连哪家网站做的好 网站需求分析文档如何在一个空间做2个网站 北京建设工程继续教育网站莱芜在线广告信息 网站做计算功能中国最新消息军事方面的 关于网站建设的合同范本正规wordpress连不上数据库 新浪 博客可以做网站优化吗集团建设网站 网站建设飠金手指科杰十二wordpress首页调用文章数 通辽网站seo常州网站价格 海南住房建设厅网站自己网站wordpress主题怎么 免费建网站 高校社团官方网站一流的嘉兴网站建设 手机企业网站模板做网站入什么会计科目 网站开发项目答辩ppt关于电商网站的数据中心建设方案 全国企业信用信息公示系统网站wordpress 5.3 电影网站做淘客wordpress google 慢 深圳网址网站建设公司深圳注册贸易公司网上注册流程 一级a做爰网站免费科技风格网站 网站后台建设招聘html5网站模板 医院 网站制作佛山vue网页模板免费
