数据库sqlserver定时同步数据到Doris,有什么好的方法吗?

数据库sqlserver定时同步数据到Doris,有什么好的方法吗?
最好是可视化的工具,
我不是很懂Doris,但是现在项目需要用到,所以想找各位大佬速成一下

1 Like

捞一下

DataX

1 Like

继续捞

哦吼,重不重,我去看看

目前网上检索到:
DataX
Sqoop
SeaTunnel
Flume
Flink CDC
ETLCloud CDC

emmm不知道怎么,我先挨个简单看看

准备试试Apache SeaTunnel看

我们用的海豚调度,里面内置DataX

好问题

DataX 不错

:smiling_face_with_tear:看大家都说datax,刚刚docker部署了一套datax,发现那个web项目还没doris,呜呜可是我想要,又不想自己改,还是明天试试Apache SeaTunnel

不然试试 jdbc catalog?这个应该是最简单的,直接写个定时的 sql 任务导入数据到 doris 表中应该就行了
问题在于需要看你们自己 doris 的版本,可能不会下推所有的谓词,对 SQL Server 那边可能有遍历全表的压力,看了官方文档 2.0 版本才提到了谓词下推的功能, 1.2 版本是没提的(当然也有可能是文档缺失)

1 Like

嗯刚刚终于实现了,我之前doris是1.2的下午重新安装了2.0,使用了catalog。感谢佬!