Kafka
-
Flink1.14.4版本消费kafka数据,能外部保存偏移量并维护吗?-[阿里云_云淘科技]
Flink1.14.4版本消费kafka数据,能外部保存偏移量并维护吗? 以下为热心网友提供的参考意见 是的,Flink 1.14.4版本支持外部保存Kafka消费偏移量并维护。 …
-
flink没有失败,一直在报broker可能不存在的警告,怎么解决呢?-[阿里云_云淘科技]
Flink1.10 kafka0.10运行一段时间后,我把kafka停了,但是flink没有失败,一直在报broker可能不存在的警告,怎么解决呢?我没有配置重启策略,我希望任务在…
-
大数据计算MaxCompute整库可以是 只读库吗?-[阿里云_云淘科技]
大数据计算MaxCompute整库可以是 只读库吗? 我们的数据库是 drds(rds) 得行不 监控数据源这的binlog 这个是啥弄的 比如datahub kafka ? 以下…
-
Flink如果我配置了最大连续失败数不为 1 那么如果我 ck 失败了 我这批数据会丢失吗?-[阿里云_云淘科技]
Flink中kafka 的精准一次 sink 如果我配置了最大连续失败数不为 1 那么如果我 ck 失败了 我这批数据会丢失吗? 以下为热心网友提供的参考意见 如果你配置了最大连续…
-
Flink中kafka总共有16266条数据, 但是消费到6144就停止并报这两条日志了?-[阿里云_云淘科技]
Flink中kafka总共有16266条数据, 但是消费到6144就停止并报这两条日志了? 以下为热心网友提供的参考意见 从你给出的日志来看,问题是关于Kafka消费者未能获取足够…
-
flinkcdc能接kafka开了权限认证吗?kafka开了sasl权限认证-[阿里云_云淘科技]
flinkcdc能接kafka开了权限认证吗?kafka开了sasl权限认证 以下为热心网友提供的参考意见 可以的,Flink CDC能够接入开启了SASL权限认证的Kafka。在…
-
flinkcdc能接kafka开了权限认证吗?-[阿里云_云淘科技]
flinkcdc能接kafka开了权限认证吗? 以下为热心网友提供的参考意见 Flink CDC 可以接入开启了权限认证的 Kafka。在接入过程中,需要进行以下步骤:首先,如果您…
-
我在使用flink kafka连接器的时候,遇到报错问题,没有分析思路,请各位指教一下报错如下图?-[阿里云_云淘科技]
我在使用flink kafka连接器的时候,遇到报错问题,没有分析思路,请各位大佬指教一下报错如下图:kafka集成了kerberos,flink是 on yarn模式,与kafk…
-
DataWorks中 kafka 数据源同步到mc , 任务一直在执行中, 这种一般是什么问题呢?-[阿里云_云淘科技]
DataWorks中 kafka 数据源同步到mc , 任务一直在执行中, 选择的同步是5分钟。这种一般是什么问题呢? 以下为热心网友提供的参考意见 在阿里云DataWorks中,…
-
Flink1.18.0版本连接外部kafka本地执行测试代码报错-[阿里云_云淘科技]
版本:Flink1.18.0代码如下:“`public static void main(String[] args) { //1、创建TableEnvironment…
-
Flink这个问题怎么解决? -[阿里云_云淘科技]
Flink这个问题怎么解决?数据库的binlog 是 先删除后新增,但是 cdc 解析到的是先新增后删除,使用的方式是,用flink sql 读取mysql binlog, 然后写…
-
Flink这个问题怎么解决? -[阿里云_云淘科技]
Flink这个问题怎么解决?在创建FlinkSQL中创建表的时候报这个错,在Kafka中没有创建这个Topic的时候报异常提示’kafkacatalog’中…