码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • Flink 的 Kafka Table API Connector


    Flink datastream connectors 和 Flink table api connectors 的区别:

    Flink DataStream Connectors和Table API Connectors是Flink中用于连接外部数据源的两种不同的连接器。

    1. Flink DataStream Connectors:

       - Flink DataStream Connectors是用于将外部数据源连接到Flink DataStream API的连接器。
       - 它们提供了与各种数据源(如Kafka、RabbitMQ、HDFS等)的集成能力。
       - DataStream Connectors提供了低级别的数据源和数据接收器的接口,允许用户以更细粒度的方式控制数据的读取和写入。

    2. Table API Connectors:

       - Flink Table API Connectors是用于将外部数据源连接到Flink Table API和SQL的连接器。
       - 它们提供了与各种数据源(如Kafka、JDBC、Elasticsearch等)的集成能力。
       - Table API Connectors提供了高级别的接口,使用户可以使用类似于SQL的语法来查询和处理数据。
       - 它们支持将外部数据源映射为Flink表,并提供了对表的查询和转换的操作。

    总的来说,DataStream Connectors提供了更低级别的接口,允许用户更细粒度地控制数据的读取和写入,而Table API Connectors提供了更高级别的接口,使用户可以使用类似于SQL的语法来查询和处理数据。DataStream connectors 在一个相对较低级别的命令式编程 API 中提供了流处理的原语(即时间、状态和数据流管理), Table API connectors 抽象了许多内部结构,并提供了结构化和声明性的 API。两种 API 都可以处理有界和无界流。


    Flink 在 Java 中提供了一个专门的 StreamTableEnvironment 用于与 DataStream API 集成。 这些环境使用其他方法扩展常规 TableEnvironment,并将 DataStream API 中使用的 StreamExecutionEnvironment 作为参数。

    Flink DataStream API与Data Table API集成:https://lrting.top/backend/3912/

    Kafka 的 Table API Connector:https://nightlies.apache.org/flink/flink-docs-release-1.17/docs/connectors/table/kafka/

    使用 Kafka 的 Table API Connector:https://blog.csdn.net/wtmdcnm/article/details/117821106

    对于用户认可的生产实践使用Flink的业务场景来说,主要是以下四种:

    • 实时 ETL。
    • 实时数据报表。
    • 实时业务监控。
    • 然后还有一个就是 CEP 在线业务。

    https://flink-learning.org.cn/article/detail/817b69f597fa691edc57269a8b3b78cd?name=article&tab=suoyou&page=-1

     

  • 相关阅读:
    JSTL标签库
    JUC包-线程池
    【Python系列】数字的bool值
    sql server 分区表
    Java核心编程(19)
    985测试工程师被吊打,学历和经验到底谁更重要?
    字符和字节的区别
    IDEA日志输出格式控制、文件记录日志
    创建一流 Web 表单的 11 个技巧
    BI工具:让数据分析井然有序一望而知
  • 原文地址:https://blog.csdn.net/npk191954/article/details/132810107
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号