flink使用13-開始體驗(yàn) Flink SQL

SQL API 是 Flink 中最頂級(jí)的 API , 它構(gòu)建了 Table API 之上, 也可以方便的和 Table 做轉(zhuǎn)換, 構(gòu)建 SQL 所使用的Environment 也是 Table Environment . Flink SQL 底層使用 Apache Calcite 框架, 將標(biāo)準(zhǔn)的 Flink SQL 語句解析并轉(zhuǎn)換成底層的算子處理邏輯. 下面就直接用 Flink 官方倉庫中的 案例 Code Link來做一個(gè)演示.

  1. 獲取執(zhí)行環(huán)境
// 首先同樣有流處理和批處理的區(qū)別, 
// 獲取對(duì)應(yīng)的environment之后直接轉(zhuǎn)換為Table environment ,
// 就可以使用SQL API,
StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();
StreamTableEnvironment tEnv = StreamTableEnvironment.create(env);
  1. 拿到要操作的表
// 將 Stream 轉(zhuǎn)換為 Table, 可以采用不同的辦法

// 將 DataStream 轉(zhuǎn)換為 Table
Table tableA = tEnv.fromDataStream(orderA, "user, product, amount");
// 將 DataStream 注冊(cè)成 Table
tEnv.registerDataStream("OrderB", orderB, "user, product, amount");
  1. 執(zhí)行SQL語句
// TableEnvironment 有 SqlQuery 和 SqlUpdate 兩種操作符可以使用

// union 兩個(gè) table
 Table result = tEnv.sqlQuery("SELECT * FROM " + tableA + " WHERE amount > 2 UNION ALL " +"SELECT * FROM OrderB WHERE amount > 2");

SQL可以執(zhí)行許多復(fù)雜的操作,本文先簡(jiǎn)單的了解下 SQL 的API

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 前篇主要介紹流式計(jì)算相關(guān)的核心概念,這篇簡(jiǎn)要聊聊Flink總體架構(gòu)、運(yùn)行環(huán)境及其在大數(shù)據(jù)生態(tài)系統(tǒng)中的位置,讓大家先...
    data之道閱讀 1,442評(píng)論 0 6
  • 1 意義 1.1 分層的 APIs & 抽象層次 Flink提供三層API。 每個(gè)API在簡(jiǎn)潔性和表達(dá)性之間提供...
    JavaEdge閱讀 557評(píng)論 0 0
  • 欣欣,起床了?。?! 一大早,媽媽就用她那響亮的嗓門把我叫醒了。唉,,, 我迷迷糊糊的走進(jìn)了校園,忽然,有個(gè)東西...
    婉荻小公舉閱讀 233評(píng)論 0 2
  • 今天星期六。學(xué)校舉行了專升本考試。 愿所有的努力都有回報(bào),加油加油。三年,把握好,不想失望,不想后悔,真的很快,再...
    祝好好閱讀 151評(píng)論 0 0
  • 「Why Buddhism is True」讀后感 the writing quality and the low...
    寄我浮生閱讀 135評(píng)論 0 2

友情鏈接更多精彩內(nèi)容