Dinky: 实时即未来，让 Flink SQL 纵享丝滑--如何本地编译、运行

enjoy编程

已于 2023-06-13 13:18:57 修改

阅读量2.3k

点赞数

CC 4.0 BY-SA版权

分类专栏： flink实战程序员实用工具集合文章标签： flink sql dinky flink-sql flink-cdc

于 2023-06-13 13:16:33 首次发布

本文链接：https://blog.csdn.net/penriver/article/details/130932423

程序员实用工具集合同时被 2 个专栏收录

84 篇文章 ¥29.90 ¥99.00

订阅专栏

超级会员免费看

flink实战

30 篇文章 ¥29.90 ¥99.00

订阅专栏

超级会员免费看

Dinky 是一个基于 Apache Flink 的实时计算平台，专注于流批一体和湖仓一体。本文介绍了如何在本地编译、运行 Dinky，包括 clone 项目、构建 MySQL 镜像、编译、运行 dinky-admin，以及如何使用 Dinky 进行 SQL 操作和数据源注册。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

什么是Dinky

实时即未来，Dinky 为 Apache Flink 而生，让 Flink SQL 纵享丝滑。

Dinky 是一个开箱即用、易扩展，以 Apache Flink 为基础，连接 OLAP 和数据湖等众多框架的一站式实时计算平台，致力于流批一体和湖仓一体的探索与实践。

最后，Dinky 的发展皆归功于 Apache Flink 等其他优秀的开源项目的指导与成果

如何在本地编译、运行？

clone项目

git clone https://github.com/DataLinkDC/dinky.git
# 根据需要决定是否切换到指定版本或分支
# git checkout 0.8.0

构建mysql镜像

# 构建镜像
cd dinky
docker build -t d

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

enjoy编程

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
打赏
打赏
打赏举报

举报

专栏目录

订阅专栏

实时即未来，大数据项目车联网之创建Flink实时计算子工程【二】

Maynor的博客

11-28

1069

创建Flink实时计算子工程

实时即未来，大数据项目车联网之项目基石与前瞻【一】

Maynor的博客

08-19

3746

车联网的概念介绍车联网（ Internet of Vehicles ）指按照一定的通信协议和数据交互标准，在“人-车-路-云“之间进行信息交换的网络。即首先实现汽车智能网联化，再利用各种传感技术，感知车辆状态信息，并借助无线通信网络与大数据分析技术实现交通的智能化管理。

参与评论您还未登录，请先登录后发表或查看评论

dinky 本地编译并启动

weixin_45249411的博客

03-25

1687

1.1 下载源码包后，解压进入idea 设置profiles，dev,flink-1.14,scala2.12,web打上勾默认是jdk8的环境编译。之后进行build 如果你build以后没有前端页面。说明你的idea不太行。1.2修改数据库配置文件.启动即可。之后静待本地编译通过即可。1.首先是本地编译测试。

Dinky与Flink深度集成实践指南

最新发布

gitblog_00837的博客

06-11

448

Dinky与Flink深度集成实践指南前言 Dinky作为一款强大的数据开发平台，与Flink的深度集成能够为开发者提供更加便捷的流批一体开发体验。本文将详细介绍如何将Dinky与Flink进行集成，并提供一个完整的实践案例。环境准备系统要求在开始集成前，请确保您的系统满足以下基本要求： Java环境：JDK 1.8或11版本 Dinky版本：1.0.0及以上数据库：MySQL 5.7...

Dinky 本地编译及代码贡献操作流程

weixin_47444415的博客

11-30

2715

](undefinedhttp://www.aiwenmo.com/dinky/docs/test/WX20231025-[email protected])，注意，只需要粘贴http://后面的部分内容，替换到代码里。2.单击**作业总览**，进入作业详情页面，可以看到各个模块的详情信息。（5）假如要更换图中作业实例状态下的当前实例中的照片，该如何操作？两个提交选项，第一个是正式提交，而第二个DRP是草稿状态。先在本地拿到最新截图，之后上传到图传，在相册中就可以看到。1.在运维中心，单击**点击目标作业名**

实时即未来！Flink Forward Asia 2021 议程正式上线！

Ververica的博客

10-25

1266

作为开源大数据领域的顶级盛会之一，Flink Forward 持续集结最佳行业实践以及 Flink 最新技术动态，并积极拥抱生态伙伴，共建繁荣开源大数据生态。12 月 4-5 日，北京国家...

Dinky：实时数据开发的革命性平台

gitblog_00084的博客

09-03

706

Dinky：实时数据开发的革命性平台项目介绍 Dinky 是一个基于 Apache Flink 的实时数据开发平台，它不仅简化了数据开发的流程，还提供了强大的部署和运维功能。Dinky 的核心目标是让数据开发变得更加敏捷和高效，通过其丰富的功能和灵活的配置，满足从数据开发到任务运维的全链路需求。项目技术分析 Dinky 的技术架构基于 Apache Flink，这是一个广泛应用于实时数据处理和...

实时即未来，大数据项目车联网之项目基石与前瞻【一】_车联网大数据项目(1)

2401_84164527的博客

04-29

1063

车辆按大小来分汽车后服务市场。

flink-sql-connector-mysql-cdc-2.3.0.jar

07-05

flink同步mysql数据库所用包

dinky依赖flink1.14.6相关jar包

05-25

flink-doris-connector-1.14_2.12-1.1.1.jar、flink-sql-connector-mysql-cdc-2.1.1.jar、dlink-connector-jdbc-1.14-0.7.2.jar、mysql-connector-java-5.1.27-bin.jar、flink-faker-0.5.0.jar、flink-connector-...

flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-565-9.0.jar.tar.gz

11-14

在这个特定的兼容包中，我们可以看到两个文件：flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-565-9.0.jar（实际的兼容库）和._flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-565-9.0.jar（可能是Mac OS的元数据文件，通常...

flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-565-9.0.jar

11-16

Flink-1.11.2与Hadoop3集成JAR包，放到flink安装包的lib目录下，可以避免Caused by: org.apache.flink.core.fs.UnsupportedFileSystemSchemeException: Hadoop is not in the classpath/dependencies.这个报错，实现...

Flink社区专刊S3-实时即未来.pdf

04-10

Flink社区专刊S3-实时即未来最全最新版flink专刊讲述了flink1.9的变革，内容详实，大数据必备！

Apache Flink 年度最佳实践-实时即未来.zip

04-26

一线大厂生产级应用，独家实践经验分享，包括仅用了1年时间，GitHub Star翻了数倍，Apache Flink到底做了什么？日均处理万亿数据，Apache Flink 在快手的应用实践与技术演进之路是怎样的？以及bilibili、美团、小米、OPPO、菜鸟等一线大厂的实时平台的架构与实践，一本以一线大厂最佳实践的方式讲述实时技术架构与演进路线，很不错，快来下载吧

【Flink Forward Asia 2021】活动报告出炉，实时即未来！

Ververica的博客

01-17

4764

1 月 9 日，FFA 2021 完美收官，Flink Forward 大会至此已经在国内成功举办 4 届。这些都离不开讲师以及合作伙伴们的支持，更离不开始终关注着 Apache Flin...

Dinky 实时数据开发平台教程

gitblog_00158的博客

09-03

789

Dinky 实时数据开发平台教程 1. 项目介绍 Dinky 是一个基于 Apache Flink 的实时数据开发平台，旨在实现敏捷的数据开发、部署和运维。Dinky 提供了沉浸式的 Flink SQL 数据开发环境，支持语句自动完成、在线调试、语法验证、逻辑计划、目录血缘和版本管理等功能。通过 Dinky，用户可以更高效地进行实时数据处理和分析。 2. 项目快速启动环境准备 JDK 1.8 ...

实时即未来，大数据项目车联网之驾驶行程采样入库【十五】

Maynor的博客

01-17

428

l 15分钟划分一个行程是通过采样数据，进行t检验和f检验得出的结果，因此，此处样本数据采集，在确定之前是分别有A（5min）、B（10min）、C（15min）、D（20min），所以样本计算在确定窗口时间之前，应分别设置窗口时间为5、10、15、20分钟。u 获取到每条数据的soc、mileage（累计里程）、speed（车速）、gps（经度+维度）、terminalTime（终端时间）字段，然后将各自字段各自拼接到一个字符串变量中。l 驾驶行程数据筛选入库，为第五节的行程指标采样分析的数据。

FFA 2022 收官总结｜活动报告出炉，实时即未来！

Ververica的博客

12-05

298

作为开源大数据领域的顶级峰会，Flink Forward 集结了无数优秀的行业实践和领先的技术动态，始终拥抱未来。2022 年 11 月 27 日，第五届 Flink Forward Asia 大会 —— Flink Forward Asia 2022 完美收官。此次 FFA 2022 由阿里云计算平台事业部主办，美的、米哈游、Disney 、字节跳动、运满满、美团、快手、蔚来汽车等全球 40+ ...

Dinky为大数据框架Flink提供交互式平台，让你学习 FlinkSQL 更加轻松，并且掌握Flink技能！

qq_45746668的博客

01-15

1521

Dinky 是一个开箱即用的一站式实时计算平台，以 Apache Flink 为基础，连接 OLAP 和数据湖等众多框架，致力于流批一体和湖仓一体的建设与实践。

dinky提交flink

01-03

### 使用 Dinky 提交 Flink 作业 #### 配置环境为了通过 Dinky 平台提交 Flink 作业，需先配置好运行环境。这包括安装并启动 Dinky 服务端和客户端工具，并确保这些组件能够访问所需的 Flink 版本和支持的数据源[^1]。 #### 创建新项目或打开已有项目登录到 Dinky 用户界面后，在界面上创建一个新的项目或者选择已有的项目来准备提交新的 Flink 作业。此过程允许用户定义项目的名称和其他元数据属性[^2]。 #### 编写 Flink SQL 或上传 JAR 文件对于基于 SQL 的作业，可以在内置编辑器内编写标准的 Flink SQL 查询；而对于更复杂的逻辑，则可以通过上传预先编译好的 Java/Scala 应用程序 (JAR文件) 来实现自定义处理流程。值得注意的是，Dinky 对于这两种类型的作业都提供了良好的支持。 #### 设置执行参数无论是哪种形式的任务，都需要指定一些必要的执行选项，比如输入输出路径、资源分配比例等。特别是当涉及到多个不同版本的 Flink 实例共存的情况下，还可以利用 Dinky 所提供的多版本管理特性来进行精确控制。 #### 发布与监控作业完成上述准备工作之后，点击相应的按钮即可触发实际的提交动作。一旦成功发送给目标集群节点，就可以立即查看当前状态以及其他相关信息了——例如进度条更新、性能指标统计图表等等。此外，如果遇到任何错误情况，也可以方便地获取详细的诊断报告以便快速定位问题所在。 ```bash # 示例命令行操作用于说明如何使用CLI方式提交任务(假设已经设置了正确的环境变量) dinky-cli submit-job --project my_project_name --job-type sql --sql-file /path/to/sql/query.sql ```