大数据处理之Dinky篇

发布时间:2026/11/8 22:40:39

大数据处理之Dinky篇 官网地址 Dinky 是一个开箱即用的一站式实时计算平台,以 Apache Flink 为基础,连接数据湖仓等众多框架,致力于流批一体和湖仓一体的建设与实践。一、安装部署1、linux单机安装Dinky1.1、下载 点击gitee下载地址比官网下载快10倍1.2、引入jar包阿里云仓库服务A、下载/拷贝对应版本flink的lib/*.jar到/juxin/dinky/lib/下 (log4j之类的包不要拷贝,不然会冲突)1. flink-table-runtime-1.19.3.jar2. flink-table-planner-loader-1.19.3.jar3. flink-table-api-java-uber-1.19.3.jar4. flink-scala_2.12-1.19.3.jar5. flink-json-1.19.3.jar6. flink-dist-1.19.3.jar7. flink-csv-1.19.3.jar8. flink-connector-files-1.19.3.jar9. flink-cep-1.19.3.jar提示:复制上述jar至dinky/lib目录时,**不要复制log4j相关jar包**,避免日志冲突。B、flink-table-runtime-1.19.3.jar、flink-table-planner-blink_2.11-1.93.jar没有这两个包会报错Caused by: java.lang.NoClassDefFoundError: org/apache/flink/table/planner/parse/ExtendedParserC、拷贝mysql-connector-j-8.0.33.jar包到/juxin/dinky-release-1.19-1.2.4/lib下1.3、配置文件修改 Dinky 配置文件,选择默认数据源为 mysqlcd /opt/dinky/config/vim application.yml# 修改 Dinky 所使用的数据库类型为 mysqlspring: application: name: Dinky profiles: # The h2 database is used by default. If you need to use other databases, please set the configuration active to: mysql, currently supports [mysql, pgsql, h2] # If you use mysql database, please configure mysql database connection information in application-mysql.yml # If you use pgsql database, please configure pgsql database connection information in application-pgsql.yml # If you use the h2 database, please configure the h2 database connection information in application-h2.yml, # note: the h2 database is only for experience use, and the related data that has been created cannot be migrated, please use it with cautionnbs
延伸阅读

更多相关文章

2026/11/3 3:40:04

TMS320C2xx DSP接口时序设计:从READY到串口通信的硬件实战

1. 项目概述与核心价值 如果你正在设计基于TMS320C2xx系列DSP的嵌入式系统,比如一个电机控制板、音频处理模块或者通信设备,那么你肯定遇到过这样的问题:电路板焊接好了,程序也烧录进去了,但系统就是跑不起来&#xff…

2026/11/8 22:40:38

TI AM273x高性能MCU:异构计算、功能安全与实时信号处理实战解析

1. 项目概述:为什么我们需要AM273x这样的高性能MCU?在工业自动化产线上,一个机械臂需要同时完成视觉识别、轨迹规划和多关节的实时伺服控制;在一辆智能汽车里,一颗前向雷达芯片要在毫秒级时间内处理海量的回波数据&…

2026/11/2 18:57:22

高清图源赋能大疆T40/T100植保作业:精准打药新实践

摘要:高清图源是提升大疆农业 T40/T100 植保无人机作业质量的关键。通过卫星影像等高清底图,无人机能够精准识别地块边界、区分作物长势,从而支撑变量喷洒与精准施药。这不仅能避免传统作业中的重喷、漏喷问题,还能依据作物密度差…

2026/11/8 22:37:39

宝安电工证中心在哪考?证书过期了不知道怎么复审延期

宝安电工证中心在哪考?证书过期了不知道怎么复审延期 证书过期了不知道怎么复审延期,是不是你最近最头疼的事?别急,今天就给你讲清楚怎么在 宝安电工证中心 报名、考试和复审,还有你关心的 在哪考 问题,一网打尽。 为什么电工证不能随便拖?…

2026/11/8 22:37:39

上海 低压电工证到期换证流程

上海低压电工证到期换证流程:怎么避坑?电子证书怎么查? 你是不是正为上海低压电工证到期换证发愁?不知道去哪报名,怕被中介坑?别急,这篇文章帮你理清楚整个流程,教你如何用电子证书快速换证,不花冤枉钱,不走弯路。…

2026/11/8 22:37:39

应城市电工证补办官方回应:实操考试心里没底怕挂科怎么办

应城市电工证补办官方回应:实操考试心里没底怕挂科怎么办 实操考试心里没底怕挂科,这几乎是每一位准备参加应城市电工证补办的学员的真实写照。尤其是已经工作多年的电工,重新补办证书时,面对考核流程、内容和标准的变化,难免会有焦虑。但别担心,官方回…

2026/11/8 22:32:39

室内电梯安装需要特种工证件多少钱?实操考试心里没底怕挂科怎么办

室内电梯安装需要特种工证件多少钱?实操考试心里没底怕挂科怎么办 实操考试心里没底怕挂科?你不是一个人。尤其是像南阳这样的中小施工企业负责人,每次谈到特种作业证,心里都直打鼓。这不仅关系到项目能不能顺利推进,还直接影响到企业安全合规和员工收入…

2026/11/8 0:00:27

电工证丢失还能补吗?千万别踩坑,丢了证等于失业

电工证丢失还能补吗?千万别踩坑,丢了证等于失业 你正在找工作,但手里的电工证突然丢了,这下怎么办?别急,先别慌, 电工证丢失还能补吗 ?答案是肯定的,但 千万别踩坑 ,补办流程如果不了解,可能会耽误你上岗、甚至影响到你的收入。…

2026/11/8 0:00:27

电工证丢失还能补吗?千万别踩坑,丢了证等于失业

电工证丢失还能补吗?千万别踩坑,丢了证等于失业 你正在找工作,但手里的电工证突然丢了,这下怎么办?别急,先别慌, 电工证丢失还能补吗 ?答案是肯定的,但 千万别踩坑 ,补办流程如果不了解,可能会耽误你上岗、甚至影响到你的收入。…

2026/11/7 14:54:47

面向复杂光照与角度的宠物面部识别鲁棒性增强策略

在智慧养宠时代,基于视觉的宠物身份识别技术正逐步从实验室走向家庭应用。然而,与配合度高的人类不同,宠物是典型的“非合作生物识别对象”——它们不会主动配合摄像头调整姿态,更无法控制光照环境。实际应用中,我们常…

2026/11/7 14:50:12

SSM电子书店源码全解析:结构、原理、部署与排错实战

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

还想了解更多?直接咨询顾问

免费诊断 + 免费方案 + 透明报价。

全国咨询热线400-8866-253
免费获取方案
☎咨询二维码 ☎ ↑