分类：数据平台

hive日期函数

hive基础操作

Hive提供了丰富的日期处理函数，以下是一些常用且重要的日期函数分类整理：一、获取当前时间 -- 当前日期和时间（Timestamp格式） SELECT current_timestamp(); -- 2024-01-15 10:30:45.123 -- 当前日期（Date格式） SELECT

doris安装配置

1. 环境准备安装Java环境可以安装开源版本也可以去oracle官网下载bin包 Doris 3.0+ 不再支持 Java 8，必须使用 Java 17 wget https://mirrors.tuna.tsinghua.edu.cn/Adoptium/17/jdk/x64/linux/Op

datax

DataX 是阿里巴巴开源的一款异构数据源离线同步工具，支持多种数据源之间的高效数据同步。在 Ubuntu 系统上安装 DataX 主要包括以下几个步骤：一、前提条件安装 Java（JDK 1.8 或以上）安装git 安装 Maven（用于编译，可选，如果直接使用官方打包好的版本则不需要）二

hive安装部署

环境准备 1. 前置条件 Hadoop集群：Hadoop 3.2.4（已正常启动） Java：JDK 8 数据库：MySQL（用于存储元数据） 2. 下载Hive wget https://archive.apache.org/dist/hive/hive-3.1.3/ap

hadoop

环境准备 1. 系统要求当前环境和版本： ubuntu24 hadoop-3.2.4 2. 安装必要的软件包：jdk和系统依赖 jdk可以从oracle官网下载，也可以使用linux安装openjdk，

Spark

exector内存模型： spark执行器包含了堆内存、堆外内存和内存三部分组成。堆内存：存储内存（Storage Memory）：作用：主要用于缓

flink

好的，Flink 的 Barrier（屏障）是其**容错机制的核心**，特别是实现分布式一致性快照的基石。理解 Barrier 是理解 Flink 如何保证“精确一次”语义的关键。 --- ### 一、Barrier 是什么？简单比喻：想象一个游乐场的过山车，管理人员想在某一精确时刻为所有

dolphin

一、环境准备系统要求 JDK 1.8：需配置 JAVA_HOME 环境变量。 MySQL 5.7：用于持久化元数据（避免默认 H2 数据库重启丢失数据），本文使用的mysql5.7。 MySQL驱动：使用 mysql-connector-java-5.1.49-bin.jar（注意：部分版本存在