Data Warehouse
数据仓库概念数据仓库,英文名称为 Data Warehouse,可简写为 DW 或 DWH。数据仓库,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和决策支持目的而创建。 为需要业务智能的企业,提供指导业务流程改进、监视时间、成本、质量以及控制。
数据仓库之父比尔·恩门(Bill Inmon)在1991年出版的 “Building the Data Warehouse”(《建立数据仓库》)一书中所提出的定义被广泛接受–数据仓库(Data Warehouse)是一个面向主题的(Subject Oriented)、集成的(Integrat...
superset 安装
1. 安装环境要求1.1 操作系统支持
Linux: Ubuntu 20.04+/CentOS 7+/Debian 10+ (推荐)
macOS: macOS 12+ (Monterey) 或更高版本
Windows: Windows 10/11 (推荐使用 WSL2)
云平台: AWS EC2, Google Cloud, Azure VM
1.2 硬件要求
组件
最低配置
推荐配置
CPU
2 核
4-8 核
内存
4GB
8-16GB
磁盘
10GB
50GB+
网络
100Mbps
1Gbps
1.3 软件环境
软件
...
azkaban4.0 编译
1. 环境要求1.1 操作系统要求
Ubuntu 20.04+ / CentOS 7+ / Debian 10+
推荐使用 Ubuntu 22.04 或更高版本
64位操作系统
1.2 Java 环境
必需版本: Java 8 (JDK 1.8) 或 Java 11 (JDK 11)
推荐版本: Java 11 (LTS 版本)
验证命令: java -version 和 javac -version
环境变量:
export JAVA_HOME=/usr/lib/jvm/java-11-openjdk-amd64
export PATH=$JAVA_HOM...
AI
AI
flink1.13.6 编译
Flink-1.13.6编译打包git clone https://github.com/apache/flink.git
cd flink/ &&git checkout release-1.13.6
mvn clean install -DskipTests -Dfast -Dhadoop.version=3.2.2
DolphinScheduler V3集群部署
参考:https://blog.csdn.net/mengxianglong123/article/details/123428420
DolphinScheduler简介DolphinScheduler概述Apache DolphinScheduler是一个分布式、易扩展的可视化DAG工作流任务调度平台。致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。
DolphinScheduler核心架构DolphinScheduler的主要角色如下:
MasterServer 采用分布式无中心设计理念,MasterServer主要负责 DAG 任务切分、任务提交...
Docker版本与安装介绍
Docker版本
Docker-CE:docker 社区版本,由社区维护和提供技术支持,为免费版本,适合个人开发人员和小团队使用
Docker-EE:docker 企业版本,为收费版本,有售后团队和技术团队提供技术支持,专为企业开发和IT团队而设计
此外Docker 的发布版本分别为 Stable 和 Edage 版,区别在于前者是按季度发布的稳定版本(发布慢),后者是按月发布的边缘版(发布快)
通常情况下,Docker-CE 足以满足我们的需求。
Centos7 安装 Docker
安装必要的一下系统工具
[root@docker ~]# yum install -y yum-uti...