归档 - 青云博客

Spark分布式集群搭建

2024-04-21

大数据 #spark

一、运行环境说明 Spark的运行环境，可以是在windows上，也可以是运行在linux上，一般情况而言都是运行在linux上的。所以，我们课程也是基于linux来运行的，linux使用的Centos7版本。下载地址：https://archive.apache.org/ 二、部署环境

zookeeper分布式安装

2024-04-21

Linux #zookeeper

说明：在安装zookeeper前，请安装好jdk 1、下载连接地址：https://archive.apache.org/dist/zookeeper/zookeeper-3.4.12/zookeeper-3.4.12.tar.gz 2、解压 tar -zvxf zookeeper-3

springboot整合hive

2024-04-21

Linux #hive

1、添加pom依赖  <dependency> <groupId>com.alibaba</groupId> <artifactId>druid-spring-boot-starter</artifactId> <version>1.2.5<

hive建表语句

2024-04-21

大数据 #hive

语法 CREATE TABLE [IF NOT EXISTS] [db_name.]table_name (col_name data_type [COMMENT col_comment],...) [COMMENT table comment] [ROW FORMAT DELIMITED ...

Hive DML语句

2024-04-21

大数据 #hive

1.掌握Hive SQL Load加载数据语句 LOAD DATA [LOCAL]INPATH 'filepath'[OVERWRITE]INTO TABLE tablename; 案例一：（文件存在于hiveserver2节点的服务器本地，该方式通过复制的方式加载数据） load data lo

人的一生应该怎样度过？

2024-04-21

杂文 #个人情感

人生是生命在人间的一次旅行，人生是生命的一段过程，并非生命的终极目标。无论我们的人生坎坷难行，还是顺心如意，人生是非常美好的，短短的几十年时光，是任何财富都难以购买的，失去了，永难挽回。要追求丰富多彩的人生，要勇于体验各种不同的情景，不要怕挫折，不要怕失败，不要怕风险，不要怕逆境，不要怕失去什么

Docker常用命令

2024-04-21

Linux #docker

1、查看各个容器的IP docker inspect --format='{{.Name}} - {{range .NetworkSettings.Networks}}{{.IPAddress}}{{end}}' $(docker ps -aq) 2、启动所有的容器命令

hive安装部署

2024-04-20

Linux #hive

Redis的内存淘汰策略

2024-04-05

数据库 #redis

Redis内存淘汰策略解析一、触发条件当Redis内存达到maxmemory配置阈值时触发淘汰机制（默认不启用）二、8种核心策略 1. 不淘汰策略 noeviction（默认）：拒绝写入新数据，读请求正常响应 2. 全体键淘汰 allkeys-lru：全体键中淘汰最近最少使用的 allkeys

菜单