Logo

Menu

青云博客 记录、分享

All Tags

#WinSW 1 #Drools 1 #MQTT 3 #消息中间件 33 #langchain4j 10 #spring-AI 0 #Jasypt 1 #superset 1 #deepseek 5 #面试题 20 #Python爬虫 1 #leetcode 11 #epoll 1 #jenkins 2 #rocketmq 15 #Python基础 1 #ShardingSphere 0 #分库分表 0 #GPT 1 #架构 6 #minio 1 #k8s 0 #dubbo 8 #nginx 0 #elasticsearch 12 #springcloud 24 #数据结构和算法 28 #设计模式 9 #jvm 24 #spring 28 #mybatis 22 #redis 18 #mysql 60 #springboot 11 #seata 1 #linux 4 #itext 1 #datax 1 #flume 2 #kafka 5 #hbase 2 #zookeeper 17 #spark 5 #hive 4 #docker 3 #hadoop 2 #杂文 3 #java 273
Hadoop HA高可用分布式集群搭建
大数据 #hadoop

Hadoop HA高可用分布式集群搭建

本文主要介绍hadoop3.0 HA高可用分布式集群搭建过程，该文章是博主多次实践后而写，亲测有效！！！ 需要的朋友可以按照这个步骤来搭建自己的环境～～ 一、安装整体架构

詹学伟 Published on 2025-07-21
AI + Hadoop实战：上传本地文件到HDFS并通过Mapreduce实现WordCount功能
人工智能 #hadoop#langchain4j#java

AI + Hadoop实战：上传本地文件到HDFS并通过Mapreduce实现WordCount功能

今天要实现的功能是：通过langchian4j的函数调用，实现上传本地文件到HDFS文件系统，同时执行Mapreduce程序，完成WordCount功能，最后读取单词统计结果。 扩展：这里还可以调用咱们的sql的Tool，可以将结果存入数据库等操作～～ 一、搭建大数据环境 搭建过程就不多说了，步骤比

詹学伟 Published on 2025-06-20