Hadoop学习笔记-MapReduce(2)-MapReduce序列化 在Hadoop中还存在序列化的概念，存在Writable接口。为了在不同节点之间进行数据传递，必须使得数据能够序列化。这里学习了将自定义类用于键值对中的必要操作。 2022-02-20 大数据 > Hadoop #笔记 #Hadoop #MapReduce
Hadoop学习笔记-MapReduce(1)-MapReduce概述 对MapReduce的基本概述，手动实现Word Count案例，然后分别在本地和在集群上进行测试。了解基于MapReduce框架下的基本编程流程。 2022-02-20 大数据 > Hadoop #笔记 #Hadoop #MapReduce
Hadoop学习笔记-HDFS(3)-HDFS的API操作 可以通过IDEA在本地远程连接到集群，然后通过Java代码对其进行相关的API操作。 2022-02-18 大数据 > Hadoop #笔记 #Hadoop #HDFS
Hadoop学习笔记-HDFS(1)-HDFS概述 Hadoop使用了分布式文件系统HDFS，这里对HDFS进行简单的学习。 2022-02-18 大数据 > Hadoop #笔记 #Hadoop #HDFS
Hadoop学习笔记-入门(3)-编写xsync分发脚本 在完成了hadoop102的安装之后，我们希望将同样的文件夹发送至其他两个服务器中，为此实现xsync脚本来进行内容分发。 2022-02-17 大数据 > Hadoop #笔记 #Hadoop
Hadoop学习笔记-入门(2)-安装JDK环境和Hadoop 在节点hadoop102上安装JDK环境和Hadoop，并完成相应的环境变量配置。 2022-02-17 大数据 > Hadoop #笔记 #Hadoop