hadoop

【大数据进阶第二阶段之Hadoop学习笔记】Hadoop 运行环境搭建

大数据

【大数据进阶第二阶段之Hadoop学习笔记】Hadoop 运行环境搭建

本文介绍: （1）使用 yum 安装需要虚拟机可以正常上网，yum 安装前可以先测试下虚拟机...

12 月前 6

大数据

大数据- Hadoop入门

本文介绍: Hadoop是一个对大量数据进行分布式处理的。目录 🐶2.1 hadoop的简...

12 月前 2

毕设：《基于hive的音乐数据分析系统的设计与实现》

互联网

毕设：《基于hive的音乐数据分析系统的设计与实现》

本文介绍: dd 文章目录环境启动一、爬取数据 1.1、歌单信息 1.2、每首歌前20条...

1 年前 6

【Hadoop_01】Hadoop介绍与安装

互联网

【Hadoop_01】Hadoop介绍与安装

本文介绍: Hadoop解决两件事情：海量数据的存储（使用HDFS）和海量数据的计算（使用M...

1 年前 5

PySpark开发环境搭建常见问题及解决

互联网

PySpark开发环境搭建常见问题及解决

本文介绍: 版本与Hadoop集群版本不匹配。，并配置了环境变量，但未将。目录中（重启电脑才...

1 年前 3

互联网

Hive的使用技巧

本文介绍: 注意：用户自定义配置会覆盖默认配置。另外，Hive也会读入Hadoop的配置，因...

1 年前 4

互联网

Hadoop的介绍与安装

本文介绍: HDFS是一个分布式文件系统：引入存放文件元数据信息的服务器Namenode和实...

1 年前 5

apache

Apache Sqoop使用

本文介绍: Apache Sqoop 是在 Hadoop 生态体系和 RDBMS 体系之间传...

1 年前 4

互联网

1-Hadoop原理与技术

本文介绍: 题目3：ResourceManager负责监控ApplicationMaster...

1 年前 7

互联网

Hadoop YARN组件

本文介绍: 这样，不同的应用程序就可以共享这些资源了。YARN，即Yet Another R...

1 年前 3

Hadoop进阶学习—MapReduce分布式计算架构

互联网

Hadoop进阶学习—MapReduce分布式计算架构

本文介绍: mapreduce底层原理,需要理解并融会贯通 1.单词统计流程(文字简单描述)...

1 年前 3

Linux修改hadoop配置文件及启动hadoop集群详细步骤

linux

Linux修改hadoop配置文件及启动hadoop集群详细步骤

本文介绍: pwd。目录一、配置Hadoop环境 1.查看Hadoop解压位置 2.配置...

1 年前 2

搭建部署Hadoop2.x和3.x的区别

互联网

搭建部署Hadoop2.x和3.x的区别

本文介绍: NameNode (NN) 端口：在Hadoop 2.x中，NameNode的默...

1 年前 3

ERROR org.apache.hadoop.hdfs.server.namenode.FSImage: Failed to load image from FSImageFile(file=/op

apache

ERROR org.apache.hadoop.hdfs.server.namenode.FSImage: Failed to load image from FSImageFile(file=/op

本文介绍: 学习中遇到的坑错误原因由于在启动大数据集群时，电脑突然卡机（完全卡死），然后...

1 年前 9

Hadoop——分布式存储HDFS

互联网

Hadoop——分布式存储HDFS

本文介绍: 分布式存储 HDFS集群环境部署 VMware虚拟机中部署一、https://...

1 年前 4

Apache Hadoop: Building a Big Data Distributed Environm

apache

Apache Hadoop: Building a Big Data Distributed Environm

本文介绍: 作者：禅与计算机程序设计艺术 1.简介Apache Hadoop (以下简称HD...

1 年前 4

大数据

大数据-hive

本文介绍: hive是基于的一个工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和...

1 年前 4

八、hdfs文件系统副本块数量的配置

互联网

八、hdfs文件系统副本块数量的配置

本文介绍: 【代码】八、hdfs文件系统副本块数量的配置。 1、配置方式 2、实际操作演示 ...

1 年前 1

2/4 上一页 1 2 3 4 下一页