2022年09月的文章 第2页
大数据随记 —— Hive 安装-繁依Fanyi
大数据系列文章: 目录 文章目录 一、安装 Hive二、启动并使用 Hive 一、安装 Hive ① 使用 Xftp 将 Hive 安装包上传到 虚拟机目录下。 ② 解压 Hive 安装包 tar -zxvf apache-hive-1.2.1-bin.t...
操作系统的发展-繁依Fanyi
操作系统系列文章: 目录 文章目录 一、手工处理阶段1. 人工操作方式1.1 概述1.2 缺点 2. 脱机输入/输出(Offline I/O)方式2.1 概述2.2 优点 二、批处理阶段1. 单道批处理系统1.1 概述1.2 特征...
大数据随记 —— Hadoop 环境搭建-繁依Fanyi
大数据系列文章:👉 目录 👈 文章目录 一、虚拟机环境准备1. 虚拟机网络模式设置为 NAT2. 克隆虚拟机3. 修改虚拟机为静态 IP4. 修改主机名5. 关闭防火墙6. 设置 ssh 免密码登录(只在 Master 这...
问题随记 —— org.apache.hadoop.io.LongWritable cannot be cast to org.apache.hadoop.io.IntWritable-繁依Fanyi
文章目录 问题描述解决方法 问题描述 Hadoop 运行 jar 包出现以下问题 22/09/03 00:34:34 INFO mapreduce.Job: Task Id : attempt_1662133271274_0002_m_000000_1, Status : FAILED Error: java...
大数据随记 —— DataFrame 与 RDD 之间的相互转换-繁依Fanyi
大数据系列文章: 目录 文章目录 ① 通过反射获取 RDD 内的 Scheme② 通过编程接口执行 Scheme 在 Spark SQL 中有两种方式可以在 DataFrame 和 RDD 中进行转换: ① 利用反射机制,推导包含某种...