标签：Spark

2022-03-07阅读(258)赞(0)

一、安装Spark 检查基础环境hadoop,jdk                　　2.下载spark 　　        　　3.配置文件 　　配置环境 　　vim /usr/local/spark/conf/spark-env.sh...

2022-03-07阅读(266)赞(0)

一、安装Spark 检查基础环境hadoop,jdk       下载Spark         二.Python编程练习：英语文本的词频统计 源代码 # 导入模块 # 导入字符串模块 import string # 2读取文件，并分词 l...

2022-03-07阅读(264)赞(0)

一、Spark的安装 1、安装结果 2、Spark的环境配置 3、运行 4、测试 二、Python练习 1、代码截图 2、运行结果 3、源码 import string file1 = open(\'C:/Users/Administrat...

2022-03-07阅读(236)赞(0)

一、安装Spark 1.检查基础环境hadoop,jdk     2.配置文件 vim /usr/local/spark/conf/spark-env.sh     3.环境配置 gedit ~/.bashrc   4.试运行Python代...

2022-03-07阅读(288)赞(0)

一、安装Spark 1、检查基础环境hadoop,jdk 2、下载spark 3、解压，文件夹重命名、权限 4、配置文件  配置spark的classpath $ cd /usr/local/spark $ cp ./conf/spark-...

2022-03-07阅读(239)赞(0)

一、安装Spark 检查基础环境hadoop,jdk 配置文件 环境变量 试运行Python代码     二、Python编程练习：英文文本的词频统计 准备文本文件 读文件 预处理：大小写，标点符号，停用词 分词 统计每个单词出现的次数 按...

2022-03-07阅读(249)赞(0)

一、安装并配置Spark 1.首先检查一下java和hadoop的环境 2.下载spark 3.解压spark安装包，对文件夹重命名，复制配置文件 4.对配置文件进行修改 1.对/usr/local/spark/conf/spark-env...

2022-03-07阅读(238)赞(0)

一、安装Spark 检查基础环境hadoop,jdk 下载spark 解压，文件夹重命名、权限 配置文件 环境变量 试运行Python代码          二、Python编程练习：英文文本的词频统计 准备文本文件 读文件 预处理：大小写...

2022-03-07阅读(238)赞(0)

1、检查基础环境hadoop,jdk 　　启动hdfs查看进程       2、下载spark（已完成，略） 3、解压，文件夹重命名、权限（已完成，略） 4、配置文件（已完成，略） 5、环境变量   6、试运行Python代码 二、Pyth...