首页 > TAG信息列表 > afterwords

2.安装Spark与Python练习

一、安装Spark 1、检查基础环境hadoop,jdk       2、下载spark （省略，原来已下好）   3、解压，文件夹重命名、权限 （省略，原来已下好）   4、配置文件       5、环境变量                   6、试运行Python代码 试运行spaark       python命令测试         二、

安装Spark与python练习

一、安装Spark 基础环境--环境准备检查     安装spark 配置相关文件          查看spark配置    打开spark    在pyspark中运行代码 Python实现英文文本的词频统计 准备文本文件     读文件 txt = open('lol.txt', "r", encoding='UTF-8').read()   预处理

2.安装Spark与Python练习

一、安装Spark 验证截图：    （Spark运行成功）     （基本操作以及简单运算） 二、Python编程练习：英文文本的词频统计   源码： path='/home/hadoop/wc/f1.txt' with open(path) as f: #text read and down text=f.read() text = text.lower() #replace marks