搜索结果
查询Tags标签： 练习，共有 803条记录-
安装Spark与Python练习
一、安装Spark 检查基础环境hadoop,jdk 下载Spark二.Python编程练习：英语文本的词频统计 源代码# 导入模块 # 导入字符串模块 import string# 2读取文件，并分词 list_dict = {} # 创建一个空字典，放词频与单词，无序排列 data = [] # 创建一个空列表，放词频与单词，…
2022/3/6 22:15:04 人评论 次浏览 -
2.安装Spark与Python练习
一、安装Spark 1.检查基础环境hadoop,jdk 2.下载spark 在之前实验已下载安装 3.解压，重命名，权限 在之前实验已完成 4.配置文件 5.环境变量 6.试运行Python代码 二、Python编程练习：英文文本的词频统计 1.准备文本文件 2.读文件path=/home/hadoop/test.txt with open(p…
2022/3/6 20:15:47 人评论 次浏览 -
2.安装Spark与Python练习
一、安装Spark环境配置： 启动spark： 试运行python代码： 二、Python编程练习：英文文本的词频统计准备文本文件 读文件 预处理：大小写，标点符号，停用词 分词 统计每个单词出现的次数 按词频大小排序 结果写文件 思路：先读取文件文本内容，使用循环将内容中的每一个…
2022/3/6 20:15:42 人评论 次浏览 -
2.安装Spark与Python练习
一、安装Spark 检查基础环境hadoop,jdk配置文件试运行Python代码二、Python编程练习：英文文本的词频统计 准备文本文件：heal-the-world.txt点击查看代码 Theres a place in your heartAnd I know that it is loveAnd this place could be much brighter than tomorrowAn…
2022/3/6 20:15:31 人评论 次浏览 -
2.安装Spark与Python练习
1、检查基础环境hadoop,jdk启动hdfs查看进程 2、下载spark（已完成，略） 3、解压，文件夹重命名、权限（已完成，略） 4、配置文件（已完成，略） 5、环境变量 6、试运行Python代码二、Python编程练习：英文文本的词频统计 1、准备文本文件2、读文件path=/home/hadoop/w…
2022/3/6 20:15:26 人评论 次浏览 -
2.安装Spark与Python练习
一、安装Spark 1.检查基础环境hadoop,jdk 2.下载spark （已完成，略过） 3.解压，文件夹重命名、权限 （已完成，略过） 4.配置文件 （已完成，略过） 5.环境变量 6.试运行Python代码二、Python编程练习：英文文本的词频统计 1.准备文本文件2.读文件path=/home/hadoop/lh.…
2022/3/6 20:15:24 人评论 次浏览 -
安装Spark与Python练习
一、安装Spark检查基础环境hadoop,jdk 下载spark 解压，文件夹重命名、权限 配置文件 环境变量 试运行Python代码1.jdk、hadoop环境 2.spark环境二、Python编程练习：英文文本的词频统计准备文本文件 读文件 预处理：大小写，标点符号，停用词 分词 统计每个单词出现的次数…
2022/3/6 20:15:21 人评论 次浏览 -
2.安装spark与python练习
二：Python编程练习：英文文本的词频统计 1.准备文本文件 2.读文件 预处理：大小写，标点符号，停用词，分词，统计每个单词出现的次数 ，按词频大小排序def get_text(file_name):with open(file_name,r,encoding=utf-8) as fr:text = fr.read()text = text.lower()#注…
2022/3/6 20:15:19 人评论 次浏览 -
2.安装Spark与Python练习
一、安装Spark 1、检查基础环境hadoop,jdk2、下载spark （省略，原来已下好）3、解压，文件夹重命名、权限 （省略，原来已下好）4、配置文件 5、环境变量6、试运行Python代码 试运行spaark python命令测试二、Python编程练习：英文文本的词频统计 1、准备文本文件 2、读文…
2022/3/6 20:15:17 人评论 次浏览 -
2.安装Spark与Python练习
一、安装Spark 1.检查基础环境hadoop,jdk 2.下载spark （已完成，略过） 3.解压，文件夹重命名、权限 （已完成，略过） 4.配置文件 （已完成，略过） 5.环境变量 6.试运行Python代码 二、Python编程练习：英文文本的词频统计 1.准备文本文件 2.读文件path=/home/hadoop/…
2022/3/6 20:15:12 人评论 次浏览 -
安装Spark与Python练习
一、安装Spark检查基础环境hadoop,jdk2.下载spark 二、Python编程练习：英文文本的词频统计 1、准备文本（f1.txt） Please send this message to those people who mean something to you,to those who have touched your life in one way or another,to those who make …
2022/3/6 14:51:30 人评论 次浏览 -
2.安装Spark与Python练习
基础环境—环境准备检查下载安装文件安装文件配置相关文件配置环境变量 运行pyspark在pyspark中运行代码统计词频
2022/3/6 12:46:28 人评论 次浏览 -
2.安装Spark与Python练习
一、安装Spark 检查基础环境hadoop,jdk 下载spark配置相关文件配置环境变量 启动spark并运行python代码def load_file(word_freq): # 读文件到缓冲区try: # 打开文件f = open(intext, r)except IOError as s:print(s)return Nonetry: # 读文件到缓冲区bvff…
2022/3/6 9:15:03 人评论 次浏览 -
2.安装Spark与Python练习
一、安装Spark 1.检查基础环境hadoop,jdk 2.配置文件 3.配置环境变量 4.运行spark 5.运行spark 二、Python编程练习：英文文本的词频统计 1.准备文本文件 2.编写代码3.运行结果三、根据自己的编程习惯搭建编程环境 配置pycharm 运行
2022/3/6 1:45:13 人评论 次浏览 -
2.安装Spark与Python练习
一、安装Spark检查基础环境hadoop,jdk 下载spark 解压，文件夹重命名、权限 配置文件 环境变量 试运行Python代码 二、Python编程练习：英文文本的词频统计准备文本文件 读文件 预处理：大小写，标点符号，停用词 分词 统计每个单词出现的次数 按词频大小排序 结果写文…
2022/3/5 17:15:29 人评论 次浏览
