4.RDD操作
2022/3/21 23:31:15
本文主要是介绍4.RDD操作,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!
一、 RDD创建
- 从本地文件系统中加载数据创建RDD将本地文件TextOne.txt中的数据导入RDD中
2.从HDFS加载数据创建RDD
启动hdfs
上传文件
查看文件
加载
停止hdfs
- 通过并行集合(列表)创建RDD
输入列表
字符串
numpy生成数组
二、 RDD操作
1.转换操作
map(func)显式定义函数lambda函数
filter(func)
显式定义函数
lambda函数
2.行动操作
foreach(print)
foreach(lambda a:print(a.upper())
collect()
这篇关于4.RDD操作的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!
- 2024-09-28微服务架构中API版本控制的实践
- 2024-09-28AI给的和自己写的Python代码,都无法改变输入框的内容,替换也不行
- 2024-09-27Sentinel配置限流资料:新手入门教程
- 2024-09-27Sentinel配置限流资料详解
- 2024-09-27Sentinel限流资料:新手入门教程
- 2024-09-26Sentinel限流资料入门详解
- 2024-09-26Springboot框架资料:初学者入门教程
- 2024-09-26Springboot框架资料详解:新手入门教程
- 2024-09-26Springboot企业级开发资料:新手入门指南
- 2024-09-26SpringBoot企业级开发资料新手指南