网站首页 站内搜索

搜索结果

查询Tags标签: spill,共有 1条记录
  • MapReduce源码阅读

    MapReduce运行流程图:个人感悟:maptask中的InputFileReader组件读取的是hdfs中默认的一个block大小的文件,即128M,在mr中一个数据块即为一个split; 环形缓冲区其实为一个连续内存的字节数组,大小默认为100M,达到80%进行磁盘溢写; 从环形缓冲区中溢写出的文件spill都…

    2022/5/10 11:04:32 人评论 次浏览
扫一扫关注最新编程教程