HDFS

@Author : By Runsen @Date : 2020/6/20 在一月到四月都没怎么写博客,因为决定写书,结果出书方说大学生就是一个菜鸟,看我确实还是一个菜鸟,就更新到博客算了。 我把第九章更新到博客上。 文章目录 9、大数据Hadoop框架 9.2.3 Python API 9.2.4 Java API 9、大数据Hadoop框架 9.2.3 Python API 在Python中,...

特别声明: 版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

  • <a target=甘特图怎么制作更方便?甘特图制作方法" title="甘特图怎么制作更方便?甘特图制作方法" width="200" height="150">

    [置顶]甘特图怎么制作更方便?甘特图制作方法

    甘特图 2025-03-31

    本文关于甘特图怎么制作更方便?甘特图制作方法。其实现在制作甘特图的方式有多种多样,可以直接使用表格的方式来制作,或者是使用一些线上工具来制作甘特图都是可以的。今天针对于甘特图制作方式给大家详细的分享一...

  • <a target=OKR的实施标准步骤是什么?成功实施落地OKR的要点" title="OKR的实施标准步骤是什么?成功实施落地OKR的要点" width="200" height="150">

    [置顶]OKR的实施标准步骤是什么?成功实施落地OKR的要点

    OKR管理 2025-03-31

    本文关于okr的实施标准步骤是什么?成功实施落地OKR的要点。其实有关于Okr工作法,相信很多人都有一定的了解。OKR定义为一个重要的思维框架和一个发展中的学科,旨在确保员工一起工作,并专注于做出可衡...

  • 三、<a target=HDFS中的Python 和JavaAPI" title="三、HDFS中的Python 和JavaAPI" width="200" height="150">

    三、HDFS中的Python 和JavaAPI

    所有内容 2025-04-05

    @Author : By Runsen @Date : 2020/6/20 在一月到四月都没怎么写博客,因为决定写书,结果出书方说大学生就是一个菜鸟,看我确实还是一个菜鸟,就更新到博客算了。 我把第九...

  • <a target=HDFS系列(4) | HDFS文件读写流程" title="HDFS系列(4) | HDFS文件读写流程" width="200" height="150">

    HDFS系列(4) | HDFS文件读写流程

    所有内容 2025-04-04

    本片博文,博主为大家带来的是HDFS文件读写流程 目录 1. HDFS的文件写入过程 2. HDFS的文件读取过程 1. HDFS的文件写入过程 详细步骤解析: 1、 client发起文件上传请求,通...

  • 从<a target=HDFS写入和读取中,我们能学习到什么" title="从HDFS写入和读取中,我们能学习到什么" width="200" height="150">

    HDFS写入和读取中,我们能学习到什么

    所有内容 2025-04-01

    最近开发过程涉及了一些和文件读取有关的问题,于是对hdfs的读取机制感到兴趣,顺便深入学习了1下。 写入 客户端向NameNode发出写文件请求,告诉需要写的文件名和路径、用户 NameNode检查是...

  • <a target=HDFS可靠性是如何实现的" title="HDFS可靠性是如何实现的" width="200" height="150">

    HDFS可靠性是如何实现的

    所有内容 2025-04-01

    四个组件的可靠性与NN主备机制: JN(日志节点),Zookeeper,NameNode主备部署(HA机制),数据存储三副本; 修改:editlog实际上是NN节点生成上传,JN什么都不做,只做存储使...

  • <a target=HDFS系列(1) | HDFS文件系统的简单介绍" title="HDFS系列(1) | HDFS文件系统的简单介绍" width="200" height="150">

    HDFS系列(1) | HDFS文件系统的简单介绍

    所有内容 2025-04-01

    在Hadoop分布式环境搭建(简单高效~)这篇博客中,博主在最后为大家带来了HDFS的初体验。但是当时只是尝试测试一下集群是否有错误,因此,本篇博文为大家带来 HDFS的文件系统介绍。 在介绍文件系统...

  • <a target=HDFS基本原理" title="HDFS基本原理" width="200" height="150">

    HDFS基本原理

    所有内容 2025-03-31

    HDFS HDFS是 Hadoop Distribute File System的缩写,是谷歌GFS分布式文件系统的开源实现,Apache Hadoop的一个子项目,HDFS基于流数据访问模式的分布式...

  • <a target=掌握HDFS2的新特性:HA和Federation" title="掌握HDFS2的新特性:HA和Federation" width="200" height="150">

    掌握HDFS2的新特性:HA和Federation

    所有内容 2025-03-31

    一、HDFS的新特性HA (一)HDFS的HA机制 Hadoop 2.2.0 版本之前,NameNode是HDFS集群的单点故障点,每一个集群只有一个NameNode ,如果这个机器或者进程不可用,整...

  • 搭建HDFS的HA环境(HBase安装及配置,启动)

    搭建HDFS的HA环境(HBase安装及配置,启动)

    所有内容 2022-05-30

    1、在软件包所在目录解压Hbase压缩包 [root@win1 soft]# tar -zxvf hbase-1.3.2-bin.tar.gz [root@win1 soft]# ls hadoop-...

  • FusionInsight MRS HDFS 细粒度锁优化实践

    FusionInsight MRS HDFS 细粒度锁优化实践

    所有内容 2022-05-30

    背景 HDFS依赖NameNode作为其元数据服务。NameNode将整个命名空间信息保存在内存中提供服务。读取请求(getBlockLocations、listStatus、getFileInfo)...

  • HDFS 命令:管理 HDFS 的 Hadoop Shell 命令

    HDFS 命令:管理 HDFS 的 Hadoop Shell 命令

    所有内容 2022-05-30

    HDFS 命令 在我之前的博客中,我已经讨论过什么是 HDFS、它的特性和架构。第一步是执行 HDFS 命令并探索 HDFS 的工作原理。在本博客中,我将讨论您可以使用哪些 HDFS 命令访问 Had...