全部 大数据新闻动态 大数据技术文章 大数据常见问题 技术问答

• • 

    HBase表常见Shell命令及具体语法操作讲解【大数据文章】

    Shell命令可以很方便地操作HBase数据库，例如创建、删除及修改表、向表中添加数据、列出表中的相关信息等操作。不过当使用Shell命令行操作HBase时，首先需要进入HBase Shell交互界面,通过一系列Shell命令操作HBase，接下来，通过一张表列举一些操作HBase表常见的Shell命令。 查看全文>>

    大数据技术文章2020-11-17 |传智播客 |常见的Shell命令具体是怎样操作的

  • 

    HDFS的高可用架构是怎样工作的?

    在Hadoop1.0版本中，NameNode只有一个，一旦这个NameNode发生故障，就会导致整个Hadoop集群不可用，也就是发生了单点故障问题。为了解决单点故障问题，Hadoop2.0中的HDFS中增加了对高可用的支持。 查看全文>>

    大数据技术文章2020-11-12 |传智播客 |HDFS高可用架构

  • 

    Combiner组件创建和使用演示【大数据文章】

    Combiner组件是MapReduce程序中的一种重要的组件，如果想自定义Combiner，我们需要继承Reducer类，并且重写reduce()方法。接下来，我们针对词频统计案例编写一个Combiner组件，演示如何创建和使用Combiner组件 查看全文>>

    大数据技术文章2020-11-12 |传智播客 |Combiner组件

  • 

    MapReduce程序在本地运行的模式怎样设置？

    MapReduce程序的运行模式主要有两种：本地运行模式和集群运行模式，集群运行模式只需要将MapReduce程序打成Jar包上传至集群即可，比较简单，这里不再赘述。下面我们以词频统计为例，讲解如何将MapReduce程序设置为在本地运行模式。 查看全文>>

    大数据技术文章2020-11-05 |传智播客 |MapReduce本地运行的模式设置

  • 

    Mapper类中的map()方法怎么用？

    MapReduce程序会根据输入的文件产生多个map任务。Hadoop提供的Mapper类是实现Map任务的一个抽象基类，该基类提供了一个map()方法，默认情况下，Mapper类中的map()方法是没有做任何处理的。 查看全文>>

    大数据技术文章2020-11-04 |传智播客 |Mapper类中的map()方法怎么用

  • 

    InputFormat接口的定义代码怎么设置？

    Hadoop中有五个编程组件，分别是：InputFormat、Mapper、Reducer、Parttioner、OutputFromat和Canbiner，其中Canbiner的作用是对Map阶段的输出的重复数据先做一次合并计算，所以不属于必属件。本节课就来对MapReducer的InputFormat组件做一个简单介绍 查看全文>>

    大数据技术文章2020-11-03 |传智播客 |InputFormat接口的定义代码设置

  • 

    Watch机制的显著特点有哪些？Watch简介

    在ZooKeeper中，引入了Watch机制来实现这种分布式的通知功能。ZooKeeper允许客户端向服务端注册一个Watch监听，当服务端的一些事件触发了这个Watch，那么就会向指定客户端发送一个事件通知，来实现分布式的通知功能。Watch机制在事件中有以下4个特点： 查看全文>>

    大数据技术文章2020-11-03 |传智播客 |Watch机制简介

  • 

    Znode储存结构是怎样的？节点类型有几种？

    Zookeeper的底层是一套数据储存结构，其中的节点，我们称之为znode。Zookeeper中数据存储的结构和标准文件系统非常类似，拥有一个层次的命名空间，也是使用斜杠(/)进行分割，两者都是采用树形层次结构。不同的是，标准文件系统是由文件夹和文件来组成的树，而Zookeeper是由什么来组成的树呢?下面我们来看一下Zookeeper数据存储结构 查看全文>>

    大数据技术文章2020-11-03 |传智播客 |Znode的储存结构和节点类型

  << < 1 ... 7 8 9 10 11 12 13 ... 38 > >>