全部 大数据新闻动态 大数据技术文章 大数据常见问题 技术问答

• • 

    如何选择好的大数据培训机构？

    目前来说大数据培训机构太多了，各种各样的都有，不过水平怎么样就很少有人知道。那么如何挑选靠谱的培训机构呢?传智播客为大家总结了几点： 查看全文>>

    大数据技术文章2018-12-12 |传智播客 |大数据培训,大数据,大数据培训机构

  • 

    hbase数据库介绍

    hbase是bigtable的开源java版本。是建立在hdfs之上，提供高可靠性、高性能、列存储、可伸缩、实时读写nosql的数据库系统。 查看全文>>

    大数据技术文章2018-11-26 |传智播客 |传智播客,大数据

  • 

    大数据离线阶段我们应该学习的是模块开发的结果导出

    MySQL，Oracle到Hadoop的HDFS，并从Hadoop的文件系统导出数据到关系数据库。由Apache软件基金会提供。 Sqoop：“SQL 到 Hadoop 和 Hadoop 到SQL”。 查看全文>>

    大数据技术文章2018-11-16 |传智播客 |大数据,Scala

  • 

    学好Zookeeper Java API是大数据基础加强的必修

    Zookeeper 是在 Java 中客户端主类，负责建立与 zookeeper 集群的会话， 并提供方法进行操作。 org.apache.zookeeper.Watcher 查看全文>>

    大数据技术文章2018-11-16 |传智播客 |Zookeeper,大数据

  • 大数据离线阶段Day8之MapReduce工作机制详解

    整个Map阶段流程大体如上图所示。简单概述：input File通过split被逻辑切分为多个split文件，通过Record按行读取内容给map(用户自己实现的)进行处理，数据被map处理结束之后交给OutputCollector收集器，对其结果key进行分区(默认使用hash分区)，然后写入buffer，每个map task都有一个内存缓冲区，存储着map的输出结果，当缓冲区快满的时候需要将缓冲区的数据以一个临时文件的方式存放到磁盘，当整个map task结束后再对磁盘中这个map task产生的所有临时文件做合并，生成最终的正式输出文件，然后等待reduce task来拉数据。 查看全文>>

    大数据技术文章2018-10-24 |传智播客 |传智播客,大数据

  • 

    面试题之趣味逻辑题

    1.给定a、b两个文件，各存放50亿个url，每个url各占64字节，内存限制是4G，让你找出a、b文件共同的url? 查看全文>>

    大数据技术文章2018-10-24 |传智播客 |传智播客,大数据

  • 

    面试题之hadoop相关

    首先map task会从本地文件系统读取数据，转换成key-value形式的键值对集合 　　使用的是hadoop内置的数据类型，比如longwritable、text等 查看全文>>

    大数据技术文章2018-10-24 |传智播客 |传智播客,大数据，hadoop

  • 

    Scala编译器安装

    1.1. 安装JDK 因为Scala是运行在JVM平台上的，所以安装Scala之前要安装JDK。 查看全文>>

    大数据技术文章2018-09-30 |传智播客 |大数据,Scala

  << < 1 ... 29 30 31 32 33 34 35 36 37 38 > >>