首页最新资讯

全部 常见问题 新闻动态 技术文章 技术问答

    • Hadoop高可用集群搭建详细教程【黑马程序员】

      掌握了Hadoop集群中的高可用架构后,接下来,我们来手把手教大家搭建一个Hadoop高可用集群,具体步骤如下:查看全文>>

      技术文章2021-07-26 |黑马程序员 |高可用集群,高可用架构,Hadoop
    • Hive数据分层有哪些优点?具体每一层含义是什么?

      大多数情况下,我们完成的数据体系却是依赖复杂、层级混乱的,因此,我们需要一套行之有效的数据组织和管理方法来让我们的数据体系更有序,这就是谈到的数据分层。数据分层并不能解决所有的数据问题,但是,数据分层却可以给我们带来如下的好处:查看全文>>

      技术文章2021-07-23 |黑马程序员 |Hive数据仓库,Hive安装
    • Combiner操作,Combiner和partition的作用分别是什么?

      combiner其实属于优化方案,由于带宽限制,应该尽量map和reduce之间的数据传输数量。它在Map 端把同一个key的键值对合并在一起并计算,计算规则与reduce一致,所以combiner也可以看作特殊的Reducer。查看全文>>

      技术文章2021-07-20 |黑马程序员 |Combiner的作用,partition的作用
    • Shuffle的工作机制是什么?

      map阶段处理的数据如何传递给reduce阶段,是MapReduce框架中关键的一个流程,这个流程就叫shuffle。本章节内容来看一下shuffle的工作流程和工作机制。查看全文>>

      技术文章2021-07-20 |黑马程序员 |Shuffle的工作机制
    • 什么是线程?线程有几种类型?

      线程由线程ID、当前指令指针(PC)、寄存器集合和堆栈组成,它不能独立拥有系统资源,但它可与同属一个进程的其它线程共享该进程所拥有的全部资源。查看全文>>

      技术文章2021-07-20 |黑马程序员 |什么是线程,线程的分类
    • fork()函数创建进程操作演示

      在Unix/Linux操作系统中,通过Python的os模块中封装的fork()函数可以轻松地创建一个进程。fork()函数的声明如下:查看全文>>

      技术文章2021-07-20 |黑马程序员 |python创建进程
和我们在线交谈!