首页最新资讯

全部 常见问题 新闻动态 技术文章 技术问答

    • Flume的运行机制介绍

      Flume原是Cloudera公司提供的一个高可用的、高可靠的、分布式海量日志采集、聚合和传输系统,而后纳人到了Apache旗下,作为一个顶级开源项目。Apache Flume不仅只限于日志数据的采集,由于Flume采集的数据源是可定制的,因此Flume还可用于传输大量事件数据,包括但不限于网络流量数据、社交媒体生成的数据、电子邮件消息以及几乎任何可能的数据源。查看全文>>

      技术文章2021-12-01 |黑马程序员 |Flume运行机制
    • TiDB为什么要进行调度?TiDB调度全流程

      TiKV 集群是 TiDB 数据库的分布式 KV 存储引擎,数据以 Region 为单位进行复制和管理,运行的过程中会出现许多问题,这些问题单独拿出都能找到简单的解决方案,但是混杂在一起就不太好解决,需要从全局角度把控调整,于是出现了PD模块,下面来看调度的基本操作。查看全文>>

      技术文章2021-11-24 |黑马程序员 |TiDB为什么要进行调度
    • 怎样安装和开启Kafka-Eagle?

      Kafka Eagle是一款结合了目前大数据Kafka监控工具的特点,重新研发的一块开源免费的Kafka集群优秀的监控工具。它可以非常方便的监控生产环境中的offset、lag变化、partition分布、owner等。本节我们来学习kafka的安装。查看全文>>

      技术文章2021-11-24 |黑马程序员 |安装和开启Kafka-Eagle
    • requests模块怎样爬取网页?(具体代码演示)

      爬取网页其实就是通过URL获取网页信息,网页信息的实质是一段添加了JavaScript和CSS的HTML代码。Python提供了一个抓取网页信息的第三方模块requests,requests模块自称“HTTP for Humans”,直译过来的意思是专门为人类而设计的HTTP模块,该模块支持发送请求,也支持获取响应。查看全文>>

      技术文章2021-11-19 |黑马程序员 |使用requests模块抓取网页
    • 利用函数实现Pytho对象和JSON数据的相互转换

      利用json模块的dumps()函数和loads()函数可以实现Python对象和JSON数据之间的转换,下面来分别演示两种函数的用法查看全文>>

      技术文章2021-11-17 |黑马程序员 |利用函数实现Pytho对象和JSON数据的相互转换
    • 如何存储与读写不同维度的数据?

      程序中与数据相关的操作分为数据的存储与读写。下面将对如何存储与读写不同维度的数据进行讲解。1.数据存储数据通常存储在文件之中,为了方便后续的读写操作,数据通常需要按照约定的组织方式进行存储。一维数据呈线性排列,一般用特殊字符分隔,具体示例如下。查看全文>>

      技术文章2021-11-17 |黑马程序员 |存储与读写不同维度的数据