刷新
应对复杂架构下的监控挑战?统一运维可观测能力是关键!

博主头像 在全球数字化变革背景下,企业需适应数字经济与市场变化,进行系统性数字化转型。在“十四五”规划指导下,企业纷纷探求数字化应用之路,大数据、云计算、人工智能、区块链等技术成了热门话题,其中云运维备受瞩目。 企业在数字化转型中难免会碰到云上系统规划、运维体系建设、云上安全等挑战,因此用可观测性来改进现有监 ...

保姆级 | MySQL的安装配置教程(非常详细)

博主头像 一、下载Mysql 从官网下载MySQL,这里我选用的是Mysql8.0.34版本 二、安装Mysql 下载完成后直接双击进行安装,打开后的页面如下所示: “Developer Default”是开发者默认 “Server only”仅作为服务器安装 “Clientonly”仅作为客户端安装 “Fu ...

mysql建议单表2000万条数据的由来

Mysql在建表之初就要考虑到他的存储量和性能问题,所以一般Mysql数据库建议单表最大两千万,但是为啥是两千万呢这里我们解释一下,知其然还要知其所以然! 这一块的知识解释起来会涉及一点存储引型的相关知识了这里给提供一个基本概念,但是了解完之后会对InnonDB引型会有一定的了解 数据页相关知识 首 ...

HDFS 重要机制之 checkpoint

博主头像 核心概念 hdfs checkpoint 机制对于 namenode 元数据的保护至关重要, 是否正常完成检查点是评估 hdfs 集群健康度和风险的重要指标 editslog : 对 hdfs 操作的事务记录,类似于 wal ,edit log文件以 edits_ 开头,后面跟一个txid范围段,并 ...

深入解析Apache DolphinScheduler容错机制

博主头像 简述 Apache Dolphinscheduler Master和Worker都是支持多节点部署,无中心化的设计。 Master主要负责是流程DAG的切分,最终通过RPC将任务分发到Worker节点上以及Worker上任务状态的处理 Worker主要负责是真正任务的执行,最后将任务状态汇报给Mas ...

@dailai,欢迎成为Apache SeaTunnel Committer一员!

博主头像 Apache SeaTunnel社区最近又迎来了一位新Committer,他是来自中电信翼康的大数据架构师,作为医疗健康行业从业者,他给SeaTunnel项目带来了此专业领域相关的技术支持,探索了医疗数据的价值挖掘与AI模型应用与SeaTunnel相结合的潜能。来看看他是如何成为SeaTunnel社 ...

mysql的执行逻辑

本篇章为构建mysql在执行过程中简单的业务流程,为后续的代码优化和面试构建基础。 1、首先一条sql在执行时sql会通过网络传送给mysql 2、在Mysql收到sql语句后会先在分析器中先判断一下SQL语句有没有语法错误。 3、判断完语法之后语法无误,优化器会根据你写的sql判断执行什么索引。( ...

国产数据库的崛起与挑战:谁将在激烈市场洗牌中脱颖而出

博主头像 国产数据库的崛起与挑战:谁将在激烈市场洗牌中脱颖而出 数据 先看一下当前企业数据 截至最新的公开数据,中国的企业数量总量非常庞大。 截至2022年底,民营企业已超过4500万家,在各类企业中占比极大。 截至2022年底,国有企业约有15万家,其中中央企业有97家。 目前国情 在数据库领域,国家的政策 ...

读数据工程之道:设计和构建健壮的数据系统16源系统实际细节(下)

博主头像 1. 数据共享 1.1. 云数据共享的核心概念是,多租户系统支持租户之间共享数据的安全策略 1.2. 任何具有细粒度权限系统的公有云对象存储系统都可以成为数据共享的平台 1.3. 数据共享也简化了数据市场的概念,在几个流行的云和数据平台上都可用 1.4. 数据共享还可以简化组织内的数据管道 1.5. ...

Newstar_week1-2_wp

博主头像 week1 wp crypto 一眼秒了 n费马分解再rsa flag: import libnum import gmpy2 from Crypto.Util.number import * p = 9648423029010515676590551740010426534945737639235 ...

为什么说Kafka还不是完美的实时数据通道

博主头像 本文主要谈谈Kafka用于实时数据通道场景的缺陷,以及如何在架构上进行弥补。 Kafka归属于消息队列类产品,其他竞品还有RabbitMQ、RocketMQ等,总的来说它们都是基于生产者、中介和消费者三种角色,提供高并发、大数据量场景下的消息传递。Kafka诞生自Hadoop生态,与生态中的其他组件 ...

RockyLinux安装redis

博主头像 本文介绍RockyLinux使用dnf在线安装redis并修改密码设置远程登陆。 本博客使用RetHat系的新版本系统,如使用Debian系的系统如Ubuntu,只需使用apt安装,其余部分类似。 1、使用如下命令安装redis sudo dnf install redis-server 2、安装完 ...

RockyLinux安装MySQL

博主头像 本文介绍RockyLinux使用dnf在线安装MySQL并修改密码设置远程登陆。 本博客使用RetHat系的新版本系统,如使用Debian系的系统如Ubuntu,只需使用apt安装,其余部分类似。 1、使用如下命令安装MySQL sudo dnf install mysql-server 2、安装完 ...

Mysql高级-day01

博主头像 Mysql高级-day01 MySQL高级课程简介 序号 Day01 Day02 Day03 Day04 1 Linux系统安装MySQL 体系结构 应用优化 MySQL 常用工具 2 索引 存储引擎 查询缓存优化 MySQL 日志 3 视图 优化SQL步骤 内存管理及优化 MySQL 主从复制 4 ...

读数据工程之道:设计和构建健壮的数据系统14源系统

博主头像 1. 源系统中的数据生成 1.1. 数据工程师的工作是从源系统获取数据,对其进行处理,使其有助于为下游用例提供服务 1.2. 数据工程师的角色将在很大程度上转向理解数据源和目的地之间的相互作用 1.3. 数据工程的最基本的数据管道任务——将数据从A移动到B 2. 数据源 2.1. 数据是无组织的、缺 ...

[20241018]21c x$mutex_sleep_history记录的变化.txt

[20241018]21c x$mutex_sleep_history记录的变化.txt--//mutex很少会成为主要等待事件,如果遇到多数情况非常特别,比如bug。mutex本身和保护对象是一体的,不像latch一样有单独的--//latch,而且mutex本身占内存也更小,mutex没有等待和 ...

Mysql高级-day04

博主头像 Mysql高级-day04 1. MySql中常用工具 1.1 mysql 该mysql不是指mysql服务,而是指mysql的客户端工具。 语法 : mysql [options] [database] 1.1.1 连接选项 参数 : -u, --user=name 指定用户名 -p, --pas ...

<1···192021···50>