1. 基本信息 数据自助服务实践指南：数据开放与洞察提效 [美] 桑迪普·乌坦坎达尼 （Sandeep Uttamchandani） 著 机械工业出版社,2022年05月出版 1.1. 读薄率 书籍总字数271千字，笔记总字数75696字。 读薄率75696÷271000≈27.93% 1.2. 读 ...

引言 在之前的文章中，我们讨论了 PostgreSQL 表访问方法 API 的基础知识以及堆元组（heap tuple）与元组表槽（Tuple Table Slot，简称 TTS）之间的区别。 本文将深入探讨 PostgreSQL 核心如何通过特定的 API 调用实现顺序扫描。 涉及的 API 为了 ...

这是一道来自于 Uber 面试的题目，利用 SQL 给出每周获得连续 5 星数量最多的司机。如果中间获得其他评价，则“连续 5 星”的次数中断清零。 ...

GreatSQL Hash Join 条件列长度对执行计划的影响 一、问题发现 在一次开发中发现当执行 Hash Join 用 VARCHAR 字段作为连接的时候，字段长度长短不同时候，执行计划也不一样。看下面3个例子。 1、连接条件字段长度为20的场景 greatsql> CREATE TABLE ...

在ABP框架结合Entity Framework（非Core版）与MySQL实现大数据量高效分页查询****时，需结合MySQL特性与EF的分页机制进行优化。以下是具体方案及实现要点： 一、避免使用传统LIMIT OFFSET 传统Skip().Take()在EF中会转换为LIMIT OFFSET， ...

背景与目标 我们之前曾评估使用过SeaTunnel做CDC入湖验证：SeaTunnel-CDC入湖实践，这些场景都是能直连数据库的场景，业务需求中经常会出现无法直连数据库做CDC进行数据同步的场景，而这些场景就需要使用API进行数据对接，用Apache DolphinScheduler定时同步数据。 ...

1. 成本管理服务 1.1. 为了利用云中可用的无限资源，企业需要无限的预算 1.1.1. 成本管理对于确保数据平台的有限预算与业务优先级的有效配合至关重要 1.1.2. 由于有众多选择，所以成本管理就像黑盒，需要不断优化成本，以适应日常工作中变化的工作负载 1.2. 操作阶段的最后一部分是成本管理 ...

作者：史德昇 随着数据来源的不断复杂化及业务需求的快速演进，通用的数据集成框架在实际落地过程中往往面临诸多挑战：数据结构不规范、字段缺失、敏感信息混杂、数据语义不清等问题频繁出现。为了更好地应对这些复杂场景，某上市网络安全龙头企业基于 Apache SeaTunnel 进行了二次开发，构建了一套可扩 ...

Hi~同学！ 想和技术大牛一起参与开源吗？ 如果你对数据库、PostgreSQL 感兴趣，那么就来参与开源之夏吧！一年一度的开源之夏已经开启，是高校学生参与开源的不二之选，绝对不容错过。 IvorySQL 社区再一次参与其中，发布了 2 个项目。欢迎各位同学来认领哦！ 开源之夏简介 开源之夏是由中国 ...

2020年1月COPU（中国开源软件推进联盟）成员开会讨论面向高校的开源示范课程，由联盟副秘书长北京大学荆琦老师牵头筹备，并首先在北大软微学院试点。本次是中国PostgreSQL分会联合会员企业应邀第五次参与授课，课程吸引了国内头部开源大厂积极加入，包括众多开源项目。课程面向北大研一学生（研一第二学 ...

1. 质量可观测性服务 1.1. 数据用户需要确保峰值实际上反映了真实情况，而不是有数据质量问题的结果 1.2. 导致质量问题的情况 1.2.1. 不正确的源模式更改 1.2.2. 数据元素属性的更改 1.2.3. 接入问题 1.2.4. 源系统和目标系统的数据不同步 1.2.5. 处理失败 1.2 ...

[20250506]drop table的恢复2.txt--//尝试drop table的恢复，前提没有备份的情况不得已为之的方法，前面测试提到drop table时清除段头里面的Extent Map以及--//Auxillary Map的信息。这样通过建立新表的方式也只能像truncate tab ...

【IoTDB 视频小课】第十五期，双模型科普继续，这次是大家最关心的选择问题！ 关于 IoTDB，关于物联网，关于时序数据库，关于开源... 一个问题重点，3-5 分钟，我们讲给你听： 不再迷茫，我们告诉你如何选择！ 上期视频我们详细解读了为什么 IoTDB 要推出树表双模型， 那么树模型和表模型的 ...

2025 年 5 月 13 日至 16 日（蒙特利尔时间），一年一度的 PostgreSQL 开发者大会 PGConf.dev（原 PGCON 会议）将在加拿大蒙特利尔盛大举行。同去年一样，在本次大会开幕的前一天同样会举办另外一个专场活动——Postgres Extensions Day，此活动会聚 ...

1. 模型部署服务 1.1. 编写一次性脚本来部署模型并不困难 1.2. 针对模型训练类型（在线与离线）​、模型推理类型（在线与离线）​、模型格式（PAML、PFA、ONNX等）​、终端类型（Web服务、IoT、嵌入式浏览器等）以及性能要求（由预测/秒和延迟定义）的不同组合，管理这些脚本非常困难 1 ...

本文深入解析了Redis的六大核心数据结构，涵盖​​动态字符串（SDS）​​如何解决C字符串的性能瓶颈、​​整数集合（IntSet）​​的类型升级机制、​​字典（Dict）​​的渐进式rehash策略、​​压缩列表（ZipList）​​的连锁更新挑战，以及​​快速列表（QuickList）​​和​​... ...

1. 管道编排服务 1.1. 查询或程序的运行时实例称为作业 1.1.1. 作业调度需要考虑到正确的依赖项 1.2. 作业管道需要按照特定的顺序进行编排，从数据接入到数据准备再到数据处理 1.3. 痛点 1.3.1. 定义和管理作业之间的依赖项是即席的，容易出错 1.3.1.1. 数据用户需要在管道 ...

实践环境 openGauss 6.0.0 LTS 企业版 下载地址：https://opengauss.org/zh/download/archive/ openEuler-22.03-LTS-SP4-x86_64-dvd.iso 下载地址：https://www.openeuler.org/zh/ ...

本文介绍在Windows电脑中，下载、安装、部署并运行PostgreSQL与PostGIS数据库服务的方法。 PostgreSQL是一种功能强大的开源关系型数据库管理系统（RDBMS），以其稳定性、可靠性和丰富的功能而闻名；其支持多种高级特性，包括事务完整性、多版本并发控制、复杂查询、外键、触发器、 ...

本文介绍了大数据的核心特征与技术演进，并深入剖析了Apache Flink作为实时计算引擎的三大核心优势：时间管理（Watermark机制）、状态管理（算子状态与键控状态）以及容错机制（精确一次语义）。通过对比批处理与流处理架构，展示了Flink如何在电商、金融、推荐系统等实际场景中实现毫秒级的数据... ...