Wednesday, June 8, 2022

OSCHINA 社区最新专区文章

OSCHINA 社区最新专区文章


应用实践 | 物易云通基于 Apache Doris 的实时数据仓库建设

Posted: 08 Jun 2022 03:35 AM PDT

导读: 物易云通目前已成为国内产融供应链运营服务平台的领军企业之一,平台年交易额超过 200 亿元 , 随着公司业务的快速发展,对数据计算分析的时效要求也越来越高。经数据团队的调研对比,于 2021 年引入了 Apache Doris 作为实时数据仓库。实战过程中获得一些经验,在此分享给大家。 作者|物易云通/司机宝大数据负责...

揭露数据不一致的利器 —— 实时核对系统

Posted: 07 Jun 2022 07:20 PM PDT

本文首发于微信公众号"Shopee技术团队" 摘要 随着企业业务发展,以及微服务化大趋势下单体服务的拆分,服务间的通信交互越来越多。与单体服务不同,微服务间的数据往往需要通过额外的手段来保障一致性,例如事务消息、异步任务补偿等。除了从机制上最大程度保障以外,如何观测并及时发现数据不一致也非常重要。 本文介...

以字节跳动内部 Data Catalog 架构升级为例聊业务系统的性能优化

Posted: 07 Jun 2022 10:26 PM PDT

### 背景 字节跳动 Data Catalog 产品早期,是基于 LinkedIn Wherehows 进行二次改造,产品早期只支持 Hive 一种数据源。后续为了支持业务发展,做了很多修修补补的工作,系统的可维护性和扩展性变得不可忍受。比如为了支持数据血缘能力,引入了字节内部的图数据库 veGraph,写入时,需要业务层处理 MySQL、ElasticSear...

探究Presto SQL引擎(3)-代码生成

Posted: 06 Jun 2022 06:16 PM PDT

vivo 互联网服务器团队- Shuai Guangying 探究Presto SQL引擎 系列:第1篇《探究Presto SQL引擎(1)-巧用Antlr》介绍了Antlr的基本用法以及如何使用Antlr4实现解析SQL查询CSV数据,在第2篇《探究Presto SQL引擎(2)-浅析Join》结合了Join的原理,以及Join的原理,在Presto中的思路。 本文是系列第3篇,介绍基于 Antlr 实现...

openGauss简单查询SQL的执行流程解析

Posted: 06 Jun 2022 07:01 PM PDT

目录 简单查询的执行 gdb调试 上一期酷哥分析了openGauss数据库的启动过程,包括主线程,辅助线程及业务处理线程的启动过程,这一期主要分析简单查询语句在业务处理线程Postgres上的执行流程,并介绍如何利用gdb梳理代码逻辑。 简单查询的执行 SQL引擎是数据库系统的入口,执行用户简单查询的入口函数是exec_simple_que...

No comments:

Post a Comment