Thursday, February 24, 2022

OSCHINA 社区最新专区文章

OSCHINA 社区最新专区文章


数据平台与Flink任务运行原理介绍

Posted: 23 Feb 2022 05:55 PM PST

> 本文将从5个方面详细介绍数据平台大数据任务开发的基础知识。包含数据平台的简介、如何在平台内创建Flink表、如何编写Flink大数据处理作业、Flink任务启动时的调用流程以及Flink web UI 任务监控页面。此外,将重点介绍数据平台内Flink任务开发相关的部分内容,包括Flink数据连接、Flink流作业、批作业和资源库。资源库...

从5个函数带你理解K8s DeltaFIFO

Posted: 23 Feb 2022 11:18 PM PST

摘要:DeltaFIFO是K8s中用来存储处理数据的Queue,相较于传统的FIFO,它不仅仅存储了数据保证了先进先出,而且存储有K8s资源对象的类型。是连接Reflector(生产者)和indexer(消费者)的重要通道。 本文分享自华为云社区《Client-go源码分析之DeltaFIFO》,作者: kaliarch 。 DeltaFIFO是K8s中用来存储处理数据的Queue,相较...

极速生成缩略图,Serverless 支撑赛事转播锁定冬奥亮点

Posted: 21 Feb 2022 12:00 AM PST

![](https://oscimg.oschina.net/oscnet/up-73d2cd9a7a05d8a590867736168d58f3909.webp) 作者 | 西流、筱姜 "北京冬奥会在开赛的第四天便成为了历史上收视最高的一届冬奥会,其转播内容总生产量将达 6000 小时,超过平昌冬奥会的 5400 小时。关注北京冬奥会的人群比往届都多,北京冬奥会在全球收视预计将超过 20 亿人次。...

从重大漏洞应急看云原生架构下的安全建设与安全运营(下)

Posted: 27 Jan 2022 12:32 AM PST

## 前言 前一篇文章中,我们简要分析了对于重大安全漏洞,在云原生架构下该如何快速进行应急和修复,以及云原生架构对于这种安全应急所带来的挑战和优势。事件过后我们需要痛定思痛,系统的来思考下,面对云原生架构如何进行有效的安全建设和安全运营,使得我们在安全事件的处置上可以做到游刃有余。 **腾讯云容器服务T...

从中心走向边缘——深度解析云原生边缘计算落地痛点

Posted: 23 Feb 2022 01:55 AM PST

作者:段嘉,新胜 云计算发展史,就是虚拟化技术的发展史。近 20 年来云计算与互联网相互促进高速发展,中心云技术成为全社会通用的基础设施。随着物联网、人工智能等技术的不断发展,尤其是产业互联网发展落地,中心云计算开始相形见绌,分散式边缘计算在当下被重新寄予厚望。如果中心云计算是由技术创新驱动的,那么边...

与阿里云容器服务 ACK 发行版的深度对话第一弹:如何借助 sealer 实现快速构建 & 部署

Posted: 23 Feb 2022 03:24 AM PST

*作者:淮右、王飞、瑜佳* **记者:** 阿里云原生的读者朋友们大家好,今天应广大感兴趣朋友们的强烈要求,我们邀请来了「阿里云容器服务 ACK 发行版」做客我们的栏目,为大家讲述它的身世之谜,以及它是如何和伙伴们配合,让大家在自有基础设施上获得一致的最佳体验。所以走过路过千万不容错过哦~ **阿里云容器服务 AC...

深度解析|基于 eBPF 的 Kubernetes 一站式可观测性系统

Posted: 23 Feb 2022 02:58 AM PST

作者:李煌东、炎寻 ## 摘要 阿里云目前推出了面向 Kubernetes 的一站式可观测性系统,旨在解决 Kubernetes 环境下架构复杂度高、多语言&多协议并存带来的运维难度高的问题,数据采集器采用当下火出天际的 eBPF 技术,产品上支持无侵入地采集应用黄金指标,构建成全局拓扑,极大地降低了公有云用户运维 Kubernetes 的难度...

RocketMQ-Streams 首个版本发布,轻量级计算的新选择

Posted: 23 Feb 2022 06:37 PM PST

RocketMQ-Streams 聚焦「大数据量->高过滤->轻窗口计算」场景,核心打造轻资源,高性能优势,在资源敏感场景有很大优势,最低 1Core,1G 可部署。通过大量过滤优化,性能比其他大数据提升 2-5 倍性能。广泛应用于安全,风控,边缘计算,消息队列流计算。 RocketMQ-Streams 兼容 Flink 的 SQL,udf/udtf/udaf,将来我们会...

重新理解“无容灾不上云”:应用多活将成为云原生容灾新趋势

Posted: 23 Feb 2022 07:05 PM PST

作者:Tina 互联网技术发展到了 2021 年,上云也更加普遍,但宕机事件却似乎没怎么减少。 这一年 10 月,拥有 30 亿用户的脸书 (Facebook) 遭遇大规模宕机,中断服务约 7 小时后大部分服务才重新上线。据说,这是 Facebook 创办以来最严重的一次网络访问事故,导致脸书一夜之间市值蒸发约 473 亿美元 (约合 3049 亿元人民...

全链路灰度这样做,新需求迭代上线也能放心干饭

Posted: 23 Feb 2022 08:42 PM PST

*作者:泮圣伟(十眠)* ## 概要 全链路灰度是微服务最核心的功能之一,也一直是云上客户在微服务化深入过程中必须具备的功能。全链路灰度因为涉及到的技术、场景众多,如果云上企业一一自己实现,需要花费大量人力成本对其进行扩展与运维。 ## 涉及到的技术领域 - RPC: 微服务之间的路由 - - Java 体系涉及 Spring Clo...

百度可观测系列 | 采集亿级别指标,Prometheus 集群方案这样设计

Posted: 22 Feb 2022 12:41 AM PST

【百度云原生导读】在前一篇《基于 Prometheus 的大规模线上业务监控实践》中,我们为大家介绍了针对大规模业务监控场景,百度云原生团队基于 Prometheus 技术方案的一些探索,包括基于 Prometheus 进行指标降维、Prometheus 的自动分片采集、以及基于 Flink 流式计算构建的预计算。 本文将深入采集专题,为大家介绍如何...

k8s源码Client-go中Reflector解析

Posted: 21 Feb 2022 11:35 PM PST

摘要:通过本文,可以了解Reflector通过ListWatcher从Kubernetes API中获取对象的流程,以及存储到store中,后续会对DeltaFIFO进行源码研读,通过结合informer,来加深对整个informer的理解。 本文分享自华为云社区《Client-go源码分析之Reflector》,作者: kaliarch 。 一 背景 Reflector 是保证 Informer 可靠性的核心...

Spring Boot Serverless 实战系列 | 性能调优

Posted: 15 Feb 2022 05:27 AM PST

作者:西流|阿里云函数计算专家 导读:Spring Boot 是基于 Java Spring 框架的套件,它预装了 Spring 的一系列组件,让开发者只需要很少的配置就可以创建独立运行的应用程序。在云原生的环境中,有大量的平台可以运行 Spring Boot 应用,例如虚拟机、容器等。但其中最有吸引力的,是以 Serverless 的方式运行 Spring B...

技术盘点:消息中间件的过去、现在和未来

Posted: 20 Feb 2022 01:30 AM PST

*作者介绍:林清山(花名:隆基)* 操作系统、数据库、中间件是基础软件的三驾马车,而消息队列属于最经典的中间件之一,已经有30多年的历史。其发展主要经历了以下几个阶段: **第一个阶段,2000年之前。** 80年代诞生了第一款消息队列是 The Information Bus,第一次提出发布订阅模式来解决软件之间的通信问题;到了9...

技术盘点:容器技术的演进路线是什么?未来有哪些想象空间?

Posted: 20 Feb 2022 08:00 AM PST

*作者:志敏,徙远* ### 回顾2021年,云原生领域有哪些重要意义的事件? #### 1. 基于容器的分布式云管理加速落地: *2021年5月阿里云峰会上,阿里云发布了一云多形态的部署方式,基于飞天架构的一朵云可以全面覆盖从核心地域到客户数据中心的各种计算场景,为客户提供低成本、低延迟、本地化的公共云产品。* 在一云多形...

No comments:

Post a Comment