Sunday, September 19, 2021

OSCHINA 社区最新专区文章

OSCHINA 社区最新专区文章


Linux 或将具有用于 AI 处理单元的 DRM 驱动程序

Posted: 18 Sep 2021 06:12 PM PDT

BayLibre 开发人员 Alexandre Bailon 发布了一个添加 DRM 驱动程序以支持 AI 处理单元 (APU) 的 RFC。最初,该驱动程序是为带有 AI 协处理器的 Mediatek SoC 提供服务的,但现在也适用于其他硬件。 该 RFC 增加了一个 DRM 驱动,实现了 CPU 和 APU 之间的通信,并且使用VirtIO缓冲器来交换信息。对于数据,其分配了一个 ...

如何借助 JuiceFS 为 AI 模型训练提速 7 倍

Posted: 18 Sep 2021 02:58 AM PDT

## 背景 海量且优质的数据集是一个好的 AI 模型的基石之一,如何存储、管理这些数据集,以及在模型训练时提升 I/O 效率一直都是 AI 平台工程师和算法科学家特别关注的事情。不论是单机训练还是分布式训练,I/O 的性能都会显著影响整体 pipeline 的效率,甚至是最终的模型质量。 我们也逐渐看到容器化成为 AI 训练的趋势,...

CANN AICPU算子耗时分析及优化探索

Posted: 17 Sep 2021 11:46 PM PDT

摘要:本文以GreaterEqual作为测试算子,该算子计算逻辑较为简单(output = input1 >= input2),旨在尽可能降低计算耗时,使得算子耗时尽可能以数据操作和算子调度作为主体。 本文分享自华为云社区《CANN AICPU算子耗时分析及优化探索》,作者:DavilSu。 1. 分析目的 在实际开发CANN算子的过程中,常常出现算子功能正常,...

Apache Flink 在京东的实践与优化

Posted: 30 Aug 2021 06:30 AM PDT

▼ 关注「Flink 中文社区」,获取更多技术干货 ▼ 摘要:本文整理自京东高级技术专家付海涛在 Flink Forward Asia 2020 分享的议题《Apache Flink 在京东的实践与优化》,内容包括: 业务演进和规模 容器化实践 Flink 优化改进 未来规划 Tips:点击「阅读原文」即可回顾作者原版分享视频~ 另外,请关注文末 Flink 极客挑...

手把手教你用pandas处理缺失值

Posted: 15 Sep 2021 01:10 AM PDT

作者:韦斯·麦金尼(Wes McKinney) 译者:徐敬一 来源:大数据DT(ID:hzdashuju) 导读:在进行数据分析和建模的过程中,大量的时间花在数据准备上:加载、清理、转换和重新排列。本文将讨论用于缺失值处理的工具。缺失数据会在很多数据分析应用中出现。pandas的目标之一就是尽可能无痛地处理缺失值。 pandas对象的所...

No comments:

Post a Comment