首页 > 其他分享 >“翼”鸣惊人,天翼云两篇论文被ACM ICPP 2024收录!

“翼”鸣惊人,天翼云两篇论文被ACM ICPP 2024收录!

时间:2024-06-20 15:13:39浏览次数:20  
标签:PheCon 天翼云 ACM 碎片 2024 Yggdrasil CXL 资源

*日,由天翼云科技有限公司弹性计算产品线天玑实验室撰写的两篇论文《PheCon: Fine-Grained VM Consolidation with Nimble Resource Defragmentation in Public Cloud Platforms》及《Yggdrasil: Reducing Network I/O Tax with (CXL-Based) Distributed Shared Memory》被ACM International Conference on Parallel Processing(ICPP)收录。

ACM ICPP是计算机体系结构、并行与分布计算、存储系统领域的顶级会议之一,也是世界上最古老的连续举办的并行计算国际会议之一。ACM ICPP收录论文均经过严格的同行双盲评审,*五年*均接收率为27.9%。此次天玑实验室两篇论文的成功收录,既是顶级权威机构对天翼云技术创新能力的认可,也是中国企业在国际学术舞台影响力日益增强的有力证明。

本次收录的两篇论文分别阐述了天翼云天玑实验室团队自主设计与研发的两大创新成果,包括面向大规模云数据中心管理的智能资源调度技术——PheCon,和基于“聚合计算”产品理念的面向新一代云计算基础设施的网络I/O加速技术——Yggdrasil。

PheCon:细粒度云数据中心

智能资源碎片整理算法

在云计算场景下,由于数据中心负载水*的波动性和需求的不确定性,各个物理服务器普遍存在资源碎片问题,造成数据中心资源浪费。如图1所示,客户需要紧急开通6台指定规格的云服务器,但集群内剩余资源只能满足4台云服务器,形成典型的资源碎片现象。如何应对资源扩容中常见的周期长、成本高等挑战,满足极端场景下的客户需求,成为亟需解决的难题。

图1. 碎片整理示意图

本论文创新性提出一种新型细粒度碎片整理算法——PheCon,通过云服务器二次调度的方式聚合集群内资源碎片,以满足更大规格资源的开通需求。同时,该论文还提出了基于分治思想的NUMA感知启发式算法和“诱导迁移”(Induced Migration)技术,通过规格填充、物理服务器选择、云服务器排序和NUMA调度,实现集群布局优化。

基于上述技术特点,PheCon可适配天翼云“2+4+31+X”的资源布局和异构数据中心的异构资源特点,做到一池一算、算无遗策,满足全域异构资源的二次调度,实现分钟级的快速碎片整理,提供优质的上云体验。目前,天玑智能调度*台稳定运行PheCon碎片整理功能,累计提供服务72次,每年节省运营成本超过千万元,减少碳排放超百吨。

Yggdrasil:CXL使能的无感

网络I/O性能加速

在通信密集型应用程序的运行过程中,基于Linux内核的操作系统网络通讯组件面临巨大的运行负担。为有效解决上述问题,本论文提出Yggdrasil网络通讯*替方案。

Yggdrasil是天翼云聚合计算团队预研的下一代数据中心网络通信技术。如图2所示,该技术可基于CXL共享内存实现用户态的高性能TCP/IP通信,且完全兼容现有的socket API,无需修改代码即可完成性能加速。天玑实验室团队通过模拟和真实CXL硬件进行评估的结果表明,Yggdrasil 可使Memcached的吞吐性能相比传统Linux socket高出8.2倍,并在不同消息大小的微基准测试中,将通讯延迟降低到传统方式的0.3%到4.1%。

图2. 关于Yggdrasil快速/慢速通信路径示意图

Yggdrasil的性能优势与易用性主要得益于三个方面的设计优化:

(1)在跨主机通信中,Yggdrasil采用基于CXL的分布式共享内存(即快速通信路径)以提升性能,在CXL不可用的情况下,自动无感切换回传统socket(即慢速通信路径)。

(2)Yggdrasil依托于受信任的用户空间监控守护进程管理通讯连接控制*面操作,减少上下文切换开销。数据*面采用对等模型进行跨物理主机的进程间通信,充分利用CXL共享内存的性能优势。

(3)为弥补socket API和共享内存之间的语义鸿沟,采取多种技术兼顾接口兼容性和性能优势。

基于Yggdrasil的I/O网络性能优势及良好的API接口兼容性,Yggdrasil方案将在天翼云弹性计算产品线自主设计和研发的聚合计算*台进行落地,以减少网络I/O税,从而为客户提供更澎湃的算力资源,助力千行百业创造更多价值。

面向未来,天翼云将继续加强关键核心技术自主攻关,以领先的产品能力夯实数字基础设施底座,为千行百业数字化转型保驾护航。

标签:PheCon,天翼云,ACM,碎片,2024,Yggdrasil,CXL,资源
From: https://www.cnblogs.com/developer-tianyiyun/p/18258693

相关文章

  • 迎接智算新挑战,天翼云亮相全球架构师峰会!
    近日,ArchSummit全球架构师峰会在深圳隆重开幕,本次大会以“智能进阶.架构重塑”为主题,探讨AI浪潮下,企业架构如何适应大模型和云原生的时代趋势,寻找既有应用成果又有成本效益的解决方案。国内外100余名顶尖专家齐聚一堂,围绕AI、大模型、云原生等话题展开深度交流。天翼云云网产品事......
  • 【EI稳定检索】2024年经济发展与商业文化国际会议(ICEDBC 2024)
    2024年经济发展与商业文化国际会议2024InternationalConferenceonEconomicDevelopmentandBusinessCulture会议简介2024年经济发展与商业文化国际会议即将在贵阳市盛大开幕。随着全球经济的持续发展,商业文化日益成为推动经济进步的重要力量。为了深入探讨经济发展......
  • 【权威发布】2024年环境科学、旅游与产业经济国际会议(ICESTIE 2024)
    2024年环境科学、旅游与产业经济国际会议2024InternationalConferenceonEnvironmentalScience,TourismandIndustrialEconomics会议简介2024年环境科学、旅游与产业经济国际会议旨在汇聚全球该领域的专家学者,共同探讨环境科学与旅游产业的融合发展,以及产业经济的......
  • 热҈热҈热҈!天翼云开出解暑“凉方”!
    近期高温天气来势汹汹中央气象台连续6天发布高温预警让人直呼“热化了”!面对高温怎么办?天翼云以科技为擎助力各行各业应对高温“烤”验!智能“云”监管,提升工地“安全感”建筑业作为一个传统、密集型行业,承担着城市和基础设施建设的重要任务。每当炎夏酷暑,为了保障工程进度......
  • Chromium 调试指南2024 Mac篇 - 准备工作 (一)
    1.引言Chromium是一个由Google主导开发的开源浏览器项目,它为GoogleChrome浏览器提供了基础框架。Chromium不仅是研究和开发现代浏览器技术的重要平台,还为众多其他基于Chromium的浏览器(如MicrosoftEdge、Brave等)提供了基础。调试Chromium对于开发人员来说是一个至关重要的技......
  • 2024年的行业春天:大模型技术引领未来
    前言随着科技的不断进步,各行各业都迎来了前所未有的发展机遇。而在2024年,我们坚信大模型技术将成为行业发展的春天,引领着新一轮的技术革命和产业变革。一、大模型技术的崛起大模型技术,作为人工智能领域的重要分支,近年来取得了显著的进展。通过构建庞大而复杂的模型,大模型......
  • Chromium 开发指南2024 Mac篇-编译前的准备工作(一)
    1.引言Chromium是一款开源的网页浏览器项目,作为GoogleChrome浏览器的基础,其卓越的性能和广泛的应用使其成为众多开发者研究和学习的对象。对于希望深入了解浏览器内核,或是计划在Chromium基础上开发自定义浏览器的开发者来说,掌握Chromium的编译和开发流程是至关重要的......
  • 独家|GenAI年中回顾,2024网络内容审核的API实战指南
    GenAI,即生成式人工智能,正在不断推动各个领域的创新和发展。一、年中回顾2024年被称为视频生成技术的爆发之年,各类GenAI在全球范围引领了一波又一波的潮流,真称得上是神仙打架。让我们共同回顾2024上半年的GenAI有哪些主要表现,并讨论,大量AI生成内容的涌现,又对互联网内......
  • 【深度学习&消费者评论】“利用在线餐厅评论创新评估竞争力“·推文分享·2024-6-20
    一、Consumers'continuanceintentiontowardsmetaverse-basedvirtualstores:Amulti-studyperspective消费者对基于元世界的虚拟商店的持续意向:多重研究视角1、研究背景随着元宇宙(Metaverse)技术的发展,虚拟商店正在改变零售业的格局,为消费者提供了新的探索、参与和......
  • 云动态摘要 2024-06-20
    给您带来云厂商的最新动态,最新产品资讯和最新优惠更新。最新优惠与活动[低至1折]腾讯混元大模型产品特惠腾讯云 2024-06-06腾讯混元大模型产品特惠,新用户1折起!云服务器ECS试用产品续用阿里云 2024-04-14云服务器ECS试用产品续用最新产品更新[功能优化]费用中心-......