主要观点总结
本文介绍了火山引擎多媒体实验室在超低延迟多路径传输领域的研究与实践。针对MultiPath ByteRTC架构及其算法方面的研究成果进行了详细介绍，包括多路径技术的潜力、挑战、业务实践以及进一步的业务思考。同时，介绍了团队在算法优化和跨层优化方面的探索，如TwinStar方案。最后提供了团队介绍和参考文献。
关键观点总结
关键观点1: 超低延迟用户场景的需求和挑战
随着VR、AR、云游戏等IP的爆火，用户对于沉浸式视频服务的交互体验有了更加极致的要求。网络链路质量不稳定和传输协议本身存在缺陷是超低延迟传输和用户期望体验之间的主要差距。多路径技术被视为一种解决方案，但面临数据调度、编码码率控制、流量成本和功耗、协议架构的通用性等多方面的挑战。
关键观点2: MultiPath ByteRTC架构的设计和优势
MultiPath ByteRTC架构基于WebRTC协议扩展成多路径实时通信协议，支持多条路径的传输控制并提供灵活的网络策略管理。该架构在抖音社交和云游戏等场景中部署，显著优化了业务体验和传输效率。
关键观点3: 多路径技术的实践结果
在抖音社交和云游戏场景中，开启多路径功能显著优化了音频和视频传输的体验，减少了卡顿率，降低了端到端延迟。同时，用户游戏时长也有显著提升。流量成本开销在可控范围内，但需要进一步探索优化策略。
关键观点4: 算法优化和跨层联合优化的探索
团队通过TwinStar方案探索算法天花板，利用视频切分联合编码技术消除不同路径之间的数据依赖性，实现接近零卡顿的交互效果。该方案集成了先进的编码技术和多路径传输策略，通过公网部署测试验证了其显著的效果。
关键观点5: 团队介绍和展望
火山引擎多媒体实验室是字节跳动旗下的研究团队，致力于探索多媒体领域的前沿技术。未来，团队将继续探索多路径传输算法的优化和突破，以及如何将零卡顿方案集成到MultiPath ByteRTC传输架构和线上业务中。
文章预览
在网络技术迅猛发展的当下，超低延迟已成为视频流媒体传输的关键需求。2022 年起，火山引擎多媒体实验室针对超低延迟多路径传输领域展开了深入的前沿探索与研究。 目前，多媒体实验室与流媒体技术团队共同推出的自研 MultiPath ByteRTC 技术架构，已在抖音社交、抖音云游戏等多个业务场景成功上线，并且为业务带来了可观的收益。本文将对 MultiPath ByteRTC 架构及其算法方面的研究成果进行详细介绍。 超低延迟用户场景：虚拟现实、智能交互、云游戏 2023年6月5日，苹果发布了Vision Pro，产品一经发布受到极大的关注，其展示了极强的沉浸式交互体验，颠覆VR产品与行业的潜力已经初露端倪。 2024年8月20日，国内首个3A大作《黑神话：悟空》全球上线，其中众多的云游戏玩家已经出现排队现象。由此可见，无配置压力，无需下载、点开即玩的云游戏
………………………………
