分享一些容器与大数据结合的实践经验

文章预览

社区探讨，供大家参考： 大家是否有一些容器与大数据结合的实践经验可分享？ 使用何种方式将大数据与容器结合起来？是否有一些比较专业的厂商或是业界比较成熟的方案可以提供有效的落地方案？ 问题来自社区会员@橘子皮 银行容器云运维工程师，以下分享均来自社区会员 @强哥之神 上汽集团云计算中心 架构师 & 技术经理： 容器最大的好处是灵活，轻量。大数据是计算型侧重资源弹性及大数据存储。两者在处理任务的时候，可以将两者优点结合起来。而且，两者的调度框架还不大一样，容器一般使用K8S，大数据一般使用hadoop, strom, spark等计算引擎基于yarn的调度。但好在这些也可以容器化改造的，即可以跑在容器化平台K8S中，并可刚好利用K8S的资源弹性、灵活编排等功能来扩充或补充大数据平台的调度能力。还可以通过混布策略，将底层基础 ………………………………