概要
Docker目前在互联网开始普及，越来越多的企业开始规模化使用Docker，TalkingData在15年开始尝试在大数据方向使用Docker的弹性计算，将大数据的计算和Docker的弹性调度相结合，通过Docker网络插件很好的解决了大数据下高吞吐的网络问题，通过shipyard轻松的完成YARN集群的自动编排。我们在整体的计算平台做了横向和纵向的压力和负载测试，并行和计算能力要明显好于Native的yarn的集群，在整体的硬件的使用率上，能够提高20%左右，很大程度上节省了硬件成本；大会上我们将会分享几个经验。1.怎样在Docker上构建Hadoop计算平台，确保计算的弹性伸缩。2.Docker怎么解决高吞吐下的网络问题。3.Yarn on Docker需要做哪些方面的参数优化。4.Docker的网络插件开源计划。