专访叶鹏：Kubernetes在亚信大数据平台的应用

作为SDCC系列的2016年度大戏，SDCC中国软件开发者大会将在11月18-20日在北京隆重举办，超过100+顶级讲师将上台就电商架构、前端开发、编程语言、微信开发、容器与运维等热点话题展开分享。值得一提的是，SDCC今年以来已经相继走进了上海、深圳、成都、杭州等地，所到之处，场场爆满。

作为本次大会专题之一自动化运维和容器专场更是人气爆棚，我们邀请到业内顶级的12位讲师，从不同维度，为参会者提供干货满满的分享，关于本场讲师和议题的详细设置，请点击这里。

来自亚信数据大数据云平台部负责人叶鹏将带来《基于Kubernetes的大数据服务能力供给之道》的演讲，主要涉及kubernetes编排能力详解，常见大数据服务能力编排模式以及对大数据服务资源隔离、服务发现、持久化的考虑。

在大会开始前，我们特别荣幸采访到亚信数据大数据云平台部负责人叶鹏，他和我们分享了Kubernetes在亚信大数据平台的应用。他表示他们在横向比较了常见的CloudFoundry、Mesos、Kubernetes等7个PaaS平台之后，最终使用Kubernetes作为平台技术基础。

亚信智慧数据科技有限公司大数据云平台负责人

CSDN：首先请介绍下自己和您主要从事哪些方面的研究，目前关注的领域有哪些？

叶鹏：我是亚信数据大数据云平台部的叶鹏，主要负责亚信数据的DataFoundry平台建设和运维以及服务支撑工作，目前专注于 Docker、Kubernetes 技术与大数据技术结合应用的探索和研究，通过“DataFoundry”平台提升大数据应用交付能力，同时吸引外部平台

CSDN：你们是什么时候开始使用Docker技术的？目前的使用效果如何？

叶鹏：亚信数据大约是去年7月开始使用Docker技术，为了DataFoundry平台的技术选型，我们横向比较了当时常见的CloudFoundry、Mesos、Kubernetes等7个PAAS平台，最终使用Kubernetes作为平台技术基础。目前我们已经完成公司内若干重大数据分析应用，例如位置应用、可视化应用、邮箱PUSH应用的云化，并初步取得一定成果。

CSDN：Docker在贵公司的具体应用场景有哪些？给你们带来哪些改变？

叶鹏：通过docker开发自己的服务，通过docker开发大数据服务编排，通过docker来支撑公司内产品的云化。

CSDN：为什么选择Kubernetes作为你们容器编排工具，对于你们的业务来说，具有哪些优势？

叶鹏：我们在去年7月横向比较了CloudFoundry、Mesos、Kubernetes等7个PAAS平台，我们选择kubernetes首先是因为kubernetes提供了一个相对完整的PAAS平台解决方案，它原生就是为解决容器编排场景而设计的，二是它有一个非常活跃的社区，大家的讨论都非常积极，出现的问题都能够及时响应。三是kubernetes的良好的微服务架构设计让我们可以比较快捷的完成对其功能的扩展。

CSDN：从技术上来看，你认为Kubernetes还有哪些改进的空间，未来的发展方向是什么？

叶鹏：Kubernetes应该可以向更大集群管理规模、更完善的平台高可用模型、更自动和顺畅的持久化管理策略以及一些串行管理流程的进一步改进这几个方向发展。目前看Kubernetes仍然以无状态应用的编排为主，尽管我们看到已经有一些面向持久化应用的编排功能出现，例如deamonset、petset、可自动供给的pvc等，但是他们都还处于验证阶段，因此在未来对状态服务的管理、特别是与大数据技术在计算调度、资源管理等方面进一步结合或许是kubernetes的一个重要的发展方向。

CSDN：目前有很多编排工具，比如Mesos、Swarm等，作为企业来说，如何选择适合自己的编排工具？

叶鹏：目前编排工具或者说平台的竞争非常激烈，kubernetes、mesos、swarm都有自己的长处与不足，同时每个编排工具都有丰富的内涵，使用起来都存在一定的技术曲线，大家在选择编排工具时首先应从自身实际出发，明确业务场景和技术要求，同时还要考虑计算资源、存储、网络与编排工具的衔接问题，如果真正要让编排工具上升为平台角色还应考虑公司的管理、研发流程是否可以很好的在编排工具上集成和落地，应用的测试、部署流程是否可以很好的在编排工具上集成和逻辑。

CSDN：本次大会上，您的分享主要聚焦哪些方面？

叶鹏：在本次会议上我主要介绍亚新数据DataFoundry平台这一段时间以来结合kubernetes的一些进行大数据服务供给的一些心得。

关于SDCC中国软件开发者大会更多详情请登录SDCC官方网站，目前票务火爆，预购从速

专访叶鹏：Kubernetes在亚信大数据平台的应用相关推荐

亚信大数据平台产品经理杨晋：大数据是怎么应用于技术方面的
2014中关村大数据日于2014年12月11日在中关村举办,大会以大会以"聚合数据资产,推动产业创新"为主题,探讨数据资产管理和变现.大数据深度技术以及行业大数据应用创新和生态系统 ...
CloudEon云原生大数据平台
文章目录 @[toc] 1. CloudEon是什么? 2. gitHub地址和官网地址 3. 官网教程 4. 特性 5. 架构 6. 支持组件版本 7. 安装部署 7.1 部署前提 7.1.1 Ku ...
叶谦-移动大数据平台的一些实践经验
叶谦-移动大数据平台的一些实践经验友盟数据统计分析系统的整体架构,包含SDK,实时计算系统,离线计算系统?等?几部分.友盟自行研发的任务调度器满足了日常任务调度和异常情况下重跑数据的调度需求.还研发 ...
【SDCC讲师专访】吕毅：链家网大数据平台的架构演进
2016年11月18日-20日,由CSDN重磅打造的年终技术盛会,SDCC 2016中国软件开发者大会将在北京举行,大会面向国内外的中高端技术人员,聚焦最前沿技术及一线的实践经验,从而助力企业的技术升 ...
【BDTC 2017讲师专访】彭冬：微博商业基础大数据平台（D+）的架构演进
BDTC 2017中国大数据技术大会将于12月7日-9日在北京新云南皇冠假日酒店举行,大会为期三天.届时,近百位技术专家将为现场数千名的大数据行业精英.技术专家及意见领袖带来多场技术演讲,分享最新技术 ...
专访腾讯蒋杰：深度揭秘腾讯大数据平台
大数据,这个词越来越热,很多人都在谈大数据,其实很多张口闭口大数据的人,或许都不知道数据是如何产生.传递.存储.运算到应用的.其实我一直感觉大数据这个东西有时候真的不是一般企业可以玩的溜的,特别是随着 ...
K8S 从懵圈到熟练--大数据平台技术栈18
回顾:大数据平台技术栈 (ps:可点击查看),今天就来说说其中的K8S! 来自:阿里技术公众号阿里妹导读:排查完全陌生的问题.不熟悉的系统组件,对许多工程师来说是无与伦比的工作乐趣,当然也是一大挑战 ...
TiDB 在大型互联网的深度实践及应用--大数据平台技术栈08
回顾:大数据平台技术栈 (ps:可点击查看),今天就来说说其中的TiDB! 作者介绍吕磊,摩拜单车高级 DBA 一.业务场景摩拜单车 2017 年开始将 TiDB 尝试应用到实际业务当中,根据业务 ...
谈谈对 Canal（增量数据订阅与消费）的理解--大数据平台技术栈系列(3)
之前说了,大数据平台技术栈 (可点击查看),今天就来说说其中的Cannal 来源:朱小厮, blog.csdn.net/u013256816/article/details/52475190 概述 c ...

专访叶鹏：Kubernetes在亚信大数据平台的应用

专访叶鹏：Kubernetes在亚信大数据平台的应用相关推荐

最新文章

热门文章