分享好友 最新动态首页 最新动态分类 切换频道
1) Apache Mesos + marathon
2024-12-27 02:24

【编者按】Docker是PaaS供应商dotCloud开源的一个基于LXC 的高级容器引擎,源代码托管在 GitHub 上, 基于Go语言开发并遵从Apache 2.0协议开源。Docker提供了一种在安全、可重复的环境中自动部署软件的方式,它的出现拉开了基于云计算平台发布产品方式的变革序幕。为了更好的促进Docker在国内的发展以及传播,我们决定开设《深入浅出Docker》专栏,邀请Docker相关的布道师、开发人员、技术专家来讲述Docker的各方面内容,让读者对Docker有更深入的了解,并且能够积极投入到新技术的讨论和实践中。另外,欢迎加入InfoQ Docker技术交流群交流Docker的最佳实践,QQ群号:365601355。

1) Apache Mesos + marathon

敏捷开发已经流行了很长时间,如今有越来越多的企业开始践行敏捷开发所提倡的以人为中心、迭代、循序渐进的开发理念。在这样的场景下引入Docker技术,首要目的就是使用Docker提供的虚拟化方式,给开发团队建立一套可以复用的开发环境,让开发环境可以通过Image的形式分享给项目的所有开发成员,以简化开发环境的搭建。但是,在没有Docker技术之前就已经有类如Vagrant的开发环境分发技术,软件开发者一样可以创建类似需求的环境配置流程。所以在开发环境方面,Docker技术的优势并不能很好的发挥出来。笔者认为Docker的优点在于可以简化CI(持续集成)、CD(持续交付)的构建流程,让开发者把更多的精力用在开发上。

每家公司都有自己的开发技术栈,我们需要结合实际情况对其进行持续改进,优化自己的构建流程。当我们准备迈出第一步时,我们首先要确立一张构建蓝图,做到胸有成竹,这样接下来的事情才会很快实现。

这张时序图概括了目前敏捷开发流程的所有环节。结合以上时序图给出的蓝图框架,本文的重点是讲解引入Docker技术到每个环节中的实践经验。

开发团队在引入Docker技术的时候,最大的问题是没有可遵循的业界标准。大家常常以最佳实践为口号,引入多种工具链,导致在使用Docker的过程中没有侧重点。涉及到Docker选型,又在工具学习上花费大量时间,而不是选用合适的工具以组建可持续发布产品的开发团队。基于这样的场景,我们可以把“简单易用”的原则作为评判标准,引入到Docker技术工具选型的参考中。开发团队在引入Docker技术的过程中,首先需要解决的是让团队成员尽快掌握Docker命令行的使用。在熟悉了Docker命令行之后,团队需要解决几个关键问题具体如下:

1)Base Image的选择, 比如phusion-baseimage

2)配置管理Docker镜像的工具的选择,比如Ansible、Chef、Puppet

3)Host主机系统的选择,比如CoreOS、Atomic、Ubuntu

Base Image包括了操作系统命令行和类库的最小集合,一旦启用,所有应用都需要以它为基础创建应用镜像。Ubuntu作为官方使用的默认版本,是目前最易用的版本,但系统没有经过优化,可以考虑使用第三方有划过的版本,比如如phusion-baseimage。对于选择RHEL、CentOS分支的Base Image,提供安全框架SELinux的使用、块级存储文件系统devicemapper等技术,这些特性是不能和Ubuntu分支通用的。另外需要注意的是,使用的操作系统分支不同,其裁剪系统的方法也完全不同,所以大家在选择操作系统时一定要慎重。

配置管理Docker镜像的工具主要用于基于Dockerfile创建Image的配置管理。我们需要结合开发团队的现状,选择一款团队熟悉的工具作为通用工具。配置工具有很多种选择,其中Ansible作为后起之秀,在配置管理的使用中体验非常简单易用,推荐大家参考使用。

Host主机系统是Docker后台进程的运行环境。从开发角度来看,它就是一台普通的单机OS系统,我们仅部署Docker后台进程以及集群工具,所以希望Host主机系统的开销越小越好。这里推荐给大家的Host主机系统是CoreOS,它是目前开销最小的主机系统。另外,还有红帽的开源Atomic主机系统,有基于Fedora、CentOS、RHEL多个版本的分支选择,也是不错的候选对象。另外一种情况是选择最小安装操作系统,自己定制Host主机系统。如果你的团队有这个实力,可以考虑自己定制这样的系统。

当开发团队把代码提交到Git应用仓库的那一刻,我相信所有的开发者都希望有一个系统能帮助他们把这个应用程序部署到应用服务器上,以节省不必要的人工成本。但是,复杂的应用部署场景,让这个想法实现起来并不简单。

首先,我们需要有一个支持Docker的构建系统,这里推荐Jenkins。它的主要特点是项目开源、方便定制、使用简单。Jenkins可以方便的安装各种第三方插件,从而方便快捷的集成第三方的应用。

通过Jenkins系统的Job触发机制,我们可以方便的创建各种类型的集成Job用例。但缺乏统一标准的Job用例使用方法,会导致项目Job用例使用的混乱,难于管理维护。这也让开发团队无法充分利用好集成系统的优势,当然这也不是我们期望的结果。所以,敏捷实践方法提出了一个可以持续交付的概念 DeploymentPipeline(管道部署)。通过Docker技术,我们可以很方便的理解并实施这个方法。

Jenkins的管道部署把部署的流程形象化成为一个长长的管道,每间隔一小段会有一个节点,也就是Job,完成这个Job工作后才可以进入下一个环节。形式如下:

image source: google image search

大家看到上图中的每一块面板在引入Docker技术之后,就可以使用Docker把任务模块化,然后做成有针对性的Image用来跑需要的任务。每一个任务Image的创建工作又可以在开发者自己的环境中完成,类似的场景可以参考下图:

image source: google image search

所以,使用Docker之后,任务的模块化很自然地被定义出来。通过管道图,可以查看每一步的执行时间。开发者也可以针对任务的需要,为每一个任务定义严格的性能标准,已作为之后测试工作的参考基础。

应用经过测试,接下来我们需要把它发布到测试环境和生产环境。这个阶段中如何更合理地使用Docker也是一个难点,开发团队需要考虑如何打造一个可伸缩扩展的分发环境。其实,这个环境就是基于Docker的私有云,更进一步我们可能期望的是提供API接口的PaaS云服务。为了构建此PaaS服务,这里推荐几款非常热门的工具方便大家参考,通过这些工具可以定制出企业私有的PaaS服务。

Apache Mesos系统是一套资源管理调度集群系统,生产环境使用它可以实现应用集群。此系统是由Twitter发起的Apache开源项目。在这个集群系统里,我们可以使用Zookeeper开启3个Mesos master服务,当3个Mesos master通过zookeeper交换信息后会选出Leader服务,这时发给其它两台Slave Messos Master上的请求会转发到Messos master Leader服务。Mesos slave服务器在开启后会把内存、存储空间和CPU 资源信息发给Messos master。Mesos是一个框架,在设计它的时候只是为了用它执行Job来做数据分析。它并不能运行一个比如Web服务Nginx这样长时间运行的服务,所以我们需要借助marathon来支持这个需求。marathon有自己的REST API,我们可以创建如下的配置文件Docker.json:

{
  "container": {
    "type": "DOCKER",
    "docker": {
      "image": "libmesos/ubuntu"
    }
  },
  "id": "ubuntu",
  "instances": "1",
  "cpus": "0.5",
  "mem": "512",
  "uris": [],
  "cmd": "while sleep 10; do date -u +%T; done"
}

然后调用

curl -X POST -H "Content-Type: application/json" http://<master>:8080/v2/apps -d@Docker.json

我们就可以创建出一个Web服务在Mesos集群上。对于Marathon的具体案例,可以参考官方案例。

image source: google image search

Google的一个容器集群管理工具,它提出两个概念:

  1. Pods,每个Pod是一个容器的集合并部署在同一台主机上,共享IP地址和存储空间,比如Apache,Redis之类分为一组容器集合。
  2. Labels,提供服务标签,方便Pod容器之间的调用协作。

通过官方架构设计文档的介绍,可以详细的了解每个组件的设计思想。这是目前业界唯一在生产环境部署经验的基础上推出的开源容器方案,可以预见到未来会成为容器管理系统的行业参考标准。

image source: google image search

在琳琅满目的集群管理工具面前,如何管理单机的Docker容器也是一个需要解决问题。因为Docker占用内存小,在单机服务器上部署成百上千个容器也不足为奇。Panamax提供人性化的Web管理界面用来安装软件让部署变得更简单。并且,Panamax还提供丰富的容器模板,让在线创建服务成为可能。比如到DigitalOcean申请一台主机,安装一套Panamax启动为后台服务。然后通过Panamax Web界面安装Nginx、Mysql、Redis等服务镜像,这样可以快速搭建生产环境的应用场景。所有的操作都是在Web界面上完成,开发者只需要关注开发本身即可。

Docker的集成部署方案,是一套灵活简单的工具集解决方案。它克服了之前集群工具复杂、难用的困境,使用统一的Docker应用容器的概念部署软件应用。通过引入Docker技术,开发团队在面对复杂的生产环境中,可以结合自己团队的实际情况,定制出适合自己基础架构的配套软件发布方案。

肖德时, Red Hat Engineering Service/HSS 内部工具组Team Leader. Nodejs开源项目nodejs-cantas Lead Developer。擅长企业内部工具的设计以及实现。开源课程Rails Starter的发起人。rubygem: lazy_high_charts的Maintainer。twitter账号:xds2000,邮箱:xiaods@gmail.com

Docker在生产环境的应用实践已经给大家介绍,下期我将给大家介绍如何基于Docker快速构建开发环境,敬请期待!


感谢郭蕾对本文的审校和策划。

最新文章
高清美女写真生成新突破:用AI工具创造你的虚拟女友
在这个科技快速发展的时代,AI技术已经渗透到我们生活的方方面面,尤其是在艺术创作领域。你是否曾想象过,利用AI工具生成一张超逼真的美女写真,或许这位虚拟美女正是你欣赏艺术的化身?今天,我们将深入探索几款在美女写真生成领域备受瞩
神马搜索移动适配指南(神马搜索客户端)
1. 基本功能供站长提交pc->wap对应关系,神马搜索根据对应关系将收录的PC页替换为wap页2. 适用范围网站兼有PC版和Wap版3. 移动适配方式A. 自主适配B. 标注META声明C. 提交页面对应关系3.1 自主适配1)含义站长自己做好PC和wap网页的自适配
粤Z年检代办指引及要求
粤港车牌申请条件个人申请:1任期内担任县(市、区)级以上人大代表及政协委员2曾向内地善心捐款500万以上的海外华人华侨港澳台同胞注:个人车牌无法转让,企业车牌可以进行转让企业申请:1FV车牌(大陆→香港)一、在我省办理核准的国有企
轻极企业WordPress主题安装使用教程
轻极企业是一款非常强大的WordPress企业主题,这款主题采用扁平化设计、长页面视觉以及轻量化的jq动画脚本制作,灵活度非常高,如果你想要了解这款主题的功能,可以阅读这篇教程,帮助你了解更多。这款主题由5个分类目录列表模板,3个内页
华为荣耀9最新配置,科技与美学的巅峰融合
摘要:华为荣耀9配置全新升级,科技与美学的完美结合。这款手机拥有卓越的性能和出色的外观设计,为用户带来极致的使用体验。配置强大,运行流畅,同时注重细节和用户体验,展现了华为在科技领域的领先地位。华为荣耀9,一款值得期待的科技
网页复制粘贴助手,Chrome网页复制插件(谷歌浏览器复制插件)
Enable Copy是一款针对以Chrome为内核的浏览器的破解网站禁止复制插件,当用户安装好此插件,只需要点击浏览器右上角的Enable Copy 插件图案,即可复制那些网页不能复制的内容,对于从事编辑的人员非常有用,建议下载收藏。注意事项:1.Ena
用AI生成超逼真美女写真:探索最新AI绘画工具的使用技巧
Artbreeder:这是一款十分流行的AI生成作品平台。用户可以通过组合不同的图像生成新的艺术作品,尤其擅长生成独特的人物画像。Artbreeder的优点在于你可以通过简单的滑动条调整人物特征,如脸型、眼睛、头发等,产生意想不到的效果,但可能
贵州天眼旅游攻略_天眼必去旅游景点_天眼旅游攻略
贵州天眼旅游攻略_天眼必去旅游景点_平塘天眼旅游攻略 天眼简介: 天眼(500米口经球面射电望远镜FAST)位于贵州省黔南布依族苗族自治州平塘县克度镇大窝凼的喀斯特洼坑中,工程为国家重大科技基础设施,天眼工程由主动反射面系统、馈源支
python 正则表达式使用方法及爬虫案例
这篇博客是自己《数据挖掘与分析》课程讲到正则表达式爬虫的相关内容,主要简单介绍Python正则表达式爬虫,同时讲述常见的正则表达式分析方法,最后通过实例爬取作者的个人博客网站。希望这篇基础文章对您有所帮助࿰
搜狗搜索4.7.0.0旧版 苹果版
搜狗搜索4700版本是备受用户好评的历史版本,这款软件的功能十分全面,大家既可以输入文字进行搜索,不想打字的话也能通过语音输入来搜索相关的内容,同时它还拥有几个完全不同的主题版块,不管您是想浏览资讯或看小说,在这都是可行的哦!
相关文章
推荐文章
发表评论
0评