阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

Mesos的现实使用场景

475次阅读
没有评论

共计 1700 个字符,预计需要花费 5 分钟才能阅读完成。

【编者的话】文中内容来源于 stackoverflow 上的一个 问题,提问者想知道 Mesos 在实际的使用中都有哪些使用场景,来自 Twitter 的工程师从容器编排、资源利用率、优先级和资源抢占、以及服务运行等几个角度,对问题进行了回答。

我尝试探究用户使用 Mesos 的原因究竟有哪些,以下是暂时列出的几个要点,不知道还有没有其他的例子?

1) 让用户把所有的服务都运行在同一个集群中而不是运行在专用的集群中(比如通过终端应用的集群 +DevOps 的方式,例如像 Jekins)

2) 在同一个集群中运行不同类型的成熟的服务(dev,test,production)不知道这样是否可行?Kubernetes 中已经可以通过 lables 标签来提供类似的功能。

3) Mesos 通过提供简化部署、统一标准的 API、资源装箱等一系列的操作,简化了传统的分布式服务(比如像 Hadoop)的使用流程。

回答(Dave Lester):

我目前在 Twitter 工作,我同时参与到了 Apache Mesos 以及 Autora 项目的相关工作中,下面是我对 Mesos 使用场景的理解。

Mesos 的实际使用场景可能会受到以下几个因素的影响:集群规模(数十台服务器到成千上万台)、可使用的硬件(专用的 / 静态的,或者是云端的 / 可扩展的)、以及工作量(提供基本的服务或是批量处理的服务,或两种服务同时提供)

上面所列出的几点都很有道理,这里我再加上几种新的使用案例。

容器编排

随着容器环境(比如 Docker)变得越来越流行,许多潜在的用户正在寻找一种 Mesos+ 调度器的方案来管理镜像在创建之后的编排工作。Mesos 到目前为止已经相当成熟,已经被证明可以规模化地提供服务,我认为 Mesos 的解决方案比某些临时出现的方案要好很多。

提升资源利用率

对于使用超过 50 台服务器的公司而言,一个通常的使用 Mesos 的动机就是提升资源利用率,并且减少运维成本。目前已经有许多这样的公司,比如各种公有云 和私有云服务的提供商。在 Ebay 的案例中,它们曾经在 Mesos 上运行 Jekins 这样可以减少虚拟机的使用。Mesosphere 也发布了相关的文章 对于 HubSpot (运行在 AWS 上) 的案例研究, 文章中介绍了 HubSpot 是如何使用几十台大型的服务器来替代了几百台小型的服务器,使得硬件的利用率更高。

优先级和资源抢占

在 Twitter,我们通过一个调度器:Apache Aurora 来运行 Mesos 服务。在这个使用场景中,我们有一种方式可以提高资源的利用率:在同一个集群上运行不同的成熟的服务。Aurora 有一个环境变量的概 念,这可以让用户可以运行不同环境类型的服务,比如 production、development、或者是 test 环境。此外,Aurora 还有一种内建 的优先级抢占机制,这可以允许它来优先考虑 production 环境下的任务,当这些资源需要被 production 环境中的任务使用的时候,系统可以及 时结束非 production 的任务,在每一种环境中,都有类似的优先级系统。

长期的,功能性相关的资源抢占功能也将会存在于 Mesos 本身的内核中 — 这是一个杀手级的特性,这个功能可以增强资源利用率,并且在不同的环境下(dev、test、prod)运行不同的成熟的服务。如果你对相关的话题感兴 趣,可以参考 MESOS-155 以及 MESOS-1474。

同时运行批处理服务和普通服务

可以在一个共享的 Mesos 集群中同时运行批处理任务以及其他的普通服务,这将对资源利用率的提升起到关键作用。让我们回顾一下 Myriad 项 目,这个项目希望把 Mesos 以及 YARN 的工作任务放在同一个集群中。在这个时候,用户并不在意同时进行批量服务和普通服务的大规模的部署工作,在一个 共享的集群中运行多个框架也将变得更加简单,这也是社区发展的一个方向。

使用 Docker,7 个命令部署一个 Mesos 集群  http://www.linuxidc.com/Linux/2015-06/118589.htm

本文永久更新链接地址 :http://www.linuxidc.com/Linux/2015-06/118872.htm

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-20发表,共计1700字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中

星哥玩云

星哥玩云
星哥玩云
分享互联网知识
用户数
4
文章数
19348
评论数
4
阅读量
7828091
文章搜索
热门文章
开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南 大家好,我是星哥。之前介绍了腾讯云的 Code...
星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛 NAS-6:抖音视频同步工具,视频下载自动下载保存 前言 各位玩 NAS 的朋友好,我是星哥!...
云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

云服务器部署服务器面板 1Panel:小白轻松构建 Web 服务与面板加固指南 哈喽,我是星哥,经常有人问我不...
我把用了20年的360安全卫士卸载了

我把用了20年的360安全卫士卸载了

我把用了 20 年的 360 安全卫士卸载了 是的,正如标题你看到的。 原因 偷摸安装自家的软件 莫名其妙安装...
星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛 NAS-3:安装飞牛 NAS 后的很有必要的操作 前言 如果你已经有了飞牛 NAS 系统,之前...
阿里云CDN
阿里云CDN-提高用户访问的响应速度和成功率
随机文章
150元打造低成本NAS小钢炮,捡一块3865U工控板

150元打造低成本NAS小钢炮,捡一块3865U工控板

150 元打造低成本 NAS 小钢炮,捡一块 3865U 工控板 一块二手的熊猫 B3 工控板 3865U,搭...
星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛 NAS-3:安装飞牛 NAS 后的很有必要的操作 前言 如果你已经有了飞牛 NAS 系统,之前...
一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸

一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸

一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸 前言 作为天天跟架构图、拓扑图死磕的...
星哥带你玩飞牛NAS硬件02:某鱼6张左右就可拿下5盘位的飞牛圣体NAS

星哥带你玩飞牛NAS硬件02:某鱼6张左右就可拿下5盘位的飞牛圣体NAS

星哥带你玩飞牛 NAS 硬件 02:某鱼 6 张左右就可拿下 5 盘位的飞牛圣体 NAS 前言 大家好,我是星...
这个开源软件130k的star数!让电脑轻松管理安卓手机的神器

这个开源软件130k的star数!让电脑轻松管理安卓手机的神器

这个开源软件 130k 的 star 数!让电脑轻松管理安卓手机的神器 大家好,我是星哥。今天给大家安利一款宝...

免费图片视频管理工具让灵感库告别混乱

一言一句话
-「
手气不错
你的云服务器到底有多强?宝塔跑分告诉你

你的云服务器到底有多强?宝塔跑分告诉你

你的云服务器到底有多强?宝塔跑分告诉你 为什么要用宝塔跑分? 宝塔跑分其实就是对 CPU、内存、磁盘、IO 做...
浏览器自动化工具!开源 AI 浏览器助手让你效率翻倍

浏览器自动化工具!开源 AI 浏览器助手让你效率翻倍

浏览器自动化工具!开源 AI 浏览器助手让你效率翻倍 前言 在 AI 自动化快速发展的当下,浏览器早已不再只是...
自己手撸一个AI智能体—跟创业大佬对话

自己手撸一个AI智能体—跟创业大佬对话

自己手撸一个 AI 智能体 — 跟创业大佬对话 前言 智能体(Agent)已经成为创业者和技术人绕...
星哥带你玩飞牛NAS-12:开源笔记的进化之路,效率玩家的新选择

星哥带你玩飞牛NAS-12:开源笔记的进化之路,效率玩家的新选择

星哥带你玩飞牛 NAS-12:开源笔记的进化之路,效率玩家的新选择 前言 如何高效管理知识与笔记,已经成为技术...
Prometheus:监控系统的部署与指标收集

Prometheus:监控系统的部署与指标收集

Prometheus:监控系统的部署与指标收集 在云原生体系中,Prometheus 已成为最主流的监控与报警...