AWS EMR集群的费用构成

这篇具有很好参考价值的文章主要介绍了AWS EMR集群的费用构成。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一、费用构成总览

目前根据账单项目可以看到EMR费用由以下部分构成

aws emr 计费规则,AWS,aws,服务器,云计算

  • 实例费用(Spot、SP、On demand)
  • EMR管理费
  • EBS卷
  • 跨区流量费(InterAZ Transfer)

其中

EC2-Instance-Spot:EMR竞价实例,费用最低,但是存在被强制回收和资源池不足而拉起时间很长的现象

EC2-Instance-Ondemand:EMR按需实例,费用最高,不会被强制回收,拉起速度也较快

EC2-Instance-SP:通过购买Saving Plan优惠政策覆盖的Ondemand实例

SP具体介绍参考下面的文档

Savings Plans – Amazon Web Services

SP的基本原理类似于直接购买一定的机器的使用量以获得优惠价,优惠价高于竞价而低于按需。SP是公司层面的优惠,而SP所适配的机型是采取折扣低的机器优先适配的原则,因此其适配是动态的,不受人为控制。

若其他部门出现使用【SP折扣后价格更低的按需的机型】的使用量增加的情况,那么SP的优惠价也会自动调整到其他部门去。

二、实例费用与EMR机器管理费

按需实例费用可以参考官网

大数据处理和数据分析 - Amazon EMR 定价 - Amazon Web Services

其中左侧为按需(on demand)时的费用

右侧是EMR集群拉起机器时所需额外支出的机器管理费

aws emr 计费规则,AWS,aws,服务器,云计算

※价格会变动

而竞价(on spot)时的费用参考官网

Amazon EC2竞价型实例价格_EC2虚拟云服务器托管 - AWS云服务

aws emr 计费规则,AWS,aws,服务器,云计算

※价格会变动

此外还可以直接在EMR页面中查看到具体费用

aws emr 计费规则,AWS,aws,服务器,云计算

※价格会变动

三、EBS卷

EBS卷费用参照官网

高性能数据块存储 – Amazon EBS 定价 – Amazon Web Services

aws emr 计费规则,AWS,aws,服务器,云计算

  • 各个区域单价不同
  • 按月计费,即根据月的天数不同而日单价不同,例如2月日费用则比1月高10%,因为2月有28天而1月有31天,相差近10%。

四、跨区流量费

跨区流量费具体参考以下地址

Amazon EC2实例价格_EC2虚拟云服务器托管价格 - AWS云服务

aws emr 计费规则,AWS,aws,服务器,云计算

为了减少跨区流量费,最好的是作业运行中使用EMR集群本身的HDFS服务来对数据进行缓存,这样就能减少数据的写入写出和减少费用。文章来源地址https://www.toymoban.com/news/detail-816357.html

到了这里,关于AWS EMR集群的费用构成的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 利用 Amazon EMR Serverless、Amazon Athena、Apache Dolphinscheduler 以及本地 TiDB 和 HDFS 在混合部署环境中构建无服务器数据仓库(一)云上云下数据同步方案设计

    在数据驱动的世界中,企业正在寻求可靠且高性能的解决方案来管理其不断增长的数据需求。本系列博客从一个重视数据安全和合规性的 B2C 金融科技客户的角度来讨论云上云下混合部署的情况下如何利用亚马逊云科技云原生服务、开源社区产品以及第三方工具构建无服务器

    2024年04月25日
    浏览(40)
  • 医院电子病历编辑器,EMRE(EMR Editor)源码

    电子病历主要面向医院机构医生、护士,提供对住院病人的电子病历书写、保存、修改、打印等功能。本系统基于云端SaaS服务方式,通过浏览器方式访问和使用系统功能,提供电子病历在线制作、管理和使用的一体化电子病历解决方案,为医疗机构的电子病历业务开展提供有

    2024年02月07日
    浏览(48)
  • EMR磁盘挂载细节与解释

    大多数情况下, 在使用了S3作为主要的存储服务后,我们在创建EMR集群时通常是不会再添加EBS卷的,但是作为一些用用的参考,我们还是记录一下这方面的情况,以备后查。首先,整个EMR集群,添加的卷会分别挂载到/mnt, /mnt1, /mnt2, …目录上,在配置HDFS的本地映射目录时,我

    2024年02月13日
    浏览(25)
  • 一套电子病历系统源码(EMR)

    EMR 电子病历系统源码 电子病历系统面向门诊医生和病房临床医生,实现了医生日常阅读、书写病历和医院管理病历的需求,它包括知识库管理、病历模版制作、医生书写病历、开各种检查检验申请单、查询各种报告单、电子病历浏览、病历质量控制等功能。 它将病人在院期

    2024年02月16日
    浏览(38)
  • 使用 Apache DolphinScheduler 进行 EMR 任务调度

    By AWS Team 随着企业规模的扩大,业务数据的激增,我们会使用 Hadoop/Spark 框架来处理大量数据的 ETL/聚合分析作业,⽽这些作业将需要由统一的作业调度平台去定时调度。 在 Amazon EMR 中,可以使用 AWS 提供 Step Function,托管 AirFlow,以及 Apache Oozie 或 Azkaban 进行作业的调用。但随

    2024年02月16日
    浏览(40)
  • Amazon EMR Hudi 性能调优——Clustering

    随着数据体量的日益增长,人们对 Hudi 的查询性能也提出更多要求,除了 Parquet 存储格式本来的性能优势之外,还希望 Hudi 能够提供更多的性能优化的技术途径,尤其当对 Hudi 表进行高并发的写入,产生了大量的小文件之后,又需要使用 Presto/Trino 对 Hudi 表进行高吞吐的即席

    2024年02月12日
    浏览(45)
  • 使用 Alluxio 优化 EMR 上 Flink Join

    业务背景痛点 流式处理的业务场景,经常会遇到实时消息数据需要与历史存量数据关联查询或者聚合,比如电商常见的订单场景,订单表做为实时事实表,是典型的流式消息数据,通常会在 kafka 中,而客户信息,商品 SKU 表是维度表,通常存在业务数据库或者数仓中,是典型

    2023年04月09日
    浏览(33)
  • AWS创建EKS集群

    新钛云服已累计为您分享 738 篇技术干货 使用 Amazon EKS(Elastic Kubernetes Service)集群,以便能够轻松管理、部署和扩展应用程序容器。EKS提供了一个高度可扩展、弹性、安全和稳定的Kubernetes控制平面,并自动处理集群的部署、升级和维护。使用EKS集群可以让开发团队专注于构

    2024年02月10日
    浏览(29)
  • 阿里云EMR2.0平台:让大数据更简单

    摘要:本文整理自阿里云资深技术专家李钰(绝顶)在 阿里云EMR2.0线上发布会 的分享。本篇内容主要分为三个部分: 1.EMR 平台概述 2.EMR2.0 新平台核心能力 3.总结 EMR 平台是开源大数据的云原生运行环境,阿里云EMR 根据云原生的特点,在弹性伸缩、稳定性、智能化和研发效能四

    2024年02月12日
    浏览(37)
  • 基于EMR的新一代数据湖存储加速技术详解

    摘要:本文整理自阿里云开源大数据平台数据湖存储团队孙大鹏在7月17日阿里云数据湖技术专场交流会的分享。本篇内容主要分为两个部分: 背景介绍 JindoData 数据湖存储解决方案 点击查看直播回放 大数据行业蓬勃发展,主要源自于通讯技术的发展,全球数据规模,预计2

    2024年02月02日
    浏览(56)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包