云计算-大数据与云计算

这篇具有很好参考价值的文章主要介绍了云计算-大数据与云计算。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

1.1大数据时代

其规模巨大到无法通过目前主流的计算机系统在合理时间内获取、存储、管理、处理并提炼以帮助决策者。

特点:

  • 价值密度低(Value)
  • 数据量大(Volume)PB级别是常态
  • 快速(Velocity)数据增长速度快,而且越新的数据价值越大,这就要求对数据的处理速度也要快。
  • 多样(Variety)数据的来源格式多样,除了结构化数据外,还包括半结构化或非结构化数据(视频、音频)
  • 复杂度(Complexity)对数据的处理和分析的难度大。

1.2云计算-大数据的计算

定义:云计算是通过网络按需提供可动态伸缩的廉价服务。

特点:超大规模、虚拟化、可靠性、通用性、高可伸缩性、按需服务、及其廉价

云计算按服务类型大致分为三类:

  • 将软件作为服务SaaS(software as a service)它将某些特定应用软件功能封装成服务
  • 将平台作为服务PaaS(platform as a Service)提供应用程序运行环境
  • 将基础设施作为服务LaaS(Infrastructure as a service)将硬件设备封装成服务提供给用户

1.3云计算发展现状

  • amazon:亚马逊的云计算称为Amazon Web Service(AWS)

率先在全球提供了弹性计算云EC2(Elastic Computing Cloud)和简单存储服务S3(Simple Storage Service),为企业提供计算和存储服务。

收费的服务项目包括存储空间、带宽、CPU资源以及月租费。

AWS服务种类非常齐全。

  • Google:谷歌是最大的云计算技术的使用者

采用Google Docs之类的应用,用户数据会保存在互联网上的某个位置,可以通过任何一个与互联网相连的终端十分便利地访问和共享者写数据。

谷歌已经孕育第三方在谷歌的云计算中通过Google App Engine运行大型并行应用程序。

发表学术论文的形式公开其云计算三大法宝:GFS、MapReduce和Bigtable,并在美国、中国等高校开设如何进行云计算编程课程。

  • Microsoft:微软紧跟云计算步伐,推出了Windos Azure操作系统

Azure(翻译为“蓝天”)是继Windows取代DOS之后,微软的又一次颠覆性转型。

微软的云平台包括几十万台服务器。

Azure的底层是微软全球基础服务系统,由遍布全球的第四代数据中心构成。

微软将为Windows Azure用户推出许多新的功能,不但能更简单地将现有的应用程序转移到云中,而且可以加强云托管应用程序的可用服务,充分体现出微软的“云”+“端”战略。

国内云计算崛起代表企业

  • 阿里巴巴:多处拥有云计算数据中心。
  • 懂游戏的云:游戏托管为特色。
  • 七牛云存储:存储服务为特色。
  • 青云:提供类似AWS服务。
  • 万物云:专门支撑智能硬件、大数据免费托管。
  • 云创大数据:全系列云计算大数据产品线。

1.4云计算实现机制

SOA构建层:服务接口、服务注册、服务查找、服务访问、服务工作交流

封装云计算能力成标准的Web Services服务

管理中间件层:

  1. 用户管理:账号管理、用户环境配置、用户交互管理、使用计费
  2. 任务管理:映像部署和管理、任务调度、任务执行、生命期管理
  3. 资源管理:负载均衡、故障检测、故障恢复、监视统计
  4. 安全管理:身份认证、访问授权、综合防护、安全审计

任务调度等,使资源能够高效、安全地为应用提供服务

资源池层:计算资源池、存储资源池、网络资源池、数据资源池、软件资源池

将大量同类型的资源构成同构或接近同构的资源池

物理资源层:计算机、存储器、网络设施、数据库、软件

管理中间件层和资源池层是云计算技术的最关键部分,SOA构建层的功能更多依靠外部设施提供。

1.5云计算压倒性的成本优势

电力成本低、管理成本低、资源利用率高、价格有优势。

详见《云计算(第三版)》文章来源地址https://www.toymoban.com/news/detail-553154.html

到了这里,关于云计算-大数据与云计算的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 大数据中间件——Kafka

    Kafka安装配置 首先我们把kafka的安装包上传到虚拟机中: 解压到对应的目录并修改对应的文件名: 首先我们来到kafka的config目录,我们第一个要修改的文件就是server.properties文件,修改内容如下: 主要修改三个部分,一个是唯一标识id,kafka的文件存储路径,一个是zookeeper的节

    2024年02月07日
    浏览(34)
  • 数据库中间件对比

    相当于把中间件作为一个独立的服务了,它将接收到的SQL 语句做了一些特定的分析:如分片分析、路由分析、读写分离分析、缓存分析等,然后将此 SQL 发往后端的真实数据库,并将返回的结果做适当的处理,最终再返回给用户。 中间件在Driver或者连接池的基础之上,增加了

    2024年02月12日
    浏览(42)
  • 【中间件】docker数据卷

            📝个人主页: 五敷有你         🔥系列专栏: 中间件 ⛺️稳中求进,晒太阳 修改nginx的html页面时,需要进入nginx内部。并且因为内部没有编辑器,修改文件也很麻烦。 这就是因为容器与数据(容器内文件)耦合带来的后果。要解决这个问题,必须将数据与容

    2024年03月27日
    浏览(29)
  • ShardingSphere数据库中间件

    数据库中的数据量猛增,访问性能也变慢了,优化迫在眉睫 ? 1. 关系型数据库本身比较容易成为系统瓶颈:单机存储容量、数据库连接数、处理能力都有限。 2. 当单表的数据量达到 1000W 或 100G 以后,由于查询维度较多,即使做了优化索引等操作, 查询性能仍下降严重。 方案

    2024年01月23日
    浏览(46)
  • mysql触发器监听数据投递中间件

    目前市面上有许多的 CDC(Change Data Capture) 框架用于监听数据库的数据变动,例如:canal、Debezium、Maxwell等都是用来解析 binlog 日志实现事件的监听。但是有一个情况就是如果公司对 binlog 日志文件的权限管控的很严格,那么这些用于监听的工具就可能因为权限的问题无法使用

    2024年02月07日
    浏览(32)
  • 中间件中防止数据上下文并发导致异常

    在ASP.NET Core中,如果你想在中间件中只使用一个实例的数据库上下文(DbContext),你需要确保这个上下文在整个请求中是可用的,并且中间件在处理请求时能够访问它。以下是如何做到这一点的步骤: 注册DbContext为Scoped : 在Startup.cs的 ConfigureServices 方法中,你需要将你的D

    2024年01月24日
    浏览(33)
  • Jasypt 数据库及中间件密码加解密

    9一、引入jar包 二、新增JasyptUtils工具类 三、修改application.yml 将加密后密码替换值yml文件ENC()括号内

    2024年02月13日
    浏览(36)
  • PHP Laravel 路由、中间件、数据库等例子

    以下是使用Laravel框架时的一些常见示例: 1. 路由(Routes): // 定义基本路由 Route::get(\\\'/home\\\', \\\'HomeController@index\\\'); // 带有参数的路由 Route::get(\\\'/user/{id}\\\', \\\'UserController@show\\\'); // 路由组 Route::middleware([\\\'auth\\\'])-group(function () {     Route::get(\\\'/dashboard\\\', \\\'DashboardController@index\\\');     Route::pos

    2024年02月16日
    浏览(42)
  • 【Jmeter】压测mysql数据库中间件mycat

    目录 背景 环境准备 1、下载Jmeter 2、下载mysql数据库的驱动包 3、要进行测试的数据库 Jmeter配置 1、启动Jmeter图形界面 2、加载mysql驱动包 3、新建一个线程组,然后如下图所示添加 JDBC Connection Configuration 4、配置JDBC Connection Configuration 5、如图所示添加JDBC Request 6、如图所示配置

    2024年02月14日
    浏览(35)
  • ShardingSphere:强大的分布式数据库中间件【图文】

    Sharding-JDBC :它提供了一个轻量级的 Java 框架,在 Java 的 JDBC 层提供额外的服务。使用客户端直连数据库,以 jar 包形式提供服务,无需额外部署和依赖,可理解为增强版的 JDBC 驱动,完全兼容 JDBC 和各种 ORM 框架。Sharding-JDBC主要用于嵌入到应用程序中,使应用程序能够透明地

    2024年04月28日
    浏览(39)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包