《Redis 核心技术与实战》课程学习笔记(一)

这篇具有很好参考价值的文章主要介绍了《Redis 核心技术与实战》课程学习笔记(一)。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

基本架构:一个键值数据库包含什么?

这样学 Redis,才能技高一筹

  • 为了保证数据的可靠性,Redis 需要在磁盘上读写 AOF 和 RDB,但在高并发场景里,这就会直接带来两个新问题:
    • 一个是写 AOF 和 RDB 会造成 Redis 性能抖动;
    • 另一个是 Redis 集群数据同步和实例恢复时,读 RDB 比较慢,限制了同步和恢复速度。
    • 其实,一个可行的解决方案就是使用非易失内存 NVM,因为它既能保证高速的读写,又能快速持久化数据。
  • 很多技术人都有一个误区,那就是,只关注零散的技术点,没有建立起一套完整的知识框架,缺乏系统观,但是,系统观其实是至关重要的。
    • 比如,要把 Redis 的长尾延迟维持在⼀定阈值以下:
      • 首先对 Redis 的线程模型做分析,对于单线程的 Redis 而言,任何阻塞性操作都会导致长尾延迟的产生。
      • 接着开始寻找可能导致阻塞的关键因素,一开始想到的是网络阻塞,但 Redis 使用了 IO 多路复用机制,并不会阻塞在单个客户端上。
      • 再后来,主要把目光转向了键值对数据结构、持久化机制下的 fork 调用、主从库同步时的 AOF 重写,以及缓冲区溢出等多个方面。
    • 如何高效地形成系统观呢?
      • 只要你能抓住主线,在自己的脑海中绘制一幅 Redis 全景知识图,这完全是可以实现的。
      • Redis 知识全景图包括“两大维度,三大主线”。“两大维度”就是指系统维度和应用维度,“三大主线”也就是指高性能、高可靠和高可扩展。
        《Redis 核心技术与实战》课程学习笔记(一),数据库,微服务,redis,学习,笔记
  • Redis 的各大典型问题
    《Redis 核心技术与实战》课程学习笔记(一),数据库,微服务,redis,学习,笔记

构建一个简单的键值数据库

可以存哪些数据?

  • 对于键值数据库而言,基本的数据模型是 key-value 模型。
    • 不同键值数据库支持的 key 类型一般差异不大,而 value 类型则有较大差别。
    • 我们在对键值数据库进行选型时,一个重要的考虑因素是它支持的 value 类型。
      • 例如,Memcached 支持的 value 类型仅为 String 类型,而 Redis 支持的 value 类型包括了 String、哈希表、列表、集合等。
      • Redis 能够在实际业务场景中得到广泛的应用,就是得益于支持多样化类型的 value。

可以对数据做什么操作?

  • SimpleKV 需要支持 3 种基本操作,即 PUT、GET 和 DELETE。
    • PUT:新写入或更新一个 key-value 对;
    • GET:根据一个 key 读取相应的 value 值;
    • DELETE:根据一个 key 删除整个 key-value 对。
  • 在实际的业务场景中,我们经常会碰到这种情况:查询一个用户在一段时间内的访问记录。
    • 这种操作在键值数据库中属于 SCAN 操作,即根据一段 key 的范围返回相应的 value 值。
    • 因此,PUT/GET/DELETE/SCAN 是一个键值数据库的基本操作集合。
  • 大体来说,一个键值数据库包括了访问框架、索引模块、操作模块和存储模块四部分:
    《Redis 核心技术与实战》课程学习笔记(一),数据库,微服务,redis,学习,笔记

采用什么访问模式?

  • 访问模式通常有两种:
    • 一种是通过函数库调用的方式供外部应用使用,就是以动态链接库的形式链接到我们自己的程序中,提供键值存储功能;
    • 另⼀种是通过网络框架以 Socket 通信的形式对外提供键值对操作,这种形式可以提供广泛的键值存储服务。
  • 实际的键值数据库也基本采用上述两种方式,例如 RocksDB 以动态链接库的形式使用,而 Memcached 和 Redis 则是通过网络框架访问。

如何定位键值对的位置?

  • 索引的作用是让键值数据库根据 key 找到相应 value 的存储位置,进而执行操作。
  • Memcached 和 Redis 采用哈希表作为 key-value 索引,而 RocksDB 则采用跳表作为内存中 key-value 的索引。

不同操作的具体逻辑是怎样的?

  • SimpleKV 的操作模块就实现了不同操作的具体逻辑:
    • 对于 GET/SCAN 操作而言,此时根据 value 的存储位置返回 value 值即可;
    • 对于 PUT 一个新的键值对数据而言,SimpleKV 需要为该键值对分配内存空间;
    • 对于 DELETE 操作,SimpleKV 需要删除键值对,并释放相应的内存空间,这个过程由分配器完成。

如何实现重启后快速提供服务?

  • SimpleKV 采用了常用的内存分配器 glibc 的 malloc 和 free,因此,SimpleKV 并不需要特别考虑内存空间的管理问题。Redis 的内存分配器提供了多种选择,分配效率也不一样。
  • 鉴于磁盘管理要比内存管理复杂,SimpleKV 就直接采用了文件形式,将键值数据通过调用本地文件系统的操作接口保存在磁盘上。
    • 此时,SimpleKV 只需要考虑何时将内存中的键值数据保存到文件中就可以了。
    • 和 SimpleKV 一样,Redis 也提供了持久化功能。不过,为了适应不同的业务场景,Redis 为持久化提供了诸多的执行机制和优化改进。

从 SimpleKV 演进到 Redis《Redis 核心技术与实战》课程学习笔记(一),数据库,微服务,redis,学习,笔记

文章来源地址https://www.toymoban.com/news/detail-522692.html

到了这里,关于《Redis 核心技术与实战》课程学习笔记(一)的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 《kafka 核心技术与实战》课程学习笔记(十)

    Apache Kafka 的所有通信都是基于 TCP 的,而不是基于 HTTP 或其他协议。 在开发客户端时,能够利用 TCP 本身提供的一些高级功能,比如多路复用请求以及同时轮询多个连接的能力。 除了 TCP 提供的这些高级功能有可能被 Kafka 客户端的开发人员使用之外,目前已知的 HTTP 库在很多

    2024年02月11日
    浏览(61)
  • 《kafka 核心技术与实战》课程学习笔记(八)

    Kafka 只对“已提交”的消息(committed message)做有限度的持久化保证。 第一个核心要素是“已提交的消息”。 当 Kafka 的若干个 Broker 成功地接收到一条消息并写入到日志文件后,它们会告诉生产者程序这条消息已成功提交。 可以选择只要有一个 Broker 成功保存该消息就算是已

    2024年02月16日
    浏览(39)
  • 《kafka 核心技术与实战》课程学习笔记(九)

    拦截器基本思想就是允许应用程序在不修改逻辑的情况下,动态地实现一组可插拔的事件处理逻辑链。 它能够在主业务操作的前后多个时间点上插入对应的“拦截”逻辑。 Spring MVC 拦截器的工作原理: Kafka 拦截器借鉴了这样的设计思路:可以在消息处理的前后多个时点动态

    2024年02月12日
    浏览(51)
  • 《kafka 核心技术与实战》课程学习笔记(七)

    压缩(compression)秉承了用时间去换空间的经典 trade-off 思想,具体来说就是用 CPU 时间去换磁盘空间或网络 I/O 传输量,希望以较小的 CPU 开销带来更少的磁盘占用或更少的网络 I/O 传输。 目前 Kafka 共有两大类消息格式,社区分别称之为 V1 版本和 V2 版本。 不论是哪个版本,

    2024年02月11日
    浏览(45)
  • 《kafka 核心技术与实战》课程学习笔记(五)

    严格来说这些配置并不单单指 Kafka 服务器端的配置,其中既有 Broker 端参数,也有主题级别的参数、JVM 端参数和操作系统级别的参数。 Broker 端参数也被称为静态参数(Static Configs): 所谓 静态参数 ,是指你必须在 Kafka 的配置文件 server.properties 中进行设置的参数 ,不管你

    2024年02月11日
    浏览(52)
  • 《MySQL 实战 45 讲》课程学习笔记(四)

    索引的出现其实就是为了提高数据查询的效率,就像书的目录一样。 哈希表 哈希表是一种以键 - 值(key-value)存储数据的结构,我们只要输入待查找的值即 key,就可以找到其对应的值即 Value。 哈希的思路很简单,把值放在数组里,用一个哈希函数把 key 换算成一个确定的位

    2024年02月14日
    浏览(43)
  • 《Kubernetes入门实战课》课程学习笔记(一)

    现在 Kubernetes 已经没有了实际意义上的竞争对手,它的地位就如同 Linux 一样,成为了事实上的云原生操作系统,是构建现代应用的基石。 现代应用是什么? 是微服务,是服务网格,这些统统要围绕着容器来开发、部署和运行。 使用容器就必然要用到容器编排技术,在现在只

    2024年02月17日
    浏览(66)
  • 唐宇迪机器学习实战课程笔记(全)

    机器学习模型的参数,不是直接数学求解,而是利用数据,进行迭代epoch,梯度下降优化求解。 目标:更好的拟合连续函数(分割连续样本空间的平面h(·)) ε ( i ) varepsilon^{(i)} ε ( i ) 是 真实值 y ( i ) y^{(i)} y ( i ) 与 预测值 h θ ( x ) = θ T x ( i ) h_theta (x)=theta^Tx^{(i)} h θ ​ ( x )

    2024年02月16日
    浏览(42)
  • 【HarmonyOS4学习笔记】《HarmonyOS4+NEXT星河版入门到企业级实战教程》课程学习笔记(一)

    课程地址: 黑马程序员HarmonyOS4+NEXT星河版入门到企业级实战教程,一套精通鸿蒙应用开发 (本篇笔记对应课程第 1 - 2节) 开场白,HarmonyOS 的一个简介,话不多说,直接看图吧! 工欲善其事必先利其器,开发准备需要两件事:1、开发文档;2、开发工具 打开鸿蒙官方网站,

    2024年04月24日
    浏览(40)
  • 北大肖臻老师《区块链技术与应用》系列课程学习笔记[27]以太坊-反思

    目录 一、智能合约的反思         1.Is smart contract really smart?         2. Irrevocability is a double edged sword.         3. Nothing is irrevocable. 二、语言设计上的反思         1.Is solidity the right programming language?         2.编写智能合约的语言应该有什么样的表达力? 三

    2024年01月20日
    浏览(49)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包