读高性能MySQL(第4版)笔记19_云端和合规性

这篇具有很好参考价值的文章主要介绍了读高性能MySQL(第4版)笔记19_云端和合规性。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

读高性能MySQL(第4版)笔记19_云端和合规性文章来源地址https://www.toymoban.com/news/detail-711050.html

1. 如何构建数据库环境

1.1. 托管MySQL

1.2. VM上构建

1.3. 天下没有免费的午餐,每一个选择都伴随着一系列的权衡

2. 托管MySQL

2.1. 服务商提供了一个可访问的数据库设置程序,而不需要用户深入了解MySQL的具体细节

2.2. 使用托管MySQL将缺乏很多的可见性和控制能力

2.3. Aurora MySQL

2.4. 谷歌云平台(GCP)提供了CloudSQL

3. Aurora MySQL

3.1. Aurora MySQL是一个兼容MySQL的托管数据库

3.2. 将计算和存储分开,这使二者可以更灵活地单独扩展

3.3. Aurora中的所有托管解决方案都不兼容MySQL 8.0,而一些较旧的解决方案只兼容MySQL   5.6

3.4. 标准的Aurora产品是长期运行的计算实例,在其中选择一个实例类型

3.5. Aurora集群内的复制完全是Amazon专有的,而不是我们在Oracle MySQL中所知道和使用的复制

3.6. Aurora无服务器(Serverless)

3.6.1. Aurora MySQL的无服务器服务移除了长期运行的计算程序,并利用亚马逊的无服务器平台为数据库的计算层提供服务

3.7. Aurora全局数据库(Global Database)

3.8. Aurora多主节点(Multi-Master)

3.8.1. 多主节点是Aurora集群的一种特殊风格,可以同时在多个计算节点上接受写操作

4. GCP Cloud SQL

4.1. Cloud SQL是GCP的托管MySQL的产品

4.2. 它运行的是社区版MySQL,但特别禁用了某些功能,以实现产品的多租户和可管理

4.3. SUPER权限被禁用

4.4. 插件加载功能被禁用

4.5. 一些客户端也被禁用了,如mysqldump和mysqlimport

4.6. 原生的高可用性支持

4.7. 静止数据的原生加密

4.8. 使用多种方法实现灵活管理的升级

5. 虚拟机上的MySQL

5.1. 在虚拟机上运行MySQL就像在裸金属服务器上运行一样,你可以完整和彻底地控制所有的操作面

5.2. CPU

5.2.1. 虚拟CPU,而不是物理CPU

5.2.2. vCPU数量的计数公式

5.2.2.1. (CPU核的数量×95%CPU总使用量)×2

5.2.2.2. 建议将50%作为常规的使用率目标,最高可达到65%~70%

5.2.2.3. 如果维持在70%或更高的CPU使用率,将可能会看到延迟增加,此时应该考虑添加更多的CPU

5.2.3. 运行的是一个高流量的Web应用程序,则可能需要确保使用更新一代的芯片

5.3. 内存

5.3.1. RAM可以极大地影响MySQL的性能

5.3.2. 应为工作数据集选择最适合需求的机器规格,但错误的做法是RAM太多而不是不够

5.4. 网络性能

5.4.1. 如果有一个将读取大量数据的批处理进程,则你可能会发现在较小的机型上带宽已耗尽

5.5. 选择正确的磁盘类型

5.5.1. 高读密集型的工作负载将受益于更多的内存而不是磁盘性能,因为内存访问要快几个数量级

5.5.2. 如果工作集大于InnoDB缓冲池,那么将总是需要到磁盘上读取一些数据

5.5.3. 写密集型的工作负载总是会转移到磁盘上,这也是大多数人第一次看到磁盘瓶颈的地方

5.6. 磁盘的连接类型

5.6.1. 本地连接磁盘的好处是,其提供了令人难以置信的高性能和一致的吞吐量,但也很容易导致数据丢失

5.6.1.1. 被视为仅用于短暂数据的磁盘

5.6.2. 网络连接的磁盘可提供冗余和可靠性

5.6.2.1. 网络连接的磁盘可能会遇到本地连接的磁盘不会出现的停顿

5.6.3. 还可以使用磁盘快照技术让副本复制变得非常快,即使在许多TB级大小的磁盘上

5.6.3.1. 可以让需要在副本可用之前赶上来的复制的延迟降到最低

5.7. SSD与HDD

5.7.1. SSD的启动速度比HDD快两到三倍

5.7.2. 如果启动时间很重要,特别是在停机或重新启动的情况下,那么请始终使用SSD

5.8. IOPS和吞吐量

5.8.1. Percona Toolkit包中的pt-diskstats

5.9. 只允许服务器恢复在线和复制,以让它自己自然地重新连接

5.9.1. 使用SSD引导磁盘来允许尽可能快地重新启动。通常系统会在5分钟内恢复在线

5.9.2. 禁止长达5分钟时间内的任何服务器宕机的告警通知,以使系统完全重启并恢复正常

5.9.3. 如果源服务器重新启动,你可以编写一个选项来动态关闭read_only标志,从而让写入在没有人工干预的情况下继续进行

5.9.4. 通过自动地向可能需要了解中断的团队或渠道发送邮件或消息,来让沟通最大化

5.10. 建议将操作系统和MySQL数据分开

5.10.1. 磁盘快照将仅限于MySQL数据,并且不包含任何操作系统信息

5.10.2. 在使用网络连接的磁盘的情况下,可以轻松地断开磁盘的连接并重新连接到另一台机器

5.10.3. 对于网络连接的磁盘,还可以升级或替换操作系统,而不必将数据重新复制到文件系统中

5.11. 备份二进制日志

5.11.1. 将二进制日志发送到一个存储桶中

5.11.2. 在桶上设置生命周期控制,以便在一段确定的时间后自动清除旧文件

5.11.3. 阻止在特定时间之前删除文件,或完全不允许删除

5.11.4. 控制谁可以读取或删除这些数据对于维护安全的备份策略至关重要

5.11.5. 建议允许所有数据库机器写入,但没有机器能够读取或删除。分别或同时控制受限账户、机器的读取和删除

5.12. 自动扩展磁盘

5.12.1. 对于网络连接的磁盘,需要为预分配的而不是已使用的空间付费

5.12.2. 一种优化方法是将磁盘空间使用率目标提到更高的百分比

6. 合规性

6.1. DBA的工作并不局限于在业务运行时管理这些数据,还需要帮助企业保护数据,并使数据符合法律要求,或获得对企业至关重要的监管认证

6.2. 合规是一个涉及政策和控制的广泛领域,对每种政策和控制的解释也很多

6.3. GRC

6.3.1. 治理(Governance)

6.3.2. 风险管理(Risk management)

6.3.3. 合规性(Compliance)

6.4. 控制是公司内部定义的流程和规则,用于减少意外风险结果发生的概率

6.5. 合规性的构建是一个持续的过程,在需要的时候不容易“添加”

6.6. 法规法案

6.6.1. 服务组织控制类型2(SOC 2)

6.6.2. 2002年发布的萨班斯-奥克斯利法案(SOX)

6.6.3. 支付卡行业数据安全标准(PCI-DSS)

6.6.4. 1996年发布的《健康保险可携带性和责任法案》(HIPAA)

6.6.5. 联邦风险和授权管理计划(FedRAMP)

6.6.6. 通用数据保护条例(GDPR)是欧盟于2016年推出的

6.6.7. 2020年,欧盟司法法院裁决了欧盟和Facebook爱尔兰分部之间的一桩案件。这项通常被称为Schrems II

6.7. 不要共享用户

6.7.1. 不要跨服务共享数据库凭据

6.8. 不要在代码仓库中提交生产数据库凭据

6.8.1. 一种常见的做法是在合并一个pull请求之前,扫描代码库寻找潜在的机密字符串(GitHub等代码仓库托管服务可以实现

6.9. 确保密码始终以加密方式而不是以明文形式存储

6.9.1. 机密信息的长度做了限制,如果想存储比数据库的用户和密码对更长的内容,可能会导致意外

6.10. 区域的可用性

6.11. 角色与数据分离

6.11.1. 基于数据泄露将给企业或客户带来的风险等级对数据进行分离

6.12. 出于合规性原因进行分片

6.13. 独立的数据库用户

6.14. 跟踪变更

6.14.1. 很多合规性法规都附带了跟踪变更的控制措施

6.15. 很多合规性法规都附带了跟踪变更的控制措施

6.16. ⑩数据访问日志

6.16.1. 要求维护特定数据集的变更日志或访问日志

6.16.2. Percona审计日志插件是Percona发行的MySQL分支的一部分,但是默认情况下没有安装或启用

6.17. ⑾schema变更的版本控制

6.18. 建议设置这样一个策略:“删除六个月内未连接过数据库的用户”。这一做法将有助于防止使用不需要的、现在已成为负担的访问

7. 不建议使用触发器

7.1. 触发器会导致写性能下降,这会在最糟糕的时候对性能造成影响

7.2. 触发器相当于在数据库中存储业务逻辑,这是不推荐的

7.3. 在数据库中存储代码可能会绕过测试、转移和部署代码的任何过程。触发器可能意外地导致故障

7.4. 触发器只能支持跟踪写入操作。无法扩展成可以跟踪读取访问的解决方案

到了这里,关于读高性能MySQL(第4版)笔记19_云端和合规性的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 读高性能MySQL(第4版)笔记12_查询性能优化(下)

    2.3.1.1. 读取行指针和需要排序的字段,对其进行排序,然后再根据排序结果读取所需要的数据行 2.3.1.2. 即需要从数据表中读取两次数据,第二次读取数据的时候,因为是读取排序列进行排序后的所有记录,这会产生大量的随机I/O,所以两次传输排序的成本非常高 2.3.2.1. 先

    2024年02月08日
    浏览(49)
  • 读高性能MySQL(第4版)笔记10_查询性能优化(上)

    4.11.1.1. 在存储引擎层完成的 4.11.2.1. 直接从索引中过滤不需要的记录并返回命中的结 4.11.2.2. 在MySQL服务器层完成的,但无须再回表查询记录 4.11.3.1. 在MySQL服务器层完成 4.11.3.2. 需要先从数据表中读出记录然后过滤 4.13.2.1. 使用单独的汇总表 5.5.1.1. 定期清除大量数据时,

    2024年02月08日
    浏览(61)
  • 读高性能MySQL(第4版)笔记18_扩展MySQL

    4.2.2.1. 增加更多应用节点可以扩展服务用户请求的客户端数 4.2.2.2. 最终会被单源数据库主机的能力所限制,该数据库主机将要负责响应所有的读取请求 4.2.2.3. 高CPU使用率意味着服务器正花费所有的时间处理查询 4.2.2.4. CPU的使用率越高,查询的延迟也会越长 6.9.1.1. 负载均

    2024年02月08日
    浏览(52)
  • 读高性能MySQL(第4版)笔记03_监控

    7.1.1.1. 200响应代码 7.1.2.1. 202已接受 10.3.2.1. 连接的线程数(threads_connected)很高,但运行的线程数(threads_running)仍然很低 10.3.3.1. 连接的线程数(threads_connected)和运行的线程数(threads_running)都处于高值并持续增加 10.5.1.1. 数据库工程师不断努力的目标之一

    2024年02月12日
    浏览(37)
  • 读高性能MySQL(第4版)笔记01_MySQL架构(上)

    1.2.2.1. 存储过程 1.2.2.2. 触发器 1.2.2.3. 视图 3.3.2.1. 共享锁(shared lock) 3.3.2.2. 资源上的读锁是共享的,或者说是相互不阻塞的 3.3.3.1. 排他锁(exclusive lock) 3.3.3.2. 写锁则是排他的,也就是说,一个写锁既会阻塞读锁也会阻塞其他的写锁 3.3.3.3. 只有这样才能确保在特定的

    2024年02月13日
    浏览(45)
  • 读高性能MySQL(第4版)笔记02_MySQL架构(下)

    2.6.4.1. 失败的事务可能导致不一致的结果,因为某些部分可以回滚,而其他部分不能回滚 5.1.1.1. 在表的.ibd文件中 5.1.1.2. 减少了I/O,非常高效 5.2.1.1. 分区定义 5.2.1.2. 表定义 5.2.1.3. 存储程序定义 5.2.1.4. 字符集 5.2.1.5. 排序信息 5.2.2.1. 每个表的.ibd和.frm文件被替换为已经

    2024年02月12日
    浏览(55)
  • 读高性能MySQL(第4版)笔记17_复制(下)

    1.3.1.1. 安全补丁 1.3.1.2. 内核更新 1.3.1.3. 一些配置选项更改后需要重新启动才能生效 1.3.2.1. 确定将哪个副本切换为新的源 1.3.2.1.1. 一个包含所有数据的副本 1.3.2.2. 检查延时,确保延时在秒级别 1.3.2.3. 通过设置super_read_only停止数据写入源服务器 1.3.2.4. 等待副本与目标完

    2024年02月08日
    浏览(47)
  • 读高性能MySQL(第4版)笔记16_复制(上)

    4.1.1.1. 通过记录所有在源端执行的数据变更语句来实现的 4.1.1.2. 简单且紧凑 4.1.1.3. 一条更新了大量数据的SQL语句,在二进制日志中可能仅仅需要几十字节存储 4.1.1.4. “不确定性”的SQL语句问题 4.1.1.4.1. 如果在源和副本上,记录的排序不同,这条SQL语句在源和副本上删除

    2024年02月08日
    浏览(40)
  • 读高性能MySQL(第4版)笔记14_备份与恢复(中)

    7.3.6.1. 消除了底层数据存储引擎的差异 7.3.7.1. 如果MySQL在内存中的数据还没有损坏,当不能得到一个正常的裸文件备份时,或许可以得到一个可以信赖的逻辑备份 7.4.1.1. 某些场景下比数据库文件本身更大 7.4.2.1. 浮点表示的问题、软件Bug等都会导致问题 7.4.3.1. MySQL中导出数

    2024年02月08日
    浏览(33)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包