读书笔记《大型网站技术架构:核心原理与案例分析》

该博客围绕大型网站架构展开,介绍了架构演化历程、模式及核心要素。阐述了高性能架构的测试与优化策略,涵盖Web前端、应用和存储服务器;讲解高可用架构的度量、各层设计及软件质量保证;还说明了伸缩性架构的定义、设计方法,包括不同功能分离和集群规模伸缩。

第一章 大型网站架构演化

  1. 架构演化发展历程:缓存—>集群—>读写分离—>反向代理、CDN—>分布式文件系统、数据库系统—>NoSQL—>业务拆分—>分布式服务

第二章 大型网站架构模式

  1. 架构解决方案:分层、业务分割、分布式(各种资源)、集群、缓存、异步、冗余(服务器和备份)、自动化(各种)、安全。
  2. 以微博来举例。

第三章 大型网站核心架构要素

  1. 非功能性需求:
    • 性能
    • 可用性:当服务器宕机时,服务和应用依然可用。
    • 伸缩性:标准——就是是否可以用多台服务器构建集群,是否容易向集群中添加新的服务器。
    • 扩展性:目的——快速响应需求。手段——事件驱动和分布式服务。
    • 安全性:

第四章 瞬时响应:网站的高性能架构

  1. 网站性能测试
    • 不同视角:用户、开发人员、运维人员
    • 性能指标:响应时间、并发、吞吐、性能计数器。
    • 性能测试方法、报告
    • 优化策略:定位和优化(Web前端、应用服务器和储存服务器)

  2. Web前端性能优化:浏览器、CDN加速、反向代理。

  3. 应用服务器优化:缓存、异步操作、集群、代码优化(多线程、资源复用、数据结构、垃圾回收)

  4. 存储性能优化:硬盘类型、储存数据结构(B+和LSM)、文件系统硬件(RAID磁盘阵列和HDFS分布式文件系统)

第五章 万无一失:网站的高可用架构

  1. 可用性的度量与考核
  2. 高可用网站架构:应用层、服务层和数据层
  3. 高可用的应用:负载均衡失效转移、Session各种管理方案(复制、绑定、Cookie和统一管理)
  4. 高可用的服务:服务分级、超时、异步、服务降级和幂等性设计。
  5. 高可用的数据:CAP原理、数据备份(冷备、同/异步热备)、失效转移。
  6. 高可用网站软件质量保证:网站发布、自动化测试、预发布、代码控制、灰度发布
  7. 网站运行监控:用户行为(Storm)、服务器性能(Ganglia)、运行数据(业务中写)

第六章 永无止境:网站的伸缩性架构

  1. 定义:不需要改变网站的软硬件设计,仅仅通过改变部署的服务器数量就可以扩大或者缩小网站的服务处理能力。
  2. 网站架构的伸缩性设计:
    a. 不同的功能进行物理分离:纵向分离、横向分离(业务分割后分离)
    b. 单一的功能通过集群规模实现伸缩(聚焦于一个功能):分应用服务器集群和数据服务器集群。
  3. 应用服务器集群的伸缩性设计:负载均衡——HTTP重定向、DNS域名解析、反向代理、IP、数据链路层
  4. 分布式缓存集群的伸缩性设计:Memcached模型
  5. 数据储存服务器集群的伸缩性:关系型、NoSQL(Hbase)
于2024年4月-2025年9月期间,研究团队在贵州习水国家级自然保护区制定39条样线,涵盖灌木林、常绿阔叶林、针叶林、常绿落叶阔叶混交林、针阔混交林等不同植被类型,每条样线分春夏秋冬4个季节采集样品,用真菌采集软件记录经纬度、海拔、采集地点、时间、生境等信息,使用佳能相机(R6 mark Ⅱ)对大型真菌进行拍照,并采集标本,标本存放于贵州省生物研究所大型真菌标本馆(HGAMF)。 通过形态学初步鉴定,结合分子生物学最终鉴定,参考已]报道的中国毒蘑菇名录开展毒蘑菇的认定。 调查到保护区内有毒真菌7目25科64种,导致中毒的主要类型有急性肾衰竭型、神经精神型和胃肠炎型。最终形成贵州习水国家级自然保护区大型有毒真菌图片数据集,它由以下2个部分组成。 (1)附件1包含78张原始照片(.JPG),照片名字包括了大型有毒真菌的拉丁名和中文名,若无中文名的直接用拉丁名。 (2)附件2是一个压缩文件,包含了2张工作表,其中一张表是大型有毒真菌39条样线的信息,另一张表是大型有毒真菌的中毒类型。 照片采用佳能相机R6 mark Ⅱ拍摄,物种鉴定通过多种文献核实,并经两位以上专家鉴定确认。该数据集可为研究地及周边的普通人识别有毒大型真菌提供参考,通过及时的图片对比,能有效避免误采误食大型有毒真菌,同时为因误食大型真菌可能引发的身体损伤进行了总结,能为患者及时治疗提供参考。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值