cdn技术

CDN 缓存 HTTP 缓存主要是对静态数据进行缓存，把从服务器拿到的数据缓存到客户端/浏览器。 如果在客户端和服务器之间再加上一层 CDN，可以让 CDN 为应用服务器提供缓存，如果在 CDN 上缓存，就不用再请求应用服务器了。并且 HTTP 缓存提到的两种策略同样可以在 CDN 服务器执行。 CDN 的全称是 Content Delivery Network，即内容分发网络。 CDN 工作简图 让我们来看看它是如何工作的吧： 客户端发送 URL 给 DNS 服务器。 DNS 通过域名解析，把请求指向 CDN 网络中的 DNS 负载均衡器。 DNS 负载均衡器将最近 CDN 节点的 IP 告诉 DNS，DNS 告之客户端最新 CDN 节点的 IP。 客户端请求最近的 CDN 节点。 CDN 节点从应用服务器获取资源返回给客户端，同时将静态信息缓存。注意：客户端下次互动的对象就是 CDN 缓存了，CDN 可以和应用服务器同步缓存信息。 CDN 接受客户端的请求，它就是离客户端最近的服务器，它后面会链接多台服务器，起到了缓存和负载均衡的作用。 注：本文摘自51CTO技术栈 来源： https://www.cnblogs.com/Haihong72H/p/11437249.html

http缓存机制及varnish： browser：缓存机制 缓存类型： public private Expire ： cache-control max-age ： Etag 缓存策略 CDN：Content Delivery Network 使用CNAME解析 智能DNS 智能DNS+内容分发技术 自建CDN 智能DNS服务器租用或者自己构建bind,view Bind-dlz+MySQL(Pgsql ,Oracle ,db4) 租用公共CDN 一般按流量收费 早期最著名缓存服务器 Squid 目前比较流行缓存服务器 varnish Nginx+varnish Nginx+Squid varnish体系结构： child 接收响应请求 cache 管理缓存 VCL Varnish控制语言，完全兼容C语言 来源： https://blog.51cto.com/14087650/2433926

周六晚上七点多，我正在看书呢，突然女朋友跑过来问我她的IPAD去哪了，火急火燎的。 她拿到了IPAD之后就不再理我了，不过作为一个程序员，我还是比较好奇这么大的流量虎牙到底能不能扛得住，哈哈哈。于是我过去看了一下，结果看到了下面这一幕：  但是直播竟然并没有显得很卡顿，禁不住说了一段话： 据了解，2018年1月，阿里云为虎牙提供了边缘节点服务（ENS）。基于阿里云ENS，可以轻松地将业务模块放到边缘运行，在主播的推流时，实现就近节点进行转码和分发，同时支持了高并发实时弹幕的边缘分发。在获得网络低时延的同时，减少了对中心的压力，节省了30%以上的中心带宽成本，并且实现了边缘节点网络连接小于5毫秒延时，提升了主播上行质量，以及用户成功连接占比等数指标，有效提升了用户观看体验。ENS中最主要的技术就是CDN。 直播终于结束了，女朋友终于跑过来问我什么是CDN了… 什么是CDN CDN的全称是Content Delivery Network，即内容分发网络。 我们都用过天猫超市，在上面买东西非常方便。天猫超市的模式是货品先入天猫超市（后文简称为"猫超"）的菜鸟仓，然后由猫超统一派送的。 为了缩短物流的时间，可以让消费者快速的收到货品，菜鸟在全国各地建了本地仓库，现在大多数情况下，在猫超下单，第二天都可以收到（楼主在江浙沪包邮区，其他地区可能稍有延迟）。 比如我在杭州市西湖区

指路牌 CDN 网站静态资源加速 定量展示CDN加速效果 CDN配置好了但是没有加速效果？ 适用场景 “ 第一次接触 ”用户体验提升 网站具有大量图片、css、js等静态资源 ECS购买了固定带宽，带宽成为性能瓶颈 环境 一个已完成“备案”的域名 域名购买后需要实名认证+备案，大概需要花费“ 14～20天 ”。 开通阿里云CDN服务 参考博客 Web项目聚集地 --- 一文读懂 CDN 阿里云 --- CDN文档 背景 我曾接触过两个项目，一个是基于web的AR项目，一个是使用了大图的展示项目。两个项目都有一个共同特点：加载速度很慢。慢到什么地步呢？页面完全加载完的时间量级均在两位数（10s左右），极端情况下甚至会达到20s甚至更久。 如此打开速度对于一款应用的体验来来说是灾难级的，因为不会有一个用户有耐心等待如此长的时间，web前端针对加载速度慢在技术上具有很多解决方案：如使用一张像素很低体积很小的图片先显示以“安慰”用户，或使用分批加载等。 但以上两种方案都无法解决我碰到场景的问题，因为AR项目的js文件与AR文件都同样庞大，以上方案都不能完全挽救两位数量级加载时间的灾难级体验。 幸运的是两个项目都是展位性质的，只需要利用浏览器自身的缓存机制，提前打开几次页面就能将加载时间将时间轻易降到50ms附近，让观众户完全感觉不到加载的耗时。 但是如此雨来，展示的互动性将变得很受限

背景： 本文公众号来源：漫话编程 虎牙直播2000W+人在线观看，直播间还不卡，据了解，2018年1月，阿里云为虎牙提供了边缘节点服务（ENS）。基于阿里云ENS，可以轻松地将业务模块放到边缘运行，在主播的推流时，实现就近节点进行转码和分发，同时支持了高并发实时弹幕的边缘分发。在获得网络低时延的同时，减少了对中心的压力，节省了30%以上的中心带宽成本，并且实现了边缘节点网络连接小于5毫秒延时，提升了主播上行质量，以及用户成功连接占比等数指标，有效提升了用户观看体验。ENS中最主要的技术就是CDN。 1.什么是CDN CDN的全称是Content Delivery Network，即内容分发网络。 1.1-举例说明 我们都用过天猫超市，在上面买东西非常方便。天猫超市的模式是货品先入天猫超市（后文简称为"猫超"）的菜鸟仓，然后由猫超统一派送的。 为了缩短物流的时间，可以让消费者快速的收到货品，菜鸟在全国各地建了本地仓库，现在大多数情况下，在猫超下单，第二天都可以收到（楼主在江浙沪包邮区，其他地区可能稍有延迟）。 比如我在杭州市西湖区，下单购买了一箱零食，没过多久就可以看到猫超已经发货了，发货地址是杭州的萧山仓，从杭州的一个区运输到另外一个区，24小时怎么也到了。 猫超的配送采用的是智能仓配模式，菜鸟为天猫超市提供全国智能分仓，在商品销售前就已经来到距离消费者最近的仓储基地，下单购买后

CDN- 内容推送网络 前段时间介绍了 浏览器缓存机制 ，通过浏览器缓存一方面可以改善用户的体验，而不用漫长地等待从服务器下载资源；另一方面减轻服务器压力、节省流量。 CDN 是另一种可以大幅度优化用户体验，且减轻服务器压力的技术。下面就自己了解的 CDN 技术分享下。 CDN 的实现是一组技术的组合，每个技术都可以单独成文详细讨论，这里就不深入每个技术。内容目录： 1. 什么是CDN ？ 1 2. CDN 技术原理 ... 1 2.1. 分布式存储 ... 1 2.2. 内容管理 ... 2 2.3. 负载均衡 ... 2 2.4. 网络请求的重定向 ... 2 3. CDN 资源访问流程 ... 3 4. 关于 CDN 的疑问 ... 3 4.1. 使用 CDN 后，如何获取客户端真实 IP ？ ... 3 4.2. 采用 CDN 服务以后如何保证内容的更新和同步？ ... 4 1. 什么是 CDN ？ CDN 的全称是 Content Delivery Network ，即 内容分发网络 。其目的是通过在现有的 Internet 中增加一层新的网络架构，将网站的内容发布到最接近用户的网络 " 边缘 " （边缘服务器），使用户可以就近取得所需的内容，解决 Internet 网络拥挤的状况，提高用户访问网站的响应速度。从技术上全面解决由于网络带宽小、用户访问量大

整理《CDN技术详解》一书中重要的内容。 互联网与万维网 广义的互联网，由两层组成：一层是以TCP/IP为代表的网络层；另一层是以万维网WWW为代表的应用层。辨识互联网和万维网的区别，是认识CDN的基础。 互联网（网络层） 以TCP/IP为核心的狭义的互联网，实际上是广义互联网的下层，是网络基础。更一般地说就是TCP/IP网络。这一层的主要作用是通过计算机之间的互联，将各种信息的数据报文以极低的成本进行传输，俗称“管道”，所有信息和内容在这个管道里进行传送。 互联网的设计理念是： 网络是中立和无控制的，任何人都没有决定权 网络是应用无关的，它的任务就是如何更好地将数据包进行端到端传输 万维网（应用层） 以万维网WWW为代表的应用层，是广义互联网的上层。这一层包括很多种类型的流量和应用，邮件、软件、在线影院、游戏、电子商务、移动应用等，所有SP（service Provider，服务提供商）提供的都是这些用户看得见、摸得着的应用。构成了我们常说的互联网业务和信息经济。 总结： 互联网就是铁路轨道和信息系统。万维网则是铁路上运行的列车之一。 CDN出现的背景 在互联网这个铁路网中，有四个地方会造成列车拥塞。 “ 第一公里：网站的出口带宽 ，这个带宽决定了网站能为用户提供的访问速度和并发访问量。用户请求数据量超过出口带宽，就会在出口形成拥塞。就像节假日，出城的高速出口，比平时更多人通过

CDN @(补充知识) 首先了解三个东西 --- （域名，DNS ,IP） 一、什么是IP地址 我们知道，在Internet上有千百万台主机，为了区分这些主机，人们给每台主机都分配了一个专门的地址，称为IP地址。通过IP地址就可以访问到每一台主机。 IP地址由4部分数字组成，每部分都不大于256，各部分之间用小数点分开搜索。 IP就是在互联网上的主机的名字 二、什么是域名 虽然可以通过IP地址来访问每一台主机，但是要记住那么多枯糙的数字串显然是非常困难的，为此，Internet提供了域名(Domain Name）。就是网址。 域名前加上传输协议信息及主机类型信息就构成了网址(URL） 三、域名解析服务（DNS） 域名方便人类记忆，但机器间互相只认IP地址，（无论你在计算机上看到的与做到的在计算机最终是一串2进制编码，网址的形式是为了方便人们去使用）域名与IP地址之间是一一对应的，它们之间的转换工作称为域名解析，域名解析需要由专门的域名解析服务器来完成，整个过程是自动进行的。 传统网页访问过程 1，客户端即指的是用户端使用的浏览器 2，每台连接互联网的机器都有一个唯一的IP地址，IP地址是由4个0到256的数组成的，比如：222.131.0.229，127.0.0.1，由于每台联网的机器的IP地址都是独立的，因此可以通过IP判断一台机器（每个用户的身份ID）。

CDN的对性能的优化 首先 必须了解到的：CDN的全称是 Content Delivery Network，即内容分发网络。CDN 是构建在网络之上的内容分发网络，依靠部署在各地的边缘服务器，通过中心平台的负载均衡、内容分发、调度等功能模块，使用户就近获取所需内容，降低网络拥塞，提高用户访问响应速度和命中率。CDN 的关键技术主要有内容存储和分发技术。 意义 而CDN的最终意义：为了不让网络拥塞成为互联网发展的障碍。 CDN的优势 1.CDN 节点解决了跨运营商和跨地域访问的问题，访问延时大大降低； 2.大部分请求在 CDN 边缘节点完成，CDN 起到了分流作用，减轻了源站的负载； 3.降低“广播风暴”的影响，提高网络访问的稳定性；节省骨干网带宽，减少带宽需求量。 例如：访问速度快是电商网站取胜的必要法宝之一。 而CDN 的核心点有两个: 一个是缓存，一个是回源。 （1） 缓存 将从根服务器请求来的资源按要求缓存。 （2） 回源 当有用户访问某个资源的时候，如果被解析到的那个 CDN 节点没有缓存响应的内容，或者是缓存已经到期，就会回源站去获取。没有人访问，CDN 节点不会主动去源站请求资源。 关键技术点 1.内容发布：它借助于建立索引、缓存、流分裂、组播（Multicast）等技术，将内容发布或投递到距离用户最近的远程服务点（POP）处； 2.内容路由

1. 用户向浏览器输入www.web.com这个域名，浏览器第一次发现本地没有dns缓存，则向网站的DNS服务器请求； 2.网站的DNS域名解析器设置了CNAME，指向了www.web.51cdn.com,请求指向了CDN网络中的 智能 DNS负载均衡系统； 3.智能DNS负载均衡系统解析域名，把对用户响应速度最快的IP节点返回给用户； 4.用户向该IP节点（CDN服务器）发出请求； 5.由于是第一次访问，CDN服务器会向原web站点请求，并缓存内容； 6.请求结果发给用户。 CDN网络是在用户和服务器之间增加Cache层，如何将用户的请求引导到Cache上获得源服务器的数据，主要是通过接管DNS实现，这就是CDN的最基本的原理，当然很多细节没有涉及到，比如第1步，首先向本地的DNS服务器请求。第5步，内容淘汰机制（根据TTL）等。但原理大体如此。 当用户访问加入CDN服务的网站时，域名解析请求将最终交给全局负载均衡DNS进行处理。全局负载均衡DNS通过一组预先定义好的策略，将当时最接近用 户的节点地址提供给用户，使用户能够得到快速的服务。同时，它还与分布在世界各地的所有CDNC节点保持通信，搜集各节点的通信状态，确保不将用户的请求 分配到不可用的CDN节点上，实际上是通过DNS做全局负载均衡。 对于普通的Internet用户来讲，每个CDN节点就相当于一个放置在它周围的WEB