nginx模块开发

nginx的进程结构 1.单进程结构（适用于 开发调试） 2.多进程结构（适合于生产环境）保持nginx健壮，利用多核特性 多进程nginx模型： 一个父进程：master进程 多个子进程：一类worker进程，一类cache进程（Cache Manager和 Cache Loader） 为什么采用多进程结构，而不是多线程结构？ 保持高可用性，高可靠性。 如果采用多线程，那么多线程之间共享同一个内存的地址空间，如果某一个第三方模块引发一个地址空间导致的错误，会导致整个nginx进程全部挂掉 而采用多进程模型时，不会出现这样的问题 各个进程的功能： master进程不会加入第三方模块代码 master进程 通常是用来管理，监控worker进程是不是在正常的工作，需不需要重新载入配置文件，需不需要做热部署 所有的 worker进程 是真正处理请求的 cache是在多个worker进程之间共享的，而且cache不但要被worker进程使用，也要被Cache Manager和 Cache Loader所使用 Cache Manager和 Cache Loader 也是为 反向代理 时后端发来的动态请求做缓存所使用的 Cache Manager（缓存管理） Cache Loader（缓存载入） nginx采用事件驱动模型 ： 每一个worker进程从头到尾占用一个CPU，所以往往要把

一、HTTP 介绍 HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写,是用于从万维网（WWW:World Wide Web ）服务器传输超文本到本地浏览器的传送协议。 HTTP是一个基于TCP/IP通信协议来传递数据（HTML 文件, 图片文件, 查询结果等）。 1、HTTP 工作原理 HTTP协议工作于客户端-服务端架构上。浏览器作为HTTP客户端通过URL向HTTP服务端即WEB服务器发送所有请求。 Web服务器有：Nginx，Apache服务器，IIS服务器（Internet Information Services）等。 Web服务器根据接收到的请求后，向客户端发送响应信息。 HTTP默认端口号为80，但是你也可以改为8080或者其他端口。 HTTP三点注意事项： HTTP是无连接：无连接的含义是限制每次连接只处理一个请求。服务器处理完客户的请求，并收到客户的应答后，即断开连接。采用这种方式可以节省传输时间。 HTTP是媒体独立的：这意味着，只要客户端和服务器知道如何处理的数据内容，任何类型的数据都可以通过HTTP发送。客户端以及服务器指定使用适合的MIME-type内容类型。 HTTP是无状态：HTTP协议是无状态协议。无状态是指协议对于事务处理没有记忆能力。缺少状态意味着如果后续处理需要前面的信息，则它必须重传

web服务软件种类介绍 常用来提供 静态Web服务 的软件有如下三种： Apache： 这是中小型Web服务的主流，Web服务器中的老大哥。 Nginx： 大型网站Web服务的主流，曾经Web服务器中的初生牛犊，现已长大.Nginx的分支Tengine（ http://tengine.taobao.org/）目前也在飞速发展 。 Lighttpd：这是一个不温不火的优秀Web软件，社区不活跃，静态解析效率很高。 在Nginx流行前，它是大并发静态业务的首选，国内百度贴吧、豆瓣等众多网站都有Lighttpd奋斗的身影。 常用来提供 动态服务 的软件 PHP（FastCGI）： 大中小型网站都会使用，动态网页语言PHP程序的解析容器。 它可配合Apache解析动态程序，不过，这里的PHP不是FastCGI守护进程模式，而是mod_php5.so（module）。 也可配合Nginx解析动态程序，此时的PHP常用FastCGI守护进程模式提供服务。 Tomcat：中小企业动态Web服务主流，互联网Java容器主流（如jsp、do）。 Resin：大型动态Web服务主流，互联网Java容器主流（如jsp、do）。 nginx软件服务介绍 如果你听说或使用过Apache软件，那么很快就会熟悉Nginx软件，与Apache软件类似，Nginx（“engine x”）是一个开源的，支持高性能

Nginx同Apache一样都是一种Web服务器. 基于REST架构风格, 以统一资源描述符(Uniform Resources Identifier)URI或者统一资源定位符(Uniform Resources Locator)URL作为沟通依据, 通过HTTP协议提供各种网络服务 这些服务器在设计之初受到当时环境的局限，例如当时的用户规模，网络带宽，产品特点等局限并且各自的定位和发展都不尽相同。这也使得各个 Web 服务器有着各自鲜明的特点 Apache 的发展时期很长，而且是毫无争议的世界第一大服务器。它有着很多优点：稳定、开源、跨平台等等,它不支持高并发的服务器。在 Apache 上运行数以万计的并发访问，会导致服务器消耗大量内存, 操作系统对其进行进程或线程间的切换也消耗了大量的 CPU 资源，导致 HTTP 请求的平均响应速度降低, 这些都决定了 Apache 不可能成为高性能 Web 服务器，轻量级高并发服务器 Nginx 就应运而生了 俄罗斯的工程师 Igor Sysoev，他在为 Rambler Media 工作期间，使用 C 语言开发了 Nginx, Nginx 作为 Web 服务器一直为 Rambler Media 提供出色而又稳定的服务. Igor Sysoev 将 Nginx 代码开源，并且赋予自由软件许可证 Nginx 是一款自由的、开源的、高性能的

0x00：前言 ngx_lua_waf是一个基于ngx_lua的web应用防火墙。 地址： https://github.com/loveshell/ngx_lua_waf waf需要nginx环境，这里我们使用openresty OpenResty(又称：ngx_openresty) 是一个基于 NGINX 的可伸缩的 Web 平台，由中国人章亦春发起，提供了很多高质量的第三方模块。 OpenResty 是一个强大的 Web 应用服务器，Web 开发人员可以使用 Lua 脚本语言调动 Nginx 支持的各种 C 以及 Lua 模块,更主要的是在性能方面，OpenResty可以 快速构造出足以胜任 10K 以上并发连接响应的超高性能 Web 应用系统。 这次安装ngx_lua_waf基于openresty，主要是因为方便 也可以零散安装各种模块 系统：Centos 7虚拟机 0x01：openresty安装 综合看了很多安装教程 注 ：很多命令前都加了sudo 因为不是root，若是root可不加 （1）更新yum，不太清楚为啥，某个博客提到了 OpenResty 官方现在开始维护自己的打包虚机集合了，新的 linux 包仓库正在陆续登陆 openresty.org 官网。欢迎大家试用！原来老源的用户可以先禁用掉老的 openresty 源。 sudo yum install -y

内存池，顾名思义，是对内存块进行管理的一套工具。通过内存池的封装，我们可以非常方便的从内存池中申请和释放内存，而且由于内存池的内存块是预申请的，这就减少了我们频繁申请系统内存空间的消耗。nginx就实现了一个内存管理工具 ngx_pool_t ，专门用于对nginx运行过程中的内存进行管理。本文首先会对nginx的内存池主要特点进行讲解，然后会详细讲解其数据结构，最后会从源码的角度对 ngx_pool_t 的实现原理进行讲解。 1. 主要特点 nginx的内存池 ngx_pool_t 的主要特点如下： 由于nginx处理请求的过程中，主要是频繁的申请小块的内存，因而 ngx_pool_t 会提前申请好供小块内存使用的内存块； 在c语言开发过程中，程序员经常会忘记释放内存块，因而nginx框架本身则对内存池的释放工作进行了管理，当我们需要自定义模块开发的时候，只需要从 ngx_pool_t 中申请内存即可； 由于不同的内存的使用周期不同，比如用于nginx运行所需的内存空间，其生命周期必须与nginx整个生命周期相同，而用于处理请求的内存空间，则在一次请求处理完成之后就需要释放。因而nginx主要预定义了三种生命周期的内存块：请求级别的内存池、连接级别的内存池和模块级别的内存池。当我们需要自定义模块时，只需要根据自身的需求，选择合适的内存池进行内存的申请即可； 2. 实现原理 在介绍

1、nginx相对于apache的优点： 轻量级，同样起web 服务，比apache 占用更少的内存及资源 抗并发，nginx 处理请求是异步非阻塞的，而apache 则是阻塞型的，在高并发下nginx 能保持低资源低消耗高性能 高度模块化的设计，编写模块相对简单 社区活跃，各种高性能模块出品迅速啊 apache 相对于nginx 的优点： rewrite ，比nginx 的rewrite 强大 模块超多，基本想到的都可以找到 少bug ，nginx 的bug 相对较多 超稳定 存在就是理由，一般来说，需要性能的web 服务，用nginx 。如果不需要性能只求稳定，那就apache 吧。后者的各种功能模块实现得比前者，例如ssl 的模块就比前者好，可配置项多。这里要注意一点，epoll(freebsd 上是 kqueue )网络IO 模型是nginx 处理性能高的根本理由，但并不是所有的情况下都是epoll 大获全胜的，如果本身提供静态服务的就只有寥寥几个文件，apache 的select 模型或许比epoll 更高性能。当然，这只是根据网络IO 模型的原理作的一个假设，真正的应用还是需要实测了再说的。 2、作为 Web 服务器：相比 Apache，Nginx 使用更少的资源，支持更多的并发连接，体现更高的效率，这点使 Nginx 尤其受到虚拟主机提供商的欢迎。在高连接并发的情况下

web上的server都叫web server，但是大家分工也有不同的。 nginx常用做静态内容服务和代理服务器（不是你FQ那个代理），直面外来请求转发给后面的应用服务（tomcat，django什么的），tomcat更多用来做做一个应用容器，让java web app跑在里面的东西，对应同级别的有jboss,jetty等东西。 但是事无绝对，nginx也可以通过模块开发来提供应用功能，tomcat也可以直接提供http服务，通常用在内网和不需要流控等小型服务的场景。 apache用的越来越少了，大体上和nginx功能重合的更多。 严格的来说，Apache/Nginx 应该叫做「HTTP Server」；而 Tomcat 则是一个「Application Server」，或者更准确的来说，是一个「Servlet/JSP」应用的容器（Ruby/Python 等其他语言开发的应用也无法直接运行在 Tomcat 上）。 一个 HTTP Server 关心的是 HTTP 协议层面的传输和访问控制，所以在 Apache/Nginx 上你可以看到代理、负载均衡等功能。客户端通过 HTTP Server 访问服务器上存储的资源（HTML 文件、图片文件等等）。通过 CGI 技术，也可以将处理过的内容通过 HTTP Server 分发，但是一个 HTTP Server

一、 定义： 1. Apache Apache HTTP服务器是一个模块化的服务器，可以运行在几乎所有广泛使用的 计算机平台 上。其属于应用服务器。Apache支持支持模块多，性能稳定，Apache本身是静态解析，适合静态HTML、图片等，但可以通过扩展脚本、模块等支持动态页面等。 （Apche可以支持PHPcgiperl,但是要使用Java的话，你需要Tomcat在Apache后台支撑，将Java请求由Apache转发给Tomcat处理。） 缺点：配置相对复杂，自身不支持动态页面。 2. Tomcat： Tomcat是应用（Java）服务器，它只是一个Servlet(JSP也翻译成Servlet)容器，可以认为是Apache的扩展，但是可以独立于Apache运行。 3. Nginx Nginx是俄罗斯人编写的十分轻量级的HTTP服务器,Nginx，它的发音为“engine X”，是一个高性能的HTTP和反向代理服务器，同时也是一个IMAP/POP3/SMTP 代理服务器。 二、 比较 1. Apache与Tomcat的比较 相同点： l 两者都是Apache组织开发的 l 两者都有HTTP服务的功能 l 两者都是免费的 不同点： l Apache是专门用了提供HTTP服务的，以及相关配置的（例如虚拟主机、URL转发等等），而Tomcat是Apache组织在符合Java

在之前，我们对lnmp架构中的php进行了加速提升，我们使用了memcache，那么如何进一步提升访问网站的速度呢？ 我们可以对nginx进行加速提升，使nginx也支持memcache 第一步，nginx-fastcgi-php nginx得到数据给客户端，我们可以给nginx也复制一份数据，保存一份在自己的memcache中,再下一次有相同的请求时，nginx直接将自己缓存中的资源给用户。 但是nginx默认不支持memcache,所以我们需要借助openResty。 openResty是什么 OpenResty 通过汇聚各种设计精良的 Nginx 模块（主要由 OpenResty 团队自主开发），从而将 Nginx 有效地变成一个强大的通用 Web 应用平台。这样，Web 开发人员和系统工程师可以使用 Lua 脚本语言调动 Nginx 支持的各种 C 以及 Lua 模块，快速构造出足以胜任 10K 乃至 1000K 以上单机并发连接的高性能 Web 应用系统。 OpenResty 的目标是让你的Web服务直接跑在 Nginx 服务内部，充分利用 Nginx 的非阻塞 I/O 模型，不仅仅对 HTTP 客户端请求,甚至于对远程后端诸如 MySQL、PostgreSQL、Memcached 以及 Redis 等都进行一致的高性能响应。 openResty的运行原理 1.Nginx