责任编辑主要就协助我们熟识 Nginx 有什么样应用领域情景、Nginx 特征和构架数学模型和有关销售业务流程、Nginx 订制化合作开发的三种组件进行分类。念完责任编辑你将对 Nginx 有一定的重新认识。
相片源自 Pexels
Nginx 概要和特征
Nginx (engine x) 是两个高效能的 Web 伺服器和逆向代理伺服器,也是两个 IMAP/POP3/SMTP 伺服器:
它由白俄罗斯开发人员 Igor Sysoev 于 2002 年开始合作开发。Nginx 是增长最慢的 Web 伺服器,市场占有率已达 33.3%。亚洲地区采用率名列第二,2011 年设立商业性公司。Nginx 街道社区组成部分:
Openresty:译者 @agentzh(章临川)合作开发的,最小特征是导入了 ngx_lua 组件,全力支持采用 Lua 合作开发应用领域程序,因此子集了许多多样的组件,和 Lua 库。Tengine:主要就是淘宝网项目组合作开发。特征是带入了因淘宝网自身的一些销售业务增添的新功能。Nginx 非官方版,预览插值较为快,因此提供更多完全免费版和商业性版。Nginx 源代码外部结构(标识符量约 11 圆觉 C 标识符):
源标识符产品目录外部结构 Core(萨温齐和此基础增设)Event(事件驱动数学模型和不同的 IO 复用组件)HTTP(HTTP 伺服器和组件)Mail(邮件代理伺服器和组件)OS(操作系统有关的实现)Misc(杂项)Nginx 特征如下表所示:
逆向代理,负载均衡器高可靠性、单 Master 多 Worker 模式高可扩展性、高度组件化非阻塞事件驱动低内存消耗热部署Nginx 应用领域情景
Nginx 的应用领域情景如下表所示:
静态文件伺服器逆向代理,负载均衡安全防御智能路由(企业级灰度测试、地图 POI 一键切流)灰度发布静态化消息推送相片实时压缩防盗链Nginx 架构数学模型如是说
进程组件角色:
Master 进程:监视工作进程的状态;当工作进程死掉后重启两个新的;处理信号和通知工作进程。Worker 进程:处理客户端请求,从主进程处获得信号做相应的事情。Cache Loader 进程:加载缓存索引文件信息,然后退出。Cache Manager进程:管理磁盘的缓存大小,超过预定值大小后最少采用数据将被删除。Nginx 的架构数学模型如下表所示图:
架构数学模型销售业务流程如下表所示图:
Nginx 外部销售业务流程如是说
Nginx 架构数学模型销售业务流程如下表所示图:
Master 初始化销售业务流程,如下表所示图:
Worker 初始化:
Worker 初始化销售业务流程图如下表所示:
静态文件请求 IO 销售业务流程如下表所示图:
HTTP 请求销售业务流程如下表所示图:
HTTP 请求 11 个阶段,如下表所示图所示:
upstream组件:
访问第三方 Server 伺服器底层 HTTP 通信非常完善异步非阻塞上下游内存零拷贝,节省内存全力支持自订组件合作开发upstream 架构销售业务流程,如下表所示图:
upstream 外部销售业务流程,如下表所示图:
逆向代理销售业务流程,如下表所示图:
Nginx 订制化组件合作开发
Nginx 的组件化设计特征如下表所示:
高度抽象的组件接口组件接口非常简单,具有很高的灵活性配置组件的设计核心理念组件接口的简单化多层次、多类别的组件设计外部核心理念组件:
Handler 组件:接受源自客户端的请求并构建响应头和响应体。
F
Upstream 组件:使 Nginx 跨越单机的限制,完成网络数据的接收、处理和转发,纯异步的访问后端服务。
Load_Balance:负载均衡组件,实现特定的算法,在众多的后端伺服器中,选择两个伺服器出来作为某个请求的转发伺服器。
ngx_lua 模块:
脚本语言内存开销小运行速度快强大的 Lua 协程非阻塞销售业务逻辑以自然逻辑书写订制化合作开发 Demo
Handler 组件:
编写 config 文件编写组件产生内容响应信息#配置文件:server { … location test { test_counter on; } }#configngx_addon_name=ngx_http_test_module HTTP_MODULES=“$HTTP_MODULES ngx_http_test_module” NGX_ADDON_SRCS=“$NGX_ADDON_SRCS $ngx_addon_dir/ngx_http_test_module.c” #ngx_http_test_module.c staticngx_int_t ngx_http_test_handler(ngx_http_request_t *r) { ngx_int_t rc; ngx_buf_t *b; ngx_chain_t out; ngx_http_test_conf_t *lrcf; ngx_str_t ngx_test_string = ngx_string(“hello test”); lrcf = ngx_http_get_module_loc_conf(r, ngx_http_test_module);if ( lrcf->test_counter == 0 ) { return NGX_DECLINED; } /* we response to GET and HEAD requests only */ if ( !(r->method & (NGX_HTTP_GET|NGX_HTTP_HEAD)) ) { returnNGX_HTTP_NOT_ALLOWED; }/* discard request body, since we dont need it here */rc = ngx_http_discard_request_body(r);if ( rc != NGX_OK ) { return rc; } /* set the Content-type header */ /* *r->headers_out.content_type.len = sizeof(“text/html”) – 1; *r->headers_out.content_type.data = (u_char *)”text/html”; */ ngx_str_set(&r->headers_out.content_type, “text/html”); /* send the header only, if the request type is http HEAD */ if( r->method == NGX_HTTP_HEAD ) { r->headers_out.status = NGX_HTTP_OK; r->headers_out.content_length_n = ngx_test_string.len;return ngx_http_send_header(r); } /* set the status line */r->headers_out.status = NGX_HTTP_OK; r->headers_out.content_length_n = ngx_test_string.len;/* send the headers of your response */ rc = ngx_http_send_header(r); if ( rc == NGX_ERROR || rc > NGX_OK || r->header_only ) { returnrc; }/* allocate a buffer for your response body */ b = ngx_pcalloc(r->pool, sizeof(ngx_buf_t)); if ( b == NULL ) { return NGX_HTTP_INTERNAL_SERVER_ERROR; } /* attach this buffer to the buffer chain */ out.buf = b; out.next = NULL; /* adjust the pointers of the buffer */b->pos = ngx_test_string.data; b->last = ngx_test_string.data + ngx_test_string.len; b->memory =1; /* this buffer is in memory */ b->last_buf = 1; /* this is the last buffer in the buffer chain */ /* send the buffer chain of your response */ return ngx_http_output_filter(r, &out); }Nginx 核心理念时间点组件如是说
解决接入层故障定位慢的问题,协助 OP 快速判定问题根因,优先自证清白,提高接入层高效的生产力。
Nginx 阻塞组件如是说
Nginx 阻塞组件特征如下表所示:
实现非常灵活的静态的修改策略从而进行切流量。实现平滑无损的方式进行流量的切换。通过秒级切换流量可以缩小影响范围,从而减少损失。按照某一城市或者某个特征,秒级进行切换流量或者禁用流量。容忍单机房级别容量故障,缩短了单机房故障的止损时间。快速的将流量隔离或者流量抽样。高效的灰度测试,提高生产力。Nginx 静态 upstream 组件如是说
让接入层可以适配静态调度的云环境,实现服务的平滑上下线、弹性扩/缩容。
从而提高接入层高效的生产力和稳定性,保证销售业务流量的平滑无损。
Nginx query_upstream 组件如是说
链路追踪,梳理接口到后端链路的情况。查询 location 接口对应 upstream server 信息。
Nginx query_conf 组件如是说
Nginx K47A全力支持 Redis 协定组件如是说
根据配置文件来静态的添加K47A:
https://github.com/lidaohang/ngx_shm_dictngx_shm_dict:K47A核心理念组件(红黑树,队列)
ngx_shm_dict_manager:添加定时器事件,定时的清除K47A中过期的 Key,添加读事件,全力支持 Redis 协定,通过 redis-cli get,set,del,ttl
ngx_shm_dict_view:K47A查看
Nginx 笔记回看银穗草辅助工具
解析笔记进行回看银穗草,模拟后端伺服器慢等各种异常情况 :
https://github.com/lidaohang/playback-testing方案说明:客户端解析 access.log 构建请求的 host,port,url,body。把后端响应时间,后ogs 文件夹里面。搭建需要测试的 Nginx 伺服器,因此配置 upstream 指向后端伺服器断端口启动后端伺服器实例 server/backserver/main.go进行银穗草bin/wrk -c30 -t1 -s conf/nginx_log.lua http://localhost:8095译者:李航
概要:多年的底层合作开发经验,在高效能 Nginx 合作开发和分布式缓存 Redis Cluster 有着多样的经验,目前从事分布式存储工作。先后在 58 同城、汽车之家、优酷土豆集团工作。目前供职于滴滴此基础平台-技术专家岗位,主要就负责分布式 Ceph 系统。个人主要就关注的技术领域:高效能 Nginx 合作开发、分布式缓存、分布式存储。
编辑:陶家龙
征稿:有投稿、寻求报道意向技术人请联络 [email protected]