Puppet利用Nginx多端口實作負載均衡

随着公司應用需求的增加，需要不斷的擴充，伺服器數量也随之增加，當伺服器數量不斷增加，我們會發現一台puppetmaster壓力大，解析緩慢，而且時不時出“Timeout”之類的報錯，那這時有什麼優化的辦法嗎？我們在Puppet官網上找尋解決方案，發現puppetmaster可以配置多端口，結合WEB代理（推薦輕量級的負載均衡器Nginx），這樣puppetmaster承受能力至少可以提升數倍以上，相當于在很大程度上優化了puppet的處理能力。

1.遵循前面的環境設定，我們這裡的伺服器環境及軟體版本分别為:

伺服器系統：CentOS5.8 x86_64

Ruby版本：ruby-1.8.5

Puppet版本：puppet-2.7.9

Nginx版本：nginx-0.8.46

2.Mongrel安裝

要使用puppet多端口配置，需要指定mongrel類型，預設沒有安裝，需要安裝：

<code>yum </code><code>install</code> <code>-yrubygem-mongrel</code>

3.配置puppetmaster

在/etc/sysconfig/puppetmaster檔案末尾添加如下兩行，分别代表多端口、mongrel類型，内容如下所示：

<code>PUPPETMASTER_PORTS=(8141 8142 8143 81448145)</code>

<code>PUPPETMASTER_EXTRA_OPTS=</code><code>"--servertype=mongrel--ssl_client_header=HTTP_X_SSL_SUBJECT"</code>

4.安裝Nginx服務

安裝之前請確定系統已經安裝pcre-devel正則庫，然後再編譯安裝Nginx，需要添加SSL子產品參數支援，Nginx的安裝過程如下所示：

<code>yum -y </code><code>install</code> <code>pcre-devel</code>

<code>cd</code> <code>/usr/local/src</code>

<code>wgethttp:</code><code>//nginx</code><code>.org</code><code>/download/nginx-0</code><code>.8.46.</code><code>tar</code><code>.gz</code>

<code>tar</code> <code>zxvf nginx-0.8.46.</code><code>tar</code><code>.gz</code>

<code>cd</code> <code>nginx-0.8.46</code>

<code>.</code><code>/configure</code> <code>--prefix=</code><code>/usr/local/nginx--with-http_ssl_module</code>

<code>make</code> <code>&& </code><code>make</code> <code>install</code> <code>&& </code><code>cd</code><code>../</code>

添加www使用者組及使用者，指令如下所示：

<code>groupadd www</code>

<code>useradd</code> <code>-g www www</code>

5.我們依據puppet需求來修改配置檔案nginx.conf，内容如下所示：

<code>worker_processes 8;</code>

<code>events {</code>

<code> </code><code>worker_connections 65535;</code>

<code> </code><code>include mime.types;</code>

<code> </code><code>default_type application</code><code>/octet-stream</code><code>;</code>

<code> </code><code>sendfile on;</code>

<code> </code><code>tcp_nopush on;</code>

<code> </code><code>keepalive_timeout 65;</code>

<code> </code><code>#定義puppet用戶端通路puppet-server端日志格式</code>

<code> </code><code>log_format main </code><code>'$remote_addr - $remote_user [$time_local]"$request" $request_length $request_time $time_local'</code>

<code> </code><code>'$status $body_bytes_sent$bytes_sent $connection $msec "$http_referer" '</code>

<code> </code><code>'"$http_user_agent" $http_x_forwarded_for$upstream_response_time $upstream_addr $upstream_status '</code><code>;</code>

<code> </code><code>access_log </code><code>/usr/local/nginx/logs/access</code><code>.log main;</code>

<code> </code><code>upstream puppetmaster {</code>

<code> </code><code>server 127.0.0.1:8141;</code>

<code> </code><code>server 127.0.0.1:8142;</code>

<code> </code><code>server 127.0.0.1:8143;</code>

<code> </code><code>server 127.0.0.1:8144;</code>

<code> </code><code>server 127.0.0.1:8145;</code>

<code> </code><code>server {</code>

<code> </code><code>listen 8140;</code>

<code> </code><code>root </code><code>/etc/puppet</code><code>;</code>

<code> </code><code>ssl_session_timeout 5m;</code>

<code> </code><code>#如下為puppetmaster伺服器端證書位址</code>

<code> </code><code>ssl_certificate </code><code>/var/lib/puppet/ssl/certs/server</code><code>.cn7788.com.pem;</code>

<code> </code><code>ssl_certificate_key</code><code>/var/lib/puppet/ssl/private_keys/server</code><code>.cn7788.com.pem;</code>

<code> </code><code>ssl_client_certificate </code><code>/var/lib/puppet/ssl/ca/ca_crt</code><code>.pem;</code>

<code> </code><code>ssl_crl </code><code>/var/lib/puppet/ssl/ca/ca_crl</code><code>.pem;</code>

<code> </code><code>ssl_verify_client optional;</code>

<code> </code><code>#File sections</code>

<code> </code><code>location </code><code>/production/file_content/files/</code> <code>{</code>

<code> </code><code>types { }</code>

<code> </code><code>default_type application</code><code>/x-raw</code><code>;</code>

<code> </code><code>#定義puppet推送路徑别名</code>

<code> </code><code>alias</code> <code>/etc/puppet/files/</code><code>;</code>

<code> </code><code># Modules files sections</code>

<code> </code><code>location ~ </code><code>/production/file_content/modules/</code><code>.+/ {</code>

<code> </code><code>root </code><code>/etc/puppet/modules</code><code>;</code>

<code> </code><code>rewrite ^</code><code>/production/file_content/modules/</code><code>(.+)/(.+)$ /$1</code><code>/files/</code><code>$2 </code><code>break</code><code>;</code>

<code> </code><code>location / {</code>

<code> </code><code>##設定跳轉到puppetmaster負載均衡</code>

<code> </code><code>proxy_pass http:</code><code>//puppetmaster</code><code>;</code>

<code> </code><code>proxy_redirect off;</code>

<code> </code><code>proxy_set_header Host $host;</code>

<code> </code><code>proxy_set_header X-Real-IP $remote_addr;</code>

<code> </code><code>proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;</code>

<code> </code><code>proxy_set_header X-Client-Verify $ssl_client_verify;</code>

<code> </code><code>proxy_set_header X-SSL-Subject $ssl_client_s_dn;</code>

<code> </code><code>proxy_set_header X-SSL-Issuer $ssl_client_i_dn;</code>

<code> </code><code>proxy_buffer_size 10m;</code>

<code> </code><code>proxy_buffers 1024 10m;</code>

<code> </code><code>proxy_busy_buffers_size 10m;</code>

<code> </code><code>proxy_temp_file_write_size 10m;</code>

<code> </code><code>proxy_read_timeout 120;</code>

6.修改完nginx.conf檔案以後，我們要啟動nginx及puppet-server，這時應該如何操作呢？

我們首先關閉puppetmaster程序，然後先啟動nginx，不然nginx是會啟動失敗的，指令如下所示：

<code>/usr/local/nginx/sbin/nginx</code>

nginx占用puppetmaster預設的8140端口後，我們可以用如下指令來檢查8140端口是否被nginx接管，如下所示：

此指令顯示結果表明8140被nginx程序接管，如下所示：

<code>COMMAND PID USER FD TYPE DEVICE SIZE</code><code>/OFF</code> <code>NODE NAME</code>

<code>nginx 4121 root 6u IPv4 20668 0t0 TCP *:8140 (LISTEN)</code>

<code>nginx 4122 www 6u IPv4 20668 0t0 TCP *:8140 (LISTEN)</code>

我們再啟動puppetmaster，指令如下所示：

<code>service puppetmaster start</code>

如果ruby版本為1.8.5的話，等會運作puppetmaster會有如下警告，如下所示：

<code>Starting puppetmaster:</code>

<code>Port: 8141** Ruby version is not up-to-</code><code>date</code><code>;loading cgi_multipart_eof_fix</code>

<code>Port: 8142** Ruby version is notup-to-</code><code>date</code><code>; loading cgi_multipart_eof_fix</code>

<code>Port: 8143** Ruby version is notup-to-</code><code>date</code><code>; loading cgi_multipart_eof_fix</code>

<code>Port: 8144** Ruby version is notup-to-</code><code>date</code><code>; loading cgi_multipart_eof_fix</code>

<code>Port: 8145** Ruby version is notup-to-</code><code>date</code><code>; loading cgi_multipart_eof_fix</code>

這段警告值的意思為

<code>It's just a warning. Mongrel wants a Rubyversion of at least 1.8.6.</code>

<code>But it still runs just fine with previousversions. Just ignore the warning.</code>

翻譯為中文的意思是：

Mongrel需要ruby至少是1.8.6以上的版本，但它仍然在目前版本運作，請忽咯目前警告，為了保證整個puppet運作環境的穩定，我這裡選擇還是沿用1.8.5版本的ruby，大家有任何疑問，歡迎随時通過此技術部落格或電子郵箱[email protected]與撫琴煮酒進行交流。

本文轉自撫琴煮酒 51CTO部落格，原文連結：http://blog.51cto.com/yuhongchun/1291908，如需轉載請自行聯系原作者

Puppet利用Nginx多端口實作負載均衡

繼續閱讀

（Nginx）03_Nginx原理與優化一、Nginx原理二、master-workers機制三、面試題：

（Nginx）02_Nginx配置執行個體一、Nginx的應用：反向代理實作一：二、反向代理執行個體二：三、Nginx的配置執行個體三–負載均衡：四、Nginx的配置執行個體四–動靜分離：Nginx在實際開發中的應用：

nginx配置示例

【轉載】如何辨識優秀的程式員

網絡空間安全中高職業院校職技能大賽——Telnet弱密碼滲透測試

niginx的location的location詳細規則和優先級關系以及測試案例2.1比對文法2.2優先級判斷2.3練習3.1處理邏輯如何執行3.2功能測試3.3流程解析

Puppet自動化Nginx+Mongrel負載均衡配置

Ubuntu修改nginx将多個域名分别配置到伺服器不同端口

修改or隐藏nginx版本号

Nginx安全改動：隐藏Nginx版本号背景解決serve_tokens指令參考

版本号隐藏

Nginx服務優化（版本隐藏、版本号僞裝、逾時管理、程序管理、日志分割）Nginx服務優化未完待續

nginx location中斜線的位置的重要性

Cloud Studio初體驗

Bugku-WEB-web33