`
sealbird
  • 浏览: 583782 次
  • 性别: Icon_minigender_1
  • 来自: 广州
社区版块
存档分类
最新评论

Mod_perl多进程预创建目标_mod_perl环境搭建

    博客分类:
  • perl
阅读更多
前言:某些目标初始化开销较大,例如从磁盘读取一个大文件,并关联到目标,可能耗时较久.在CGI环境下,每个请求都要new()一次目标,就会性能低下.而mod_perl的多进程预创建目标模式,可以很好的解决这个问题.

(一)安装mod_perl
这里使用主流的apache2.0和modperl2版本.

默认安装的Apache2都支持DSO方式加载第三方模块,在编译modperl2时只须指定对应的apxs即可.

另外Perl对线程的支持一直有问题,因此Apache2在编译时最好指定以prefork方式运行(--with-mpm=prefork).

从http://perl.apache.org/download/下载modperl,解开后进入其目录,如下安装:

perl Makefile.PL MP_APXS=/path/apache2/bin/apxs
make
make test
make install

这里假设apache2.0已安装在/path/apache2下.检查/path/apache2/conf/httpd.conf,确认modperl安装后添加了该行:

LoadModule perl_module modules/mod_perl.so

表示Apache启动时加载mod_perl模块.

(二)安装Apache2::Request
Apache2::Request是包含modperl2下的请求处理方式的类库.它的作用类似于CGI.pm,但用C语言写成,比CGI.pm快很多.

以root用户运行CPAN shell: perl -MCPAN -e shell

然后在CPAN shell里输入: install Apache2::Request 进行安装.安装过程中一般会有提示,须手工指定apache2的apxs文件的路径.如果在make test时不成功,那么force install即可:

cpan>look Apache2::Request
# install Apache2::Request

安装完后修改apache2的httpd.conf,增加一行如下:

LoadModule apreq_module    modules/mod_apreq2.so

表示Apache启动时加载mod_apreq2模块.

另外,设置LD_LIBRARY_PATH环境变量,对Linux系统,最简单的做法是在/etc/ld.so.conf里加进:

/usr/local/lib  #默认make install的libapreq2安装在/usr/local下
/path/apache2/lib  #apache2安装目录

然后执行ldconfig使其生效.

最后restart apache,查看error_log,若有如下提示:

Apache/2.0.59 (Unix) mod_apreq2-20051231/2.6.0 mod_perl/2.0.3 Perl/v5.8.5 configured

则表示modperl2和Apache2::Request已安装成功(当然httpd.conf里的ServerTokens须设置为Full).

(三)开始编程之前
在开始modperl编码之前,需要做一些基本的配置工作.

首先在/path/apache2下创建一个子目录,该目录用于存放自己编写的modperl库文件,并且将该目录添加进modperl运行环境的@INC变量.这个变量包含了modperl需要引用的库路径.

mkdir /path/apache2/run

这里假设创建的子目录名为run.将run添加进modperl的@INC有好几种方法,一般的做法是写进modperl的启动配置文件(通常名为startup.pl).startup.pl还会预加载一些modperl常用类库,这些类库会被多个Apache子进程共享,避免启动后的重复加载.

在run子目录下,创建startup.pl,内容如下:

use strict;

use lib qw(/path/apache2/run);
use Apache2::RequestRec ();
use Apache2::RequestIO ();
use Apache2::Request ();

1;

use lib这一行即将run子目录添加进modperl运行环境的@INC中.
其他三个Apache2::*库是modperl2常用的几个类库.Apache2::*名字空间下有很多类库,除上述外,还有:

Apache2::Connection ();
Apache2::RequestUtil ();
Apache2::ServerUtil ();
Apache2::ServerRec ();
Apache2:og ();

之类...详情可参考它们在cpan上的文档.

不要忘记最后的那个1,它表示返回一个真值给调用者.

修改httpd.conf,增加一行:

PerlPostConfigRequire /path/apache2/run/startup.pl

表示在Apache启动过程中,(尽可能晚的)执行上述modperl配置脚本.

补充一点,在手工运行modperl脚本时,由于@INC不包含这个目录,就会造成问题.可以在运行脚本前,

export PERL5LIB=/path/apache2/run

来解决问题.但每次都敲这个命令也很烦,因此直接将这句写进/etc/profile,就一劳永逸了.

(四)创建一个目标
从CPAN下载安装本人所写的IP::ChinaISP模块,该模块的作用是对指定的中国IP,返回对应的ISP.因为在中国,不同ISP之间的互联互通非常慢,所以利用该模块,可实现一些基于用户访问IP的CDN系统.

模块使用方法很简单:

use IP::ChinaISP;
my $cnisp = IP::ChinaISP->new;
my $isp = $cnisp->ip_isp('12.34.56.78');

$isp变量即存储了12.34.56.78这个IP对应的ISP(如果有的话).

IP::ChinaISP->new表示创建一个对象,这个过程中,会解析IP-ISP的数据文件,并将数据绑定到对象,因此耗时较久.测试了1000次new()过程,平均每次创建对象耗时16.103毫秒.若用该模块提供CGI web服务,则每个用户请求都会创建一个对象,效率无疑低下.

下面描述如何利用modperl来提高效率.

(五)mod_perl的多进程预创建目标
在mod_perl环境下,Apache启动时可以预创建目标,并且该目标在Apache fork子进程时,被所有子进程复制一份.这样在每个子进程里,直接使用已创建好的目标,不用重复创建.

前面已经描述,可以在startup.pl里预加载类库,同样也可以在这个文件里预创建目标.但是,简单在startup.pl里写:

use IP::ChinaISP;
our $cnisp = IP::ChinaISP->new;

不行.由于没有独立的包空间,从外部无法访问这个对象.

因此,有必要把创建目标的陈述放在独立的package里.前面已经定义好/path/apache2/run为modperl运行的库目录,在该目录下创建package即可.如下执行:

cd /path/apache2/run
mkdir IP
cd IP
vi Initdb.pm

Initdb.pm即为初始化目标的package,内容如下:

package IP::Initdb;
use strict;
use IP::ChinaISP;

our $cnisp = IP::ChinaISP->new;
sub initdb { $cnisp }

1;

这里的our $cnisp = IP::ChinaISP->new;即表示创建IP::ChinaISP对象,并将其储藏在包变量$cnisp里.然后在外部可以直接通过包变量来访问这个对象,或通过方法initdb来返回对象.

修改startup.pl,加进一句:

use IP::Initdb;

这样在Apache启动时,对象就被创建好,并复制到所有Apache子进程.

(六)如何使用预创建目标
可以在自定义的Apache处理器里,使用上述对象.假设对目标站点的/iploc路径的请求,都由自己的Apache handler来处理,则如下做.

修改httpd.conf,加进如下配置:

<Location /iploc>
  SetHandler modperl
  PerlResponseHandler IP:uery
</Location>

IP:uery即是一个modperl处理器,它同样位于前面定义好的库目录/path/apache2/run下.

进入/path/apache2/run/IP,创建Query.pm,内容如下:

package IP:uery;

use strict;
use Apache2::RequestRec ();
use Apache2::RequestIO ();
use Apache2::Const -compile => qw(OK);
use Apache2::Request ();
use IP::Initdb;

sub handler {
    my $r = shift;
    my $req = Apache2::Request->new($r);
    my $ip = $req->param('ip');

    my $cnisp = IP::Initdb->initdb;
    my $isp = $cnisp->ip_isp($ip);

    $r->content_type('text/plain');
    $r->print($isp);

    return Apache2::Const::OK;
}

1;

my $cnisp = IP::Initdb->initdb;表示获取预创建目标.my $isp = $cnisp->ip_isp($ip);表示调用目标方法,根据IP取得ISP.

配置好上述所有后,restart Apache.然后从浏览器发布请求,例如:

http://example.com/iploc/?ip=202.96.128.68

可看到返回结果.

该WEB服务效率极高,用Apache自带的压力测试工具ab进行测试,共发起100个请求,并发10个,全部处理完只用了0.125秒.测试结果摘录如下:

Document Path:          /iploc/?ip=202.96.128.68
Document Length:        11 bytes

Concurrency Level:      10
Time taken for tests:   0.125 seconds
Complete requests:      100
Failed requests:        0
Broken pipe errors:     0
Total transferred:      19500 bytes
HTML transferred:       1100 bytes
Requests per second:    800.00 [#/sec] (mean)
Time per request:       12.50 [ms] (mean)
Time per request:       1.25 [ms] (mean, across all concurrent requests)
Transfer rate:          156.00 [Kbytes/sec] received
分享到:
评论

相关推荐

    mod_perl Perl模块

    6. **持续执行的Perl环境**:mod_perl创建了一个持久的Perl运行环境,使得Perl代码可以在多个请求之间保持状态,这对于开发需要保持会话和数据库连接的应用非常有利。 7. **模块化开发**:mod_perl支持使用Perl模块...

    mod_perl-2.0-current.tar.gz

    总的来说,mod_perl是一种强大的工具,它可以增强Apache服务器处理Perl脚本的能力,提高网站性能,尤其是在需要频繁执行Perl代码的环境中。同时,了解如何正确安装、配置和管理mod_perl对于Web开发者和系统管理员来...

    mod_perl

    - 脚本运行计数器可能超过5是因为Apache服务器在处理请求时可能会创建多个子进程。每个子进程都可能运行同一个Perl脚本,导致脚本的执行次数看起来超过了预期。 ##### 2. **第二个秘密:在reload时无规律的增长**...

    mod_fcgid-2.3.9

    与传统的CGI相比,FastCGI可以保持多个进程常驻内存,处理连续的HTTP请求,大大减少了进程创建和销毁的时间开销,提高了服务器的响应速度和效率。 **`mod_fcgid`的功能特性** 1. **进程管理**:`mod_fcgid`能够...

    mod_fcgid-2.3.9.tar.gz

    在FastCGI中,进程管理器会预启动多个CGI进程,然后持久化地为多个请求服务,提高了处理效率。 mod_fcgid-2.3.9是这个模块的一个版本,发布于某个时间点,可能包含了一些新的特性和改进。通常,软件版本升级会修复...

    Apache安装包与mod_wsgi库

    在嵌入式模式中,mod_wsgi直接在Apache进程中运行Python应用,而daemon模式则将Python应用运行在单独的进程组中,提供更高的隔离性和性能。 3. **在Windows上安装Apache**:首先,你需要从Apache官方网站下载适合...

    perl-www-easy:基于mod_perl的极简主义Web框架

    Perl-www-easy是一个专为Perl开发者设计的轻量级Web框架,它利用了mod_perl模块和AnyEvent::HTTP::Server库,旨在提供一个高效、简洁的环境来构建Web应用程序。这个框架的核心理念是使开发过程更为直观和简单,同时...

    mod wsgi so

    9. **性能优化**:使用 daemon 模式可以提高 mod_wsgi 的性能,因为它可以管理多个独立的 Python 进程,并且可以在不影响其他应用的情况下重启有问题的进程。 10. **错误排查**:在遇到问题时,可以通过查看 Apache...

    mod_python-3.2.x.rar 3.2全集 含win32 linux各版本

    总结来说,Apache mod_python是将Python和Web服务器紧密结合的利器,提供了高效的Web应用开发和执行环境。了解并掌握mod_python的工作原理和配置方法,对于提升Python Web开发的效率和质量具有重要意义。

    mod_fcgid-开源

    1. FastCGI:FastCGI是一种常驻型的CGI,与传统的CGI相比,FastCGI在处理动态内容时性能更高,因为它可以保持多个进程长期运行,从而避免了每次请求时创建和销毁进程的开销。 2. mod_fcgid:作为Apache的模块,mod_...

    Apache2.2+mod_ASPDOT

    8. **FastCGI支持**:通过`mod_fastcgi`,Apache2.2能够与FastCGI进程管理器交互,从而支持运行PHP、Perl等脚本语言的Web应用程序,提高性能。 9. **MIME类型管理**:Apache2.2允许管理员定义新的MIME类型,以便...

    apache_2.2

    为了提高性能,Apache 2.2引入了多路复用(Multiplexing)模式,即“worker”MPM(多处理模块),允许一个父进程管理多个子进程,每个子进程可以同时处理多个连接。这显著减少了服务器对资源的需求,尤其是在高并发...

    Apache2.0中文手册(chm格式)

    - FastCGI和mod_proxy_fcgi可以将动态请求转发给FastCGI进程,提高性能。 12. **GZIP压缩**: - mod_deflate用于对HTTP响应内容进行GZIP压缩,减少网络传输量。 13. **防盗链设置**: - 通过`Referrer`检查限制...

    Apache 使用指南与实现原理

    1. **安装与配置**:Apache的安装过程因操作系统而异,但通常包括下载最新版本的源代码或预编译二进制包,然后通过命令行工具进行编译和安装。配置文件`httpd.conf`是Apache的核心,用于定义服务器的行为,如监听...

    Apache 2.0.39源代码

    3. **多线程模型**:Apache 2.0.x引入了多线程支持,通过Prefork和Worker两种多进程/多线程模型提高性能。在源代码中,可以看到如何调度线程和进程以处理请求。 4. **网络通信**:Apache使用Berkeley套接字API与...

    Apache HTTP Server Version 2.2 帮助详解文档

    为了提升服务器性能,Apache 2.2提供了一些配置选项,如多进程(MPM)模型的选择,如Prefork、Worker和Event,每种模型有不同的性能特性。此外,调整`KeepAlive`、`MaxKeepAliveRequests`和`KeepAliveTimeout`等参数...

    apache 2.2.12_src

    5. **模块系统**:Apache支持动态加载模块,`modules`目录下包含了许多预编译的模块,如`mod_rewrite`用于URL重写,`mod_ssl`用于SSL/TLS加密,以及`mod_deflate`用于内容压缩。 6. **第三方模块**:除了Apache自带...

    Apache2.2中文手册

    Apache 2.2支持多进程(MPM,Multi-Processing Modules)模型,如Prefork和Worker,以适应不同的服务器负载情况。`MaxKeepAliveRequests`和`KeepAliveTimeout`等设置可以优化连接处理和资源利用。 八、代理与缓存 ...

    Apache2.2中文手册.rar

    `mpm`(多进程模块)如`prefork`和`worker`决定了服务器如何处理并发请求。`KeepAlive`和`MaxKeepAliveRequests`等参数可以调整连接保持和资源管理。 ### 8. CGI与FastCGI `mod_cgi`模块支持执行CGI(Common ...

Global site tag (gtag.js) - Google Analytics