linux高级运维之Tomcat&&varnish

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了linux高级运维之Tomcat&&varnish相关的知识,希望对你有一定的参考价值。

linux高级运维之Tomcat、varnish代理

案例1:安装部署Tomcat服务器

案例2:使用Tomcat部署虚拟主机

案例3:使用Varnish加速Web

Java及解释器:

tomcat:8080  几乎不做静态页面 几乎都是做tomcat+jsp

java 生态  类库  

jdk  open-jdk推荐使用这个 orcale和google官司 andiaod[java]jdk  

java[sun]

jre(jdk的阉割版) 

java 扩展名jsp

java是war包  可以自动解war包  自动重读配置文件

unpackWARs="true" autoDeploy="true"   Deploy配置

安装部署Tomcat服务器

装包:

验证是否有open-jdk 

rpm -qa | grep jdk

tar zxf apache-tomcat-8.0.30.tar.gz 

mv apache-tomcat-8.0.30  /usr/local/tomcat  移动到哪里就装到哪里了。

ls /usr/local/tomcat    //Tomcat文件目录

    bin/                    //主程序目录

    lib/                    //库文件目录

    logs/                   //日志目录  

    temp/                   //临时目录

    work/                   //自动编译目录jsp代码转换servlet

    conf/                   //配置文件目录

    webapps/                //页面目录

firewall-cmd --set-default-zone=trusted

setenforce 0

./startup.sh 

ss -natulp | grep java  //检查8080;8005;8009端口

firefox 192.168.2.222:8080

firefox 192.168.2.111:8080/test.jsp

重启服务是先关再启:

./shutdown.sh

./startup.sh

使用Tomcat部署虚拟主机

实现两个基于域名的虚拟主机,域名分别为:www.a.com和 www.b.com

使用www.a.com域名访问的页面根路径为/usr/local/tomcat/aa/ROOT

使用www.b.com域名访问的页面根路径为/usr/local/tomcat/bb/base

访问www.a.com/test时,页面自动跳转到/var/www/html目录下的页面

访问页面时支持SSL加密通讯

私钥、证书存储路径为/usr/local/tomcat/conf/cert

每个虚拟主机都拥有独立的访问日志文件

配置tomcat集群环境

主配置文件结构:配置文件严格区分大小写

    <?xml version=‘1.0‘ encoding=‘utf-8‘?>

    <Server port="8005" shutdown="SHUTDOWN">

      <Service name="Catalina">

        <Connector port="8080" protocol="HTTP/1.1"

          connectionTimeout="20000" redirectPort="8443" />    

        <Connector port="8009" protocol="AJP/1.3" 

            redirectPort="8443" />

            <Engine name="Catalina" defaultHost="localhost">

                <Host name="localhost"  appBase="webapps"

               unpackWARs="true" autoDeploy="true">

                </Host>

           </Engine>

      </Service>

    </Server>

配置文件结构也可看下图
技术分享图片

基于域名的虚拟主机:

vim  /usr/local/tomcat/conf/server.xml 

    <Engine name="Catalina" defaultHost="localhost">

        //defaultHost优先级最低 不用域名用ip访问时默认访问这个,nginx 是默认访问第一个server

        //host里能内嵌host 平级的 location也不能内置location。

    <Host name="www.a.com"  appBase="a"

            unpackWARs="true" autoDeploy="true">

            //自动解压war文件,自动重读配置文件

        </Host>

          <Host name="www.b.com"  appBase="b"

            unpackWARs="true" autoDeploy="true">

        </Host>

mkdir -p  /usr/local/tomcat/{a,b}/ROOT

        //默认网页文件是放在appbase中的ROOT目录下

echo "AAA"   > /usr/local/tomcat/a/ROOT/index.html

echo "BBB" > /usr/local/tomcat/b/ROOT/index.html

重启服务

./shutdown.sh

./startup.sh

setenforce 0 

firewall-cmd --set-default-zone=trusted

sed -i ‘$a 192.168.2.111   www.a.com  www.b.com ‘ /etc/hosts

    //修改客户端的hosts文件方便验证

firefox www.a.com:8080

firefox www.b.com:8080

修改www.b.com网站的首页目录为base

appBase  docBase  path="/test   三个跟页面有关(路径)的参数

如果有很多项目 改docbase  每个项目的页面放在不同的目录下

docBase参数可以修改默认网站首页路径  docBase基本文件路径

docBase="base"  默认打开目录是ROOT  不写就是打开ROOT 写了就打开base

步骤:

vim  /usr/local/tomcat/conf/server.xml 

     <Host name="www.b.com"  appBase="b"

         unpackWARs="true" autoDeploy="true">

         <Context path="" docBase="base" reloadable="true"/>

            //在host中加了Context把默认网页由ROOT该为了base

        </Host>

mkdir  /usr/local/tomcat/b/base

echo "BASE" > /usr/local/tomcat/b/base/index.html

./shutdown.sh

./startup.sh

firefox http://www.b.com:8080/        //结果为base目录下的页面内容

当用户访问http://www.a.com/test打开/var/www/html目录下的页面

<Context path="" docBase="base" reloadable="true"/>

    如果没有匹配到路径(空)那么就看docbase去这个路径去找

<Context path="/test" docBase="/var/www/html/" />  可以写多个 相当于if

    匹配地址栏 打开什么文件  如果地址是test就打开后面的文件

步骤:

vim  /usr/local/tomcat/conf/server.xml 

    <Host name="www.a.com" appBase="a" 

        unpackWARS="true" autoDeploy="true">

        <Context path="/test" docBase="/var/www/html/" />

        </Host>

echo "Test" > /var/www/html/index.html

./shutdown.sh

./startup.sh

firefox http://www.aa.com:8080/test    

    //返回/var/www/html/index.html的内容

    //注意,访问的端口为8080

配置Tomcat支持SSL加密网站

tomcat可以同时启两个重复考配多份保证配置没有冲突就行,改改端口号之类的可以。

就是个java程序而已,两个程序之间很独立不会相互影响挂了一个不影响其他的。

apache nginx 都是一个端口对应一个域名 一个虚拟主机   

tomcat 端口和虚拟主机没有绑定,一个端口可以访问所有的虚拟主机!

        //进了门可以享受所有的服务-_-。

步骤:

生成证书和私钥

keytool -genkeypair -alias tomcat -keyalg RSA -keystore /usr/local/tomcat/keystore

    //-genkeypair     生成密钥对

    //-alias tomcat     密钥别名

    //-keyalg RSA     定义密钥算法为RSA算法

    //-keystore         定义密钥文件存储在:/usr/local/tomcat/keystore

添加安全端口加入对应加密文件和密码

vim  /usr/local/tomcat/conf/server.xml 

    keystoreFile="/usr/local/tomcat/keystore" keystorePass="123456"  //这段是需要添加的

    配置如下默认这段Connector被注释掉了,打开注释,添加密钥信息即可

    <Connector port="8443" protocol="org.apache.coyote.http11.Http11NioProtocol"

    maxThreads="150" SSLEnabled="true" scheme="https" secure="true"

    keystoreFile="/usr/local/tomcat/keystore" keystorePass="123456" 

        clientAuth="false" sslProtocol="TLS" />

./shutdown.sh

./startup.sh

验证 firefox https:www.a.com:8443

配置Tomcat日志

为每个虚拟主机设置不同的日志文件

不同虚拟web的日志:

vim  /usr/local/tomcat/conf/server.xml 

    <Valve className="org.apache.catalina.valves.AccessLogValve" directory="logs"

           prefix="a_log" suffix=".txt"   //只需要改日志名(prefix)称谓和格式suffix

          pattern="%h %l %u %t &quot;%r&quot; %s %b" /> 

重启Tomcat服务器

ls /usr/local/tomcat/logs/

    catalina.logs  整个tomcat软件的日志

配置Tomcat集群

Tomcat默认监听端口8080:访问不方便;解决方法 用nginx做调度器

    //和nginx做web高可用 tcp/udp代理原理一样 只是端口为8080

步骤:

配置Nginx调度器

    vim  /usr/local/nginx/conf/nginx.conf

        http{

            upstream toms {

            server 192.168.2.100:8080;

            server 192.168.2.200:8080;

                //注意端口为8080

            }

            server  {

            listen 80;

            server_name localhost;

            location / {

                proxy_pass  http://toms;

            }

配置Tomcat服务器

yum -y install  java-1.8.0-openjdk                //安装JDK

yum -y install java-1.8.0-openjdk-headless        //安装JDK

tar -xzf  apache-tomcat-8.0.30.tar.gz   

mv apache-tomcat-8.0.30  /usr/local/tomcat

./startup.sh

firefox https:192.168.4.5   //访问nginx调度器

Varnish缓存服务器

varnish 做的事情是把总部的资源缓存到全国各地去  解决距离远的问题和中国南北通信问题(电信联通相互租用线路)

可以这样:成都 backend 长沙backend上海 backend北京(最原始的服务器) 其他都是缓存

使用Varnish加速后端Web服务

代理服务器可以将远程的Web服务器页面缓存在本地

远程Web服务器对客户端用户是透明的

利用缓存机制提高网站的响应速度

使用varnishadm命令管理缓存页面

使用varnishstat命令查看Varnish状态

步骤:

构建Web服务器:随意 有个页面可以访问就可以

部署Varnish缓存服务器(192.168.4.5)

yum -y install gcc readline-devel  ncurses-devel  pcre-devel  
python-docutils-0.11-0.2.20130715svn7687.el7.noarch.rpm 

        //安装依赖包 

useradd -s /sbin/nologin varnish  //建用户

tar zxf varnish-5.2.1.tar.gz 

cd varnish-5.2.1/

./configure 

make && make install

cp  etc/example.vcl  /usr/local/etc/default.vcl

        //复制启动脚本及配置文件

vim  /usr/local/etc/default.vcl

    backend default {           backend:后台  后台可以写很多

            .host = "192.168.2.100";    //后天web服务器地址

            .port = "80";

        }

    varnishd  -f /usr/local/etc/default.vcl

    //varnishd命令的其他选项说明如下:

    //varnishd –s malloc,128M        定义varnish使用内存作为缓存,空间为128M,默认是内存

    //varnishd –s file,/var/lib/varnish_storage.bin,1G 定义varnish使用文件作为缓存

curl 192.168.4.5

    192.168.2.111

killall httpd   杀死真正web服务器的httpd服务

curl 192.168.4.5

    192.168.2.111   发现还是能访问页面,因为已经被varnish缓存到4.5上了。

验证结果:

firefox f12  看到via  就是说通过缓存看到了server nginx

via:http/1.1 ctc.ningbo.ha2ts4.83 (ApacheTrafficServer/6.2.1 [cHs f ]), 

     http/1.1 ctc.chengdu.ha2ts4.24 (ApacheTrafficServer/6.2.1 [cRs f ])

curl -I 192.168.4.5   看响应头(包头)信息

    HTTP/1.1 200 OK

    Date: Thu, 31 May 2018 09:53:34 GMT

    Server: Apache/2.4.6 (Red Hat Enterprise Linux) php/5.4.16   这里

    Last-Modified: Mon, 28 May 2018 01:43:06 GMT

    ETag: "e-56d3a3d36393a"

    Content-Length: 14

    Content-Type: text/html; charset=UTF-8

    X-Varnish: 32790

    Age: 0

    Via: 1.1 varnish (Varnish/5.2)      这里缓存了server

    Accept-Ranges: bytes

    Connection: keep-alive

查看varnish日志

varnishlog          很细节的日志 用于排错。

varnishncsa         简单日志(风格类似apache,nginx)

192.168.4.100 - - [31/May/2018:18:00:29 +0800] "HEAD http://192.168.4.5/ HTTP/1.1" 200 0 "-" "curl/7.29.0"

更新缓存数据

web服务器后台的数据变化了  varnish几分钟会自动和后台同步新,但非实时更新。

不愿意等就varnishadm  

varnish> ban req.url ~ .*

//清空缓存数据,支持正则表达式

小思考:

nginx 做调度就是解决服务器压力大的问题所有就只放一个网页(如www.c.com)就行了 

要想访问服务器上本身并发不高的基于域名的www.a.com  www.b.com 就直接用域名访问真实的服务器就可以了(不走代理) 

而www.c.com这个压力很大的页面就走代理192.168.4.5来访问轮询。

这样就既解决了某个网站压力大需要轮询 也可以用一个服务器放多个页面? 

以上是关于linux高级运维之Tomcat&&varnish的主要内容,如果未能解决你的问题,请参考以下文章

高级运维之nginx

linux高级运维之×××,pssh工具使用

Linux-CentOS 7.9 - 7Linux 常用运维命令&操作(高级)建议收藏

Python自动化运维之高级函数

Python自动化运维之高级函数

Linux运维之道1,2章