linux之使用rpmbuild打rpm包

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了linux之使用rpmbuild打rpm包相关的知识,希望对你有一定的参考价值。

linux之使用rpmbuild打rpm包

 

前言:

    已从事linux运维工作数年,感觉自己还是个小菜鸟,没有大神那么的钻研的精神。只是单纯热爱,喜欢对着黑色的屏幕敲击命令,喜欢这种感觉。为什么要做RPM包呢?因为之前公司使用的是开源软件环境,nginx,tomcat,java,等等等等,安装时流程:编译->标准化目录->标准化参数->部署代码。这样纯手操作的话需要一套部署文档,当然根据个人理解和个人功力的不同,部署出来效果都千奇百怪。 所以通过一个星期的学习,大概掌握了写spec,并且总结了自己的方法,虽然比较low,但是目前还算是有效。

原理:

    其实rpm是针对centos和redhat,这两种系统服务器份额占有率比较高,目前线上最常用的是 cetnos(redhat)6-x86_64和7,红帽公司为了解决编译繁琐目录不规范的问题才使用的rpm方案,说白了就是把文件封装起来,类似压缩,并将执行的脚本和依赖封装到rpm中, 加上yum源的机制,大幅缩减安装软件的难度和速度。

    记住一点就好了,"一切皆文件!"

制作原理:

    这里有5个文件夹,按照做菜原理可以理解为

    SPEC:核心配置文件,菜谱

    SOURCES:源文件存放,原料

    BUILD,/var/tmp/foo-root/:生成编译文件,模拟系统环境,炒锅

    RPMS:封装完成的rpm包 ,装盘

     技术分享

规划:

     其实作为运维都知道,解决问题不算本事,能避免问题,把复杂的事做的简单才是水平。你若想制作属于自己的RPM,而且在本公司推下去一定回遵循以下几点:

     1、标准化, 软件安装目录,输出文件统一路径,配置文件规范,你不可能软件东一个,西一个,日志输出的到处都是吧,万一哪天磁盘空间满了,还得担责任是不?

     2、完整,尽量使功能完整,但不可把程序做的太死 比如一套Tomcat代码,我就分成了3个包,环境包、代码包、java包。

     以下是lnmp架构的规划目录:

技术分享

干货:

      重点就是SPEC的编辑,这里我用了不同的方法,没有使用rpmbuild的“锅”,因为安装软件也只是生成文件罢了,只要自己在测试环境可以编译安装成功那为什么还要扔给”锅”再炒一下,笔者写过多个spec也查过很多资料,在安装某些文件特别多的软件时,rpmbuild就会读取失败 而且还不报错,所以自己判断 它真的是一个”锅”,不能背!

      所以很佩服红帽官方的大神,不知道他们怎么实现的,也不想为此投入太多精力, 其实完全可以先在自己的测试环境把软件装好,打包成tar.gz格式,再加上一些软件的配置文件 打包到rpm内,在安装端解压释放执行,就完成了!

 

实例:

    测试环境:

        centos6_x86-64

        php5.6

        163.repo

    1、rpmbuild打包环境准备

yum install -y rpm-build rpmdevtools redhat-rpm-config
#安装打包环境
useradd dabao
#创建工作用户,不建议使用root因为root有无限大权限,封包时会可能会影响自身系统
vim .rpmmacros
%_topdir /home/dabao/rpmbuild
#设置%_topdir宏,这个宏是定义打包目录的路径,默认是在/usr/src/redhat
mkdir -p rpmbuild/{BUILD,RPMS,SOURCES,SPECS,SRPMS}
#创建工作目录

    2、在测试机中安装php

yum install zlib-devel libxml2-devel libjpeg-devel libjpeg-turbo-devel freetype-devel libpng-devel gd-devel libcurl-devel libxslt-devel libxslt-devel libmcrypt-devel mhash mcrypt openssl-devel bzip2-devel
#php依赖要记下一会要写到spec中

mkdir -p /data/app/
tar xf libiconv-1.14.tar.gz
cd libiconv-1.14
./configure --prefix=/data/app/libiconv11
make && make install
#安装
./configure --prefix=/data/app/php53 --with-config-file-path=/data/app/php53/etc --with-config-file-scan-dir=/data/app/php53/etc/php.d --with-mysql=mysqlnd --with-iconv-dir=/data/app/libiconv11 --with-freetype-dir --with-jpeg-dir --with-png-dir --with-zlib --with-bz2 --with-libxml-dir=/usr --enable-xml --disable-rpath --enable-safe-mode --enable-bcmath --enable-shmop --enable-sysvsem --enable-inline-optimization --with-curl --with-curlwrappers --enable-mbregex --enable-fpm --enable-mbstring --with-mcrypt --with-gd --enable-gd-native-ttf --with-openssl --with-mhash --enable-pcntl --enable-sockets --with-xmlrpc --enable-zip --enable-soap --enable-short-tags --enable-zend-multibyte --enable-static --with-xsl --with-fpm-user=www --with-fpm-group=www --enable-ftp
 
make
make install

useradd www -s /sbin/nologin -M
mkdir -p /data/logs/
#创建php用户及log目录

  软件调优,可根据环境调试:

#配置文件
cp /root/tools/php-5.5.29/php.ini-production /etc/php.ini 
sed -i ‘910s#;date.timezone = #date.timezone = "Asia/Shanghai"#g‘ /etc/php.ini
#901行修改 date.timezone = "Asia/Shanghai"
cp /data/app/php55/etc/php-fpm.conf.default /data/app/php55/etc/php-fpm.conf

sed -i ‘32s#;error_log = log/php-fpm.log#error_log = /data/logs/php-fpm56.log#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘50s#;log_level = notice#log_level = error#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘458s#;rlimit_files = 1024#rlimit_files = 32768#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘164s#listen = 127.0.0.1:9000#listen = 127.0.0.1:9056#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘235s#pm.max_children = 5#pm.max_children = 1024#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘240s#pm.start_servers = 2#pm.start_servers = 16#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘245s#pm.min_spare_servers = 1#pm.min_spare_servers = 5#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘250s#pm.max_spare_servers = 3#pm.max_spare_servers = 20#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘255s#;pm.process_idle_timeout = 10s;#pm.process_idle_timeout = 15s;#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘261s#;pm.max_requests = 500#pm.max_requests = 2048#g‘ /data/app/php56/etc/php-fpm.conf
sed -i ‘441s#;slowlog = log/$pool.log.slow#slowlog = /data/logs/$pool56.log.slow#g‘ /data/app/php56/etc/php-fpm.conf

#启动文件
cat /etc/init.d/php-fpm56
#! /bin/sh
### BEGIN INIT INFO
# Provides:          php-fpm
# Required-Start:    $remote_fs $network
# Required-Stop:     $remote_fs $network
# Default-Start:     2 3 4 5
# Default-Stop:      0 1 6
# Short-Description: starts php-fpm
# Description:       starts the PHP FastCGI Process Manager daemon
### END INIT INFO
prefix=/data/app/php56
exec_prefix=${prefix}
php_fpm_BIN=${exec_prefix}/sbin/php-fpm
php_fpm_CONF=${prefix}/etc/php-fpm.conf
php_fpm_PID=${prefix}/var/run/php-fpm.pid
php_opts="--fpm-config $php_fpm_CONF --pid $php_fpm_PID"
wait_for_pid () {
        try=0
        while test $try -lt 35 ; do
                case "$1" in
                        ‘created‘)
                        if [ -f "$2" ] ; then
                                try=‘‘
                                break
                        fi
                        ;;
                        ‘removed‘)
                        if [ ! -f "$2" ] ; then
                                try=‘‘
                                break
                        fi
                        ;;
                esac
                echo -n .
                try=`expr $try + 1`
                sleep 1
        done
}
case "$1" in
        start)
                echo -n "Starting php-fpm "
                $php_fpm_BIN --daemonize $php_opts
                if [ "$?" != 0 ] ; then
                        echo " failed"
                        exit 1
                fi
                wait_for_pid created $php_fpm_PID
                if [ -n "$try" ] ; then
                        echo " failed"
                        exit 1
                else
                        echo " done"
                fi
        ;;
        stop)
                echo -n "Gracefully shutting down php-fpm "
                if [ ! -r $php_fpm_PID ] ; then
                        echo "warning, no pid file found - php-fpm is not running ?"
                        exit 1
                fi
                kill -QUIT `cat $php_fpm_PID`
                wait_for_pid removed $php_fpm_PID
                if [ -n "$try" ] ; then
                        echo " failed. Use force-quit"
                        exit 1
                else
                        echo " done"
                fi
        ;;
        status)
                if [ ! -r $php_fpm_PID ] ; then
                        echo "php-fpm is stopped"
                        exit 0
                fi
                PID=`cat $php_fpm_PID`
                if ps -p $PID | grep -q $PID; then
                        echo "php-fpm (pid $PID) is running..."
                else
                        echo "php-fpm dead but pid file exists"
                fi
        ;;
        force-quit)
                echo -n "Terminating php-fpm "
                if [ ! -r $php_fpm_PID ] ; then
                        echo "warning, no pid file found - php-fpm is not running ?"
                        exit 1
                fi
                kill -TERM `cat $php_fpm_PID`
                wait_for_pid removed $php_fpm_PID
                if [ -n "$try" ] ; then
                        echo " failed"
                        exit 1
                else
                        echo " done"
                fi
        ;;
        restart)
                $0 stop
                $0 start
        ;;
        reload)
                echo -n "Reload service php-fpm "
                if [ ! -r $php_fpm_PID ] ; then
                        echo "warning, no pid file found - php-fpm is not running ?"
                        exit 1
                fi
                kill -USR2 `cat $php_fpm_PID`
                echo " done"
        ;;
        *)
                echo "Usage: $0 {start|stop|force-quit|restart|reload|status}"
                exit 1
        ;;
esac

  完成之后你就可以启动下你的php试试了,启动测试成功后,请关闭服务正式开始我们打RPM包

    2、开始制作rpm包

cd /data/app
tar zcvf php56.tar.gz php56
tar zcvf libiconv11.tar.gz libiconv11
cp php56.tar.gz /home/dabao/rpmbuild/SOURCES
cp libiconv11.tar.gz /home/dabao/rpmbuild/SOURCES
cp /etc/init.d/php-fpm56 /home/dabao/rpmbuild/SOURCES
#把原料准备好

  编写spec文件

vim /home/dabao/rpmbuid/SPECS/php56.spec
%define name t-php
%define version 5.6.30
%define _prefile /app

Summary:        t-php
Name:           %{name}
Version:        %{version}
Release:        2
Group:          System Environment/Daemons
License:        GPL
URL:            www.php.org

Packager:       tajZhang
Vendor:         tajZhang

Source0:        php56.tar.gz
Source1:        php-fpm56
Source2:        libiconv11.tar.gz
BuildRoot:      %{_tmppath}/%{name}-%{version}-root

#BuildRequires: 
Requires:       zlib-devel libxml2-devel libjpeg-devel libjpeg-turbo-devel freetype-devel libpng-devel gd-devel libcurl-devel libxslt-devel libxslt-devel libmcrypt-devel mhash mcrypt open
ssl-devel bzip2-devel

%description
php5.6.30 copy install.
basedir /data/app/php56 /data/app/php56/etc

%prep
#%setup -q


%build
#mkdir -p %{buildroot}/usr/java/jdk1.6.0_22
#cp -r * /usr/java/jdk1.6.0_22

%install
rm -rf %{buildroot}
mkdir -p %{buildroot}/data/app
mkdir -p %{buildroot}/etc/init.d
cp -i %{SOURCE0} %{buildroot}/data/app
cp -i %{SOURCE2} %{buildroot}/data/app
cp -i %{SOURCE1} %{buildroot}/etc/init.d
#cp -i %{SOURCE1} %{buildroot}/etc/init.d/ && chmod +x %{buildroot}/etc/init.d/mysqld
#cp -i %{SOURCE2} %{buildroot}/etc/

%pre
#if [ $1 == 1 ];then
#fi
%post
if [ $1 == 1 ];then
tar xf /data/app/php56.tar.gz -C /data/app/
tar xf /data/app/libiconv11.tar.gz -C /data/app/
rm -f /data/app/php56.tar.gz /data/app/libiconv11.tar.gz
mkdir -p /data/logs
useradd www -s /sbin/nologin -M
chmod +x /etc/init.d/php-fpm56
/etc/init.d/php-fpm56 start
chkconfig php-fpm56 on
echo "install over"
fi
%preun
if [ $1 == 0 ];then
/etc/init.d/php-fpm56 stop
rm -rf /data/app/php56
rm -f /etc/init.d/php-fpm56
echo "remove over"
fi
%postun
%clean
rm -rf "%{buildroot}"
rm -rf %_topdir/BUILD/%{name}-%{version}

%files
%defattr (-,root,root,0755)
/etc/init.d/php-fpm56
/data/app/php56.tar.gz
/data/app/libiconv11.tar.gz

  执行打包命令

rpmbuild -ba php56.spec
#到SPECS目录下执行,如果没有报错会在RPMS/x86_64/目录下生成你打好的包
cd /home/dabao/rpmbuild/RPMS/x86_64/
   t-php-5.6.30-2.x86_64.rpm

  到此你的第一个rpm包制作完成,拿到测试机上装下试试吧!

分析:

    什么?稀里糊涂的根本不懂SPEC里写的什么,其实它只是个模板,摘录一段各位看了一目了然:

----------------------------------分割线---------------------------------------------------------------------------------

 SPEC配置文件讲解
#/** 定义宏段 **/
%define name nginx  <==定义name宏伟nginx,后面可以调用这个宏%{name}
%define version 1.2.4 <==定义version宏为1.2.4
%define _prefix /application/nginx
  
#/** 简介段 **/
Summary:    information <==软件包的概要信息,不要超过50个字符
Name:    %{name}   <==软件包的名称,调用上面的宏
Version:    %{version} <==软件包的版本,调用上面的宏
Release:    1    <==软件包发布序列号,表明第几次打包
License:    GPL <==软件授权方式,通常是GPL
Group:       System Environment/Daemons <==软件包分组,属于哪个组包建议使用标准分组,查看/usr/share/doc/<wiz_tmp_highlight_tag>rpm-4.4.2.3/GROUPS
URL:    http://nginx.org/    <==源代码软件包的官方地址或源码包下载地址
 
Packager:    coral <[email protected]>  <==软件包的作者及联系方式
Vendor:    coral                    <==软件包开发者的名字
Source0:    %{name}-%{version}.tar.gz <==源代码软件包的名字,如nginx-1.2.4-tar.gz
Source1:    nginx.init           <==如果需要需要安装多个源码软件包,可指定多个Source
比如Source0 Sourcel Source100等,数字可以不连续,后面使用%{Source0}来调用
 
Patch1:      httpd-2.2.22-pcre830.patch  <==指定补丁文件
Patch2:      httpd-2.2.21-mod_proxy-change-state.patch
 
BuildRoot: %{_tmppath}/%{name}-%{version}-root  <==这是make install 使用的虚拟目录,安装后打包,就将该目录下打,通常是/var/tmp/软件名-版本号-发布序列号,该虚拟目录是自动创建的
说明:引用buildRoot这个宏时,可以写成$<wiz_tmp_highlight_tag>RPM_BUILD_ROOT,也可以鞋厂%{buildroot}方式来引用
 
BuildRequires:  gcc,make  <==制作<wiz_tmp_highlight_tag>RPM包过程所依赖的软件包,多个包依赖用逗号分隔
Requires:        pcre,pcre-devel,openssl,openssl-devel,zlib,zlib-devel,chkconfig <==安装过程中所依赖的软件包
提示:可以使用>=或<=表示大于或小于某一特定版本,如:libpng-devel >= 1.0.20 zlib不同的软件名使用空格分块
提示:还有PreReq、Requires(pre)、Requires(post)、Requires(preun)、Requires(postun)、BuildRequires等都是针对不同阶段的依赖包指定
 
%description  <==软件包详细描述信息,一行不要超过50个字符,回车换行,尅使用多行
This is an open-source software,bulk distribution ...
- 强制换行
 
#/** 准备段 **/
%prep   <==安装前的准备工作,一般用于解压源码包
%setup -q    <==%setup是宏命令,可自动完成解包工作
说明:预处理一般是将源码包解压,有两种情况:一就是同事编译多个源码包,二就是源码的tar包的名称于解压出来的目录不一致,此时需要-n参数指定一下,如:%setup -q -n %{Source0},有时候解压出来的tar.gz与包名不符合,这时候需要指定-n参数,如%setup -q -n nagios,后面不加版本号
 
%path1          <==打补丁    
 
#/** 编译段 **/
%build      <==源码编译,如: ./configure && make 命令
./confingure \\
     --prefix=%{_prefix} \\
     --user=nginx \\
     --group=nginx \\
     --with-http_stub_status_module \\
     --with-http_ssl_module \\
     --with-pcre
make
#make %{?_smp_mflags}  <==使用多核CPU加速编译过程,相当于命令行中的make -j
 
#/** 安装段 **/
%install    <==源码安装,如:make install 命令
rm -rf %{buildroot}   <==在此处设置删除buildroot虚拟根目录是为方式以前打包留下的文件,防止安装出错,才删除该目录
make install DESTDIR="%{buildroot}"     <==指定编译安装的路径到buildroot,而不是安装到系统中
%{__install} -p -d -m 0755 %{buildroot}/var/log/nginx   <==在虚拟根目录下创建目录,并授予权限
%{__install} -p -D -m 0755 %{SOURCE1} %{buildroot}/etc/init.d/nginx  <==安装启动脚本到init.d目录
注意:无论上面定义的SOURCE1是不是大写,这里调用必须为大写
说明:%prep  %build %install段,除了可以执行<wiz_tmp_highlight_tag>rpm所定义的宏命令(以%开头),还可以换行执行shell命令,比如直接写tar -zxf xxx.tar.gz命令,而不使用%setup -q宏
 
#/** 脚本段 **/
%pre    <==<wiz_tmp_highlight_tag>rpm安装前执行的脚本,比如创建用户,设置变量等等操作
if [ $1 == 1 ];then
    /usr/sbin/groupadd nginx 2>/dev/null
    /usr/sbin/useradd -g nginx -s /sbin/nologin -M nginx 2>/dev/null
fi
说明:$1等于1就是安装
%post    <==<wiz_tmp_highlight_tag>rpm安装完成后执行的脚本,比如加载ldconfig函数库,加入开机自动启动等等
if [ $1 == 1 ];then
   echo "/usr/local/lib" >>/etc/ld.so.conf.d/nginx.conf <==如果安装 lib库到/usr/local/lib中,需要配置该段
   /sbin/ldconfig 2>/dev/null
   chkconfig --add %{name}
fi
说明 :$1等于1就是安装
%preun  <==<wiz_tmp_highlight_tag>rpm 卸载前执行的脚本
if [ $1 ==0 ];then
    /sbin/service %{name} stop >/dev/null 2>&1
    /sbin/chkconfig -del %{name}
fi
说明: $1等于0就是卸载
%postun  <==<wiz_tmp_highlight_tag>rpm卸载完成后执行的脚本
 
说明%preun在升级的时候会执行,%postun在升级<wiz_tmp_highlight_tag>rpm包的时候不会执行
 
<wiz_tmp_highlight_tag>rpm还提供了一种信号机制:不同的操作会返回不同的信息,并放到默认变量$1中
信号    说明
0        卸载
1        安装
2        升级
 
 
#/** 清理段  **/
%clean      <==清理临时文件,通常为如下
rm -rf  "%{buildroot}"    <==删除虚拟目录
rm -rf   %_topdir/BUILD/%{name}-%{version}   <==将解压的源码包删除掉
 
 
#/** 文件段 **/
%file     <==定义哪些文件或目录放入到<wiz_tmp_highlight_tag>rpm中
/usr/sbin/nginx <==指定包含的文件目录
/etc/nginx/   <==指定包含的目录(文件后面有个/表示目录,目录里的所有文件)
%dir  /var/run/nginx    <==指定包含的文件,如果前面是%dir ,那么该nginx是一个空目录
说明:用于定义软件包所包含的文件,分为三类:说明文档(doc),配置文件(conf),一级执行程序(sbin)
注意:%files这里会在虚拟根目录下进行,千万不要写绝对路径,应该使用宏或变量表示相对路径
%doc LICENSE CHANGES README     <==要打包的文档文件,如果不知道路径,默认是/usr/share下
%defattr (-,root,root,0755)      <==定义默认权限
%{_prefix}     <==调用上面的定义宏,使用%defattr对/application/nginx目录设置安装文件的属性,第一个“-”表示默认文件权限(文件0644,目录0755),第二个"root"表示属主,第三个“root”表示属组,第四个“0755”设置的权限
说明:%defattr和%attr宏作用基本一样,%defattr可以对目录进行递归授权,%attr针对单个文件
 
%config(noreplace) %{_prefix}/conf/nginx.conf     <==nginx.conf配置文件放置到/application/nginx/conf目录下,config的文件为配置文件,noreplace表示升级<wiz_tmp_highlight_tag>rpm包的时候不替换该文件
%config(noreplace) %{_prefix}/conf/fastcgi.conf   <==fastcgi.conf 配置文件放置到/application/nginx/conf 目录下
%config(noreplace) %{_prefix}/conf/fastcgi_params
%attr(0755,root,root) /etc.init.d/nginx  <==对单个文件授权,权限为"-"表示保留原有属性
注意:如果%exclude指定的文件不存在,也会报错
 
#/** 改变日志段  **/
%changelog  <==把<wiz_tmp_highlight_tag>rpm包软件的每次修改记录到这里,保存到发布的<wiz_tmp_highlight_tag>rpm包中一般减号开始,以便查询
* Wed Apr  11 2012 coral <919953500>  -1.2.4-1  <==以*开头,什么时间改的,什么人改的
-  Initial  version       <==以-开头,干了什么事(初始版本)
注意:此地方用中文会报错
特别注意:%install 宏使用的是绝对路径,而%file部分使用相对路径
----------------------------------分割线---------------------------------------------------------------------------------

 

总结与启发:

    各位看到php的spec根本就没有经过解压与编译,而是直接将tar.gz复制到系统中,执行安装完成后命令。

    执行结束后为什么执行一次echo呢?因为这样才能让if的$?返回0,如果最后一条不是成功执行的命令,rpm就会安装报错。

    rpm机制是在系统子bsah下执行,不是当前bash,设置系统环境变量的重新登录才生效。

    %file段至关重要,因为这里记录了你要装盘的文件。

 

    通过rpm的学习,觉得它可以做很多事,可以让小弟不在为安装文档抓头,而且可以配合yum机制定制自己的软件仓库,实现快速部署。甚至可以用rpm做代码包版本控制,当足够了解自己公司的业务也可以将程序打在一套软件组内,这样是不是更像docker呢?

    

   

以上是关于linux之使用rpmbuild打rpm包的主要内容,如果未能解决你的问题,请参考以下文章

rpmbuild打包出错处理

linux的rpm问题

CentOS下的RPM包制作教程收集(rpmbuild)

rpm打包

打rpm包步骤

制作rpm包