鸟哥的 Linux 私房菜
Linux 基础篇 | Linux 服务器篇 | Linux 企业应用篇 | 安全管理
     
 
第二十二章、软件安装:原始码与 Tarball
最近更新日期:2009/09/15
我们在第一章、Linux是什么当中提到了 GNU 计划与 GPL 授权所产生的自由软件与开放源码等咚咚。不过,前面的章节都还没有提到真正的开放源码是什么的讯息!在这一章当中,我们将藉由 Linux 作业系统里面的执行档,来理解什么是可执行的程序,以及了解什么是编译器。另外,与程序息息相关的函式库 (library) 的资讯也需要了解一番!不过,在这个章节当中,鸟哥并不是要你成为一个开放源码的程序设计师, 而是希望你可以了解如何将开放源码的程序设计、加入函式库的原理、透过编译而成为可以执行 的 binary program,最后该执行档可被我们所使用的一连串过程!

了解上面的咚咚有什么好处呢?因为在 Linux 的世界里面,由于客制化的关系,有时候我们需要自行安装软件在自己的 Linux 系统上面,所以如果你有简单的程序编译概念,那么将很容易进行软件的安装。 甚至在发生软件编译过程中的错误时,你也可以自行作一些简易的修订呢!而最传统的软件安装过程, 自然就是由原始码编译而来的啰!所以,在这里我们将介绍最原始的软件管理方式:使用 Tarball 来安装与升级管理我们的软件喔!


大标题的图示开放源码的软件安装与升级简介

如果鸟哥想要在我的 Linux 服务器上面跑网页服务器 (WWW server) 这项服务,那么我应该要做些什么事呢?当然就一定需要‘安装网页服务器的软件’啰!如果鸟哥的服务器上面没有这个软件的话,那当然也就无法启用 WWW 的服务啦!所以啦,想要在你的 Linux 上面进行一些有的没的功能,学会‘如何安装软件’是很重要的一个课题!

咦!安装软件有什么难的?在 W 牌的作业系统上面安装软件时,不是只要一直给他按 ‘下一步’就可以安装妥当了吗?话是这样说没错啦,不过,也由于如此,所以在 Windows 系统上面的软件都是一模一样的,也就是说,你‘无法修改该软件的原始程序码’,因此, 万一你想要增加或者减少该软件的某些功能时,大概只能求助于当初发行该软件的厂商了!(这就是所谓的商机吗?)

或许你会说:‘唉呦!我不过是一般人,不会用到多余的功能,所以不太可能会更动到程序码的部分吧?’ 如果你这么想的话,很抱歉~是有问题的!怎么说呢?像目前网络上面的病毒、黑客软件、臭虫程序等等, 都可能对你的主机上面的某些软件造成影响,导致主机的当机或者是其他资料损毁等等的伤害。 如果你可以藉由安全资讯单位所提供的修订方式进行修改, 那么你将可以很快速的自行修补好该软件的漏洞,而不必一定要等到软件开发商提供修补的程序包哩!要知道,提早补洞是很重要的一件事。

Tips:
并不是软件开发商故意要搞出一个有问题的软件,而是某些程序码当初设计时可能没有考量周全, 或者是程序码与作业系统的权限设定并不相同,所导致的一些漏洞。当然,也有可能是 cracker 透过某些攻击程序测试到程序的不周全所致。 无论如何,只要有网络存在的一天,可以想像的到,程序的漏洞永远补不完!但能补多少就补多少吧!
鸟哥的图示

这样说可以了解 Linux 的优点了吗?没错!因为 Linux 上面的软件几乎都是经过 GPL 的授权,所以每个软件几乎均提供原始程序码, 并且你可以自行修改该程序码,以符合你个人的需求呢!很棒吧!这就是开放源码的优点啰!不过,到底什么是开放源码? 这些程序码是什么咚咚?又 Linux 上面可以执行的相关软件文件与开放源码之间是如何转换的?不同版本的 Linux 之间能不能使用同一个执行档?或者是该执行档需要由原始程序码的部分重新进行转换? 这些都是需要厘清观念的。底下我们先就原始程序码与可执行档来进行说明。


小标题的图示什么是开放源码、编译器与可执行档

在讨论程序码是什么之前,我们先来谈论一下什么是可执行档?我们说过,在 Linux 系统上面,一个文件能不能被执行看的是有没有可执行的那个权限 (具有 x permission),不过,Linux 系统上真正认识的可执行档其实是二进位文件 ( binary program),例如 /usr/bin/passwd, /bin/touch 这些个文件即为二进位程序码。

或许你会说 shell scripts 不是也可以执行吗?其实 shell scripts 只是利用 shell (例如 bash) 这支程序的功能进行一些判断式,而最终执行的除了 bash 提供的功能外,仍是呼叫一些已经编译好的二进位程序来执行的呢! 当然啦, bash 本身也是一支二进位程序啊!那么我怎么知道一个文件是否为 binary 呢?还记得我们在第七章里面提到的 file 这个指令的功能吗?对啦!用他就是了!我们现在来测试一下:

# 先以系统的文件测试看看:
[root@www ~]# file /bin/bash
/bin/bash: ELF 32-bit LSB executable, Intel 80386, version 1 (SYSV), for GNU/
Linux 2.6.9, dynamically linked (uses shared libs), for GNU/Linux 2.6.9, stripped

# 如果是系统提供的 /etc/init.d/syslog 呢?
[root@www ~]# file /etc/init.d/syslog
/etc/init.d/syslog: Bourne-Again shell script text executable

看到了吧!如果是 binary 而且是可以执行的时候,他就会显示执行档类别 (ELF 32-bit LSB executable), 同时会说明是否使用动态函式库 (shared libs),而如果是一般的 script ,那他就会显示出 text executables 之类的字样!

Tips:
事实上,syslog 的资料显示出 Bourne-Again ... 那一行,是因为你的 scripts 上面第一行有宣告 #!/bin/bash 的缘故,如果你将 script 的第一行拿掉,那么不管 /etc/init.d/syslog 的权限为何,他其实显示的是 ASCII 文字档的资讯喔!
鸟哥的图示

既然 Linux 作业系统真正认识的其实是 binary program,那么我们是如何做出这样的一支 binary 的程序呢?首先,我们必须要写程序,用什么东西写程序?就是一般的文书处理器啊!鸟哥都喜欢使用 vim 来进行程序的撰写,写完的程序就是所谓的原始程序码啰! 这个程序码文件其实就是一般的纯文字档。 在完成这个原始码文件的编写之后,再来就是要将这个文件‘编译’成为作业系统看的懂得 binary program 啰!而要编译自然就需要‘编译器’来动作, 经过编译器的编译与连结之后,就会产生一支可以执行的 binary program 啰。

举个例子来说,在 Linux 上面最标准的程序语言为 C ,所以我使用 C 的语法进行原始程序码的书写,写完之后,以 Linux 上标准的 C 语言编译器 gcc 这支程序来编译,就可以制作一支可以执行的 binary program 啰。整个的流程有点像这样:

利用 gcc 编译器进行程序的编译流程示意图
图 1.1.1、利用 gcc 编译器进行程序的编译流程示意图"

事实上,在编译的过程当中还会产生所谓的目标档 (Object file),这些文件是以 *.o 的副档名样式存在的!至于 C 语言的原始码文件通常以 *.c 作为副档名。此外,有的时候,我们会在程序当中‘引用、呼叫’ 其他的外部副程序,或者是利用其他软件提供的‘函数功能’,这个时候,我们就必须要在编译的过程当中, 将该函式库给他加进去,如此一来,编译器就可以将所有的程序码与函式库作一个连结 (Link) 以产生正确的执行档啰。

总之,我们可以这么说:

  • 开放源码:就是程序码,写给人类看的程序语言,但机器并不认识,所以无法执行;
  • 编译器:将程序码转译成为机器看的懂得语言,就类似翻译者的角色;
  • 可执行档:经过编译器变成二进位程序后,机器看的懂所以可以执行的文件。

小标题的图示什么是函式库

在前一小节的图1.1.1示意图中,在编译的过程里面有提到函式库这东西。 什么是函式库呢?先举个例子来说:我们的 Linux 系统上通常已经提供一个可以进行身份验证的模组, 就是在第十四章提到的 PAM 模组。这个 PAM 提供的功能可以让很多的程序在被执行的时候,除了可以验证使用者登入的资讯外, 还可以将身份确认的资料记录在登录档里面,以方便系统管理员的追踪!

既然有这么好用的功能,那如果我要编写具有身份认证功能的程序时,直接引用该 PAM 的功能就好啦,如此一来,我就不需要重新设计认证机制啰!也就是说,只要在我写的程序码里面,设定去呼叫 PAM 的函式功能,我的程序就可以利用 Linux 原本就有的身份认证的程序咯!除此之外,其实我们的 Linux 核心也提供了相当多的函式库来给硬体开发者利用喔。

函式库又分为动态与静态函式库,这两个咚咚的分别我们在后面的小节再加以说明。 这里我们以一个简单的流程图,来示意一支有呼叫外部函式库的程序的执行情况。

程序执行时引用外部动态函式库的示意图
图 1.2.1、程序执行时引用外部动态函式库的示意图

很简单的示意图啊!^_^!而如果要在程序里面加入引用的函式库,就需要如图 1.1.1 所示, 亦即在编译的过程当中,就需要加入函式库的相关设定啰。 事实上, Linux 的核心提供很多的核心相关函式库与外部参数, 这些核心功能在设计硬体的驱动程序的时候是相当有用的资讯,这些核心相关资讯大多放置在 /usr/include, /lib, /usr/lib 里面哩!我们在本章的后续小节再来探讨。反正我们可以简单的这么想:

  • 函式库:就类似副程序的角色,可以被呼叫来执行的一段功能函数。

小标题的图示什么是 make 与 configure

事实上,使用类似 gcc 的编译器来进行编译的过程并不简单,因为一套软件并不会仅有一支程序, 而是有一堆程序码文件。所以除了每个主程序与副程序均需要写上一笔编译过程的指令外,还需要写上最终的连结程序。 程序码小的时候还好,如果是类似 WWW 服务器软件 (例如 Apache) ,或者是类似核心的原始码,动则数百 MBytes 的资料量,编译指令会写到疯掉~这个时候,我们就可以使用 make 这个指令的相关功能来进行编译过程的指令简化了!

当执行 make 时,make 会在当时的目录下搜寻 Makefile (or makefile) 这个文字档,而 Makefile 里面则记录了原始码如何编译的详细资讯! make 会自动的判别原始码是否经过变动了,而自动更新执行档,是软件工程师相当好用的一个辅助工具呢!

咦!make 是一支程序,会去找 Makefile ,那 Makefile 怎么写? 通常软件开发商都会写一支探测程序来探测使用者的作业环境, 以及该作业环境是否有软件开发商所需要的其他功能,该探测程序探测完毕后,就会主动的建立这个 Makefile 的规则文件啦!通常这支探测程序的档名为 configure 或者是 config 。

咦!那为什么要探测作业环境呢?在第一章当中, 不是曾经提过其实每个 Linux distribution 都使用同样的核心吗?但你得要注意, 不同版本的核心所使用的系统呼叫可能不相同,而且每个软件所需要的相依的函式库也不相同, 同时,软件开发商不会仅针对 Linux 开发,而是会针对整个 Unix-Like 做开发啊! 所以他也必须要探测该作业系统平台有没有提供合适的编译器才行!所以当然要探测环境啊! 一般来说,探测程序会探测的资料大约有底下这些:

  • 是否有适合的编译器可以编译本软件的程序码;
  • 是否已经存在本软件所需要的函式库,或其他需要的相依软件;
  • 作业系统平台是否适合本软件,包括 Linux 的核心版本;
  • 核心的表头定义档 (header include) 是否存在 (驱动程序必须要的探测)。

至于 make 与 configure 运作流程的相关性,我们可以使用底下的图示来示意一下啊! 下图中,你要进行的任务其实只有两个,一个是执行 configure 来建立 Makefile , 这个步骤一定要成功!成功之后再以 make 来呼叫所需要的资料来编译即可!非常简单!

透过 configure 与 make 进行编译示意图
图 1.3.1、透过 configure 与 make 进行编译示意图

由于不同的 Linux distribution 的函式库文件所放置的路径,或者是函式库的档名订定, 或者是预设安装的编译器,以及核心的版本都不相同,因此理论上,你无法在 CentOS 5.x 上面编译出 binary program 后,还将他拿到 SuSE 上面执行,这个动作通常是不可能成功的! 因为呼叫的目标函式库位置可能不同 (参考图1.2.1) , 核心版本更不可能相同!所以能够执行的情况是微乎其微!所以同一套软件要在不同的平台上面执行时, 必须要重复编译!所以才需要原始码嘛!了解乎!

详细的 make 用法与 Makefile 规则,在后续的小节里面再探讨啰!


小标题的图示什么是 Tarball 的软件

从前面几个小节的说明来看,我们知道所谓的原始程序码,其实就是一些写满了程序码的纯文字文件。 那我们在第九章压缩指令的介绍当中, 也了解了纯文字档在网络上其实是很浪费频宽的一种文件格式! 所以啦,如果能够将这些原始码透过文件的打包与压缩技术来将文件的数量与容量减小, 不但让使用者容易下载,软件开发商的网站频宽也能够节省很多很多啊!这就是 Tarball 文件的由来啰!

Tips:
想一想,一个核心的原始码文件大约要 300~500 MB 以上,如果每个人都去下载这样的一个核心文件, 呵呵!那么网络频宽不被吃的死翘翘才怪呢!
鸟哥的图示

所谓的 Tarball 文件,其实就是将软件的所有原始码文件先以 tar 打包,然后再以压缩技术来压缩,通常最常见的就是以 gzip 来压缩了。因为利用了 tar 与 gzip 的功能,所以 tarball 文件一般的副档名就会写成 *.tar.gz 或者是简写为 *.tgz 啰!不过,近来由于 bzip2 的压缩率较佳,所以 Tarball 渐渐的以 bzip2 的压缩技术来取代 gzip 啰!因此档名也会变成 *.tar.bz2 之类的哩。所以说, Tarball 是一个软件包, 你将他解压缩之后,里面的文件通常就会有:

  • 原始程序码文件;
  • 探测程序文件 (可能是 configure 或 config 等档名);
  • 本软件的简易说明与安装说明 (INSTALL 或 README)。

其中最重要的是那个 INSTALL 或者是 README 这两个文件,通常你只要能够参考这两个文件, Tarball 软件的安装是很简单的啦!我们在后面的章节会再继续介绍 Tarball 这个玩意儿。


小标题的图示如何安装与升级软件

将原始码作了一个简单的介绍,也知道了系统其实认识的可执行档是 binary program 之后,好了,得要聊一聊,那么怎么安装与升级一个 Tarball 的软件?为什么要安装一个新的软件呢?当然是因为我们的主机上面没有该软件啰!那么, 为何要升级呢?原因可能有底下这些:

  • 需要新的功能,但旧有主机的旧版软件并没有,所以需要升级到新版的软件;
  • 旧版本的软件上面可能有资安上的顾虑,所以需要更新到新版的软件;
  • 旧版的软件执行效能不彰,或者执行的能力不能让管理者满足。

在上面的需求当中,尤其需要注意的是第二点,当一个软件有安全上的顾虑时,千万不要怀疑, 赶紧更新软件吧!否则造成网络危机,那可不是闹着玩的!那么更新的方法有哪些呢? 基本上更新的方法可以分为两大类,分别是:

  • 直接以原始码透过编译来安装与升级;
  • 直接以编译好的 binary program 来安装与升级。

上面第一点很简单,就是直接以 Tarball 在自己的机器上面进行探测、编译、 安装与设定等等动作来升级就是了。不过,这样的动作虽然让使用者在安装过程当中具有很高的弹性, 但毕竟是比较麻烦一点,如果 Linux distribution 厂商能够针对自己的作业平台先进行编译等过程,再将编译好的 binary program 释出的话,那由于我的系统与该 Linux distribution 的环境是相同的,所以他所释出的 binary program 就可以在我的机器上面直接安装啦!省略了探测与编译等等繁杂的过程呢!

这个预先编译好程序的机制存在于很多 distribution 喔,包括有 Red Hat 系统 (含 Fedora/CentOS 系列) 发展的 RPM 软件管理机制与 yum 线上更新模式; Debian 使用的 dpkg 软件管理机制与 APT 线上更新模式等等

由于 CentOS 系统是依循标准的 Linux distribution,所以可以使用 Tarball 直接进行编译的安装与升级, 当然也可以使用 RPM 相关的机制来进行安装与升级啰!本章节主要针对 Tarball ,至于 RPM 则留待下个章节再来介绍呢!

好了,那么一个软件的 Tarball 是如何安装的呢?基本流程是这样的啦:

  1. 将 Tarball 由厂商的网页下载下来;
  2. 将 Tarball 解开,产生很多的原始码文件;
  3. 开始以 gcc 进行原始码的编译 (会产生目标档 object files);
  4. 然后以 gcc 进行函式库、主、副程序的连结,以形成主要的 binary file;
  5. 将上述的 binary file 以及相关的设定档安装至自己的主机上面。

上面第 3, 4 步骤当中,我们可以透过 make 这个指令的功能来简化他, 所以整个步骤其实是很简单的啦!只不过你就得需要至少有 gcc 以及 make 这两个软件在你的 Linux 系统里面才行喔! 详细的过程以及需要的软件我们在后面的章节继续来介绍的啦!


大标题的图示使用传统程序语言进行编译的简单范例

经过上面的介绍之后,你应该比较清楚的知道原始码、编译器、函式库与执行档之间的相关性了。 不过,详细的流程可能还是不很清楚,所以,在这里我们以一个简单的程序范例来说明整个编译的过程喔!赶紧进入 Linux 系统,实地的操作一下底下的范例呢!


小标题的图示单一程序:印出 Hello World

我们以 Linux 上面最常见的 C 语言来撰写第一支程序!第一支程序最常作的就是..... 在荧幕上面印出‘Hello World!’的字样~当然, 这里我们是以简单的 C 语言来撰写,如果你对于 C 有兴趣的话,那么请自行购买相关的书籍喔! ^_^ 好了,不啰唆,立刻编辑第一支程序吧!

Tips:
请先确认你的 Linux 系统里面已经安装了 gcc 了喔!如果尚未安装 gcc 的话,请先参考下一节的 RPM 安装法,先安装好 gcc 之后,再回来阅读本章。 如果你已经有网络了,那么直接使用‘ yum groupinstall "Development Tools" ’ 预先安装好所需的所有软件即可。 rpm 与 yum 均会在下一章介绍。
鸟哥的图示

  • 编辑程序码,亦即原始码
[root@www ~]# vim hello.c   <==用 C 语言写的程序副档名建议用 .c
#include <stdio.h>
int main(void)
{
        printf("Hello World\n");
}

上面是用 C 语言的语法写成的一个程序文件。第一行的那个‘ # ’并不是注解喔!如果你担心输入错误, 请到底下的连结下载这个文件:


  • 开始编译与测试执行
[root@www ~]# gcc hello.c
[root@www ~]# ll hello.c a.out
-rwxr-xr-x 1 root root 4725 Jun  5 02:41 a.out   <==此时会产生这个档名
-rw-r--r-- 1 root root   72 Jun  5 02:40 hello.c

[root@www ~]# ./a.out
Hello World  <==呵呵!成果出现了!

在预设的状态下,如果我们直接以 gcc 编译原始码,并且没有加上任何参数,则执行档的档名会被自动设定为 a.out 这个文件名称! 所以你就能够直接执行 ./a.out 这个执行档啦!上面的例子很简单吧!那个 hello.c 就是原始码,而 gcc 就是编译器,至于 a.out 就是编译成功的可执行 binary program 啰! 咦!那如果我想要产生目标档 (object file) 来进行其他的动作,而且执行档的档名也不要用预设的 a.out ,那该如何是好?其实你可以将上面的第 2 个步骤改成这样:

[root@www ~]# gcc -c hello.c
[root@www ~]# ll hello*
-rw-r--r-- 1 root root  72 Jun  5 02:40 hello.c
-rw-r--r-- 1 root root 868 Jun  5 02:44 hello.o  <==就是被产生的目标档

[root@www ~]# gcc -o hello hello.o
[root@www ~]# ll hello*
-rwxr-xr-x 1 root root 4725 Jun  5 02:47 hello  <==这就是可执行档! -o 的结果
-rw-r--r-- 1 root root   72 Jun  5 02:40 hello.c
-rw-r--r-- 1 root root  868 Jun  5 02:44 hello.o

[root@www ~]# ./hello
Hello World

这个步骤主要是利用 hello.o 这个目标档制作出一个名为 hello 的执行档,详细的 gcc 语法我们会在后续章节中继续介绍!透过这个动作后,我们可以得到 hello 及 hello.o 两个文件, 真正可以执行的是 hello 这个 binary program 喔! 或许你会觉得,咦!只要一个动作作出 a.out 就好了,干嘛还要先制作目标档再做成执行档呢? 呵呵!透过下个范例,你就可以知道为什么啦!


小标题的图示主、副程序连结:副程序的编译

如果我们在一个主程序里面又呼叫了另一个副程序呢?这是很常见的一个程序写法, 因为可以简化整个程序的易读性!在底下的例子当中,我们以 thanks.c 这个主程序去呼叫 thanks_2.c 这个副程序,写法很简单:


  • 撰写所需要的主、副程序
# 1. 编辑主程序:
[root@www ~]# vim thanks.c
#include <stdio.h>
int main(void)
{
        printf("Hello World\n");
        thanks_2();
}
# 上面的 thanks_2(); 那一行就是呼叫副程序啦!

[root@www ~]# vim thanks_2.c
#include <stdio.h>
void thanks_2(void)
{
        printf("Thank you!\n");
}

上面这两个文件你可以到底下下载:


  • 进行程序的编译与连结 (Link)
# 2. 开始将原始码编译成为可执行的 binary file :
[root@www ~]# gcc -c thanks.c thanks_2.c
[root@www ~]# ll thanks*
-rw-r--r-- 1 root root  76 Jun  5 16:13 thanks_2.c
-rw-r--r-- 1 root root 856 Jun  5 16:13 thanks_2.o  <==编译产生的!
-rw-r--r-- 1 root root  92 Jun  5 16:11 thanks.c
-rw-r--r-- 1 root root 908 Jun  5 16:13 thanks.o    <==编译产生的!
[root@www ~]# gcc -o thanks thanks.o thanks_2.o
[root@www ~]# ll thanks*
-rwxr-xr-x 1 root root 4870 Jun  5 16:17 thanks     <==最终结果会产生这玩意儿

# 3. 执行一下这个文件:
[root@www ~]# ./thanks
Hello World
Thank you!

知道为什么要制作出目标档了吗?由于我们的原始码文件有时并非仅只有一个文件,所以我们无法直接进行编译。 这个时候就需要先产生目标档,然后再以连结制作成为 binary 可执行档。另外,如果有一天,你更新了 thanks_2.c 这个文件的内容,则你只要重新编译 thanks_2.c 来产生新的 thanks_2.o ,然后再以连结制作出新的 binary 可执行档即可!而不必重新编译其他没有更动过的原始码文件。 这对于软件开发者来说,是一个很重要的功能,因为有时候要将偌大的原始码全部编译完成,会花很长的一段时间呢!

此外,如果你想要让程序在执行的时候具有比较好的效能,或者是其他的除错功能时, 可以在编译的过程里面加入适当的参数,例如底下的例子:

[root@www ~]# gcc -O -c thanks.c thanks_2.c  <== -O 为产生最佳化的参数

[root@www ~]# gcc -Wall -c thanks.c thanks_2.c
thanks.c: In function 'main':
thanks.c:5: warning: implicit declaration of function 'thanks_2'
thanks.c:6: warning: control reaches end of non-void function
# -Wall 为产生更详细的编译过程资讯。上面的讯息为警告讯息 (warning)
# 所以不用理会也没有关系!

至于更多的 gcc 额外参数功能,就得要 man gcc 啰~呵呵!可多的跟天书一样~


小标题的图示呼叫外部函式库:加入连结的函式库

刚刚我们都仅只是在荧幕上面印出一些字眼而已,如果说要计算数学公式呢?例如我们想要计算出三角函数里面的 sin (90度角)。要注意的是,大多数的程序语言都是使用径度而不是一般我们在计算的‘角度’, 180 度角约等于 3.14 径度!嗯!那我们就来写一下这个程序吧!

[root@www ~]# vim sin.c
#include <stdio.h>
int main(void)
{
        float value;
        value = sin ( 3.14 / 2 );
        printf("%f\n",value);
}

上面这个文件的内容可以在底下取得!

那要如何编译这支程序呢?我们先直接编译看看:

[root@www ~]# gcc sin.c
sin.c: In function 'main':
sin.c:5: warning: incompatible implicit declaration of built-in function 'sin'
/tmp/ccsfvijY.o: In function `main':
sin.c:(.text+0x1b): undefined reference to `sin'
collect2: ld returned 1 exit status
# 注意看到上面最后一行,会有个错误讯息,代表没有成功!

特别注意上面的错误讯息,唉啊!怎么没有编译成功?它说的是‘undefined reference to sin’,说的是‘没有 sin 的相关定义参考值!’,为什么会这样呢?这是因为 C 语言里面的 sin 函示是写在 libm.so 这个函式库中,而我们并没有在原始码里面将这个函式库功能加进去, 所以当然就需要在编译与连结的时候将这个函式库给他连结进执行档里面啊!我们可以这样做:


  • 编译时加入额外函式库连结的方式:
[root@www ~]# gcc sin.c -lm -L/lib -L/usr/lib  <==重点在 -lm 
[root@www ~]# ./a.out                          <==尝试执行新文件!
1.000000

特别注意,使用 gcc 编译时所加入的那个 -lm 是有意义的,他可以拆开成两部份来看:

  • -l :是‘加入某个函式库(library)’的意思,
  •  m :则是 libm.so 这个函式库,其中, lib 与副档名(.a 或 .so)不需要写

所以 -lm 表示使用 libm.so (或 libm.a) 这个函式库的意思~至于那个 -L 后面接的路径呢?这表示: ‘我要的函式库 libm.so 请到 /lib 或 /usr/lib 里面搜寻!’

上面的说明很清楚了吧!不过,要注意的是,由于 Linux 预设是将函式库放置在 /lib 与 /usr/lib 当中,所以你没有写 -L/lib 与 -L/usr/lib 也没有关系的!不过,万一哪天你使用的函式库并非放置在这两个目录下,那么 -L/path 就很重要了!否则会找不到函式库喔!

除了连结的函式库之外,你或许已经发现一个奇怪的地方,那就是在我们的 sin.c 当中第一行‘ #include <stdio.h>’,这行说的是要将一些定义资料由 stdio.h 这个文件读入,这包括 printf 的相关设定。这个文件其实是放置在 /usr/include/stdio.h 的!那么万一这个文件并非放置在这里呢?那么我们就可以使用底下的方式来定义出要读取的 include 文件放置的目录:

[root@www ~]# gcc sin.c -lm -I/usr/include

-I/path 后面接的路径( Path )就是设定要去搜寻相关的 include 文件的目录啦!不过,同样的,预设值是放置在 /usr/include 底下,除非你的 include 文件放置在其他路径,否则也可以略过这个项目!

透过上面的几个小范例,你应该对于 gcc 以及原始码有一定程度的认识了,再接下来,我们来稍微整理一下 gcc 的简易使用方法吧!


小标题的图示gcc 的简易用法 (编译、参数与链结)

前面说过, gcc 为 Linux 上面最标准的编译器,这个 gcc 是由 GNU 计划所维护的,有兴趣的朋友请自行前往参考。既然 gcc 对于 Linux 上的 Open source 是这么样的重要,所以底下我们就列举几个 gcc 常见的参数,如此一来大家应该更容易了解原始码的各项功能吧!

# 仅将原始码编译成为目标档,并不制作连结等功能:
[root@www ~]# gcc -c hello.c
# 会自动的产生 hello.o 这个文件,但是并不会产生 binary 执行档。

# 在编译的时候,依据作业环境给予最佳化执行速度
[root@www ~]# gcc -O hello.c -c
# 会自动的产生 hello.o 这个文件,并且进行最佳化喔!

# 在进行 binary file 制作时,将连结的函式库与相关的路径填入
[root@www ~]# gcc sin.c -lm -L/usr/lib -I/usr/include
# 这个指令较常下达在最终连结成 binary file 的时候,
# -lm 指的是 libm.so 或 libm.a 这个函式库文件;
# -L 后面接的路径是刚刚上面那个函式库的搜寻目录;
# -I 后面接的是原始码内的 include 文件之所在目录。

# 将编译的结果输出成某个特定档名
[root@www ~]# gcc -o hello hello.c
# -o 后面接的是要输出的 binary file 档名

# 在编译的时候,输出较多的讯息说明
[root@www ~]# gcc -o hello hello.c -Wall
# 加入 -Wall 之后,程序的编译会变的较为严谨一点,
# 所以警告讯息也会显示出来!

比较重要的大概就是这一些。另外,我们通常称 -Wall 或者 -O 这些非必要的参数为旗标 (FLAGS),因为我们使用的是 C 程序语言,所以有时候也会简称这些旗标为 CFLAGS ,这些变数偶尔会被使用的喔!尤其是在后头会介绍的 make 相关的用法时,更是重要的很呐! ^_^


大标题的图示用 make 进行巨集编译

在本章一开始我们提到过 make 的功能是可以简化编译过程里面所下达的指令,同时还具有很多很方便的功能!那么底下咱们就来试看看使用 make 简化下达编译指令的流程吧!


小标题的图示为什么要用 make

先来想像一个案例,假设我的执行档里面包含了四个原始码文件,分别是 main.c haha.c sin_value.c cos_value.c 这四个文件,这四个文件的目的是:

  • main.c :主要的目的是让使用者输入角度资料与呼叫其他三支副程序;
  • haha.c :输出一堆有的没有的讯息而已;
  • sin_value.c :计算使用者输入的角度(360) sin 数值;
  • cos_value.c :计算使用者输入的角度(360) cos 数值。

这四个文件你可以到 http://linux.vbird.org/linux_basic/0520source/main.tgz 来下载。由于这四个文件里面包含了相关性,并且还用到数学函式在里面,所以如果你想要让这个程序可以跑, 那么就需要这样编译:

# 1. 先进行目标档的编译,最终会有四个 *.o 的档名出现:
[root@www ~]# gcc -c main.c
[root@www ~]# gcc -c haha.c
[root@www ~]# gcc -c sin_value.c
[root@www ~]# gcc -c cos_value.c

# 2. 再进行连结成为执行档,并加入 libm 的数学函式,以产生 main 执行档:
[root@www ~]# gcc -o main main.o haha.o sin_value.o cos_value.o \
> -lm -L/usr/lib -L/lib

# 3. 本程序的执行结果,必须输入姓名、360 度角的角度值来计算:
[root@www ~]# ./main 
Please input your name: VBird  <==这里先输入名字
Please enter the degree angle (ex> 90): 30   <==输入以 360 度角为主的角度
Hi, Dear VBird, nice to meet you.    <==这三行为输出的结果喔!
The Sin is:  0.50
The Cos is:  0.87

编译的过程需要进行好多动作啊!而且如果要重新编译,则上述的流程得要重新来一遍,光是找出这些指令就够烦人的了! 如果可以的话,能不能一个步骤就给他完成上面所有的动作呢?那就利用 make 这个工具吧! 先试看看在这个目录下建立一个名为 makefile 的文件,内容如下:

# 1. 先编辑 makefile 这个规则档,内容只要作出 main 这个执行档
[root@www ~]# vim makefile
main: main.o haha.o sin_value.o cos_value.o
	gcc -o main main.o haha.o sin_value.o cos_value.o -lm
# 注意:第二行的 gcc 之前是 <tab> 按键产生的空格喔!

# 2. 尝试使用 makefile 制订的规则进行编译的行为:
[root@www ~]# rm -f main *.o   <==先将之前的目标档去除
[root@www ~]# make
cc    -c -o main.o main.c
cc    -c -o haha.o haha.c
cc    -c -o sin_value.o sin_value.c
cc    -c -o cos_value.o cos_value.c
gcc -o main main.o haha.o sin_value.o cos_value.o -lm
# 此时 make 会去读取 makefile 的内容,并根据内容直接去给他编译相关的文件啰!

# 3. 在不删除任何文件的情况下,重新执行一次编译的动作:
[root@www ~]# make
make: `main' is up to date.
# 看到了吧!是否很方便呢!只会进行更新 (update) 的动作而已。

或许你会说:‘如果我建立一个 shell script 来将上面的所有动作都集结在一起,不是具有同样的效果吗?’呵呵! 效果当然不一样,以上面的测试为例,我们仅写出 main 需要的目标档,结果 make 会主动的去判断每个目标档相关的原始码文件,并直接予以编译,最后再直接进行连结的动作! 真的是很方便啊!此外,如果我们更动过某些原始码文件,则 make 也可以主动的判断哪一个原始码与相关的目标档文件有更新过, 并仅更新该文件,如此一来,将可大大的节省很多编译的时间呢!要知道,某些程序在进行编译的行为时,会消耗很多的 CPU 资源呢!所以说, make 有这些好处:

  • 简化编译时所需要下达的指令;
  • 若在编译完成之后,修改了某个原始码文件,则 make 仅会针对被修改了的文件进行编译,其他的 object file 不会被更动;
  • 最后可以依照相依性来更新 (update) 执行档。

既然 make 有这么多的优点,那么我们当然就得好好的了解一下 make 这个令人关心的家伙啦!而 make 里面最需要注意的大概就是那个规则文件,也就是 makefile 这个文件的语法啦!所以底下我们就针对 makefile 的语法来加以介绍啰。


小标题的图示makefile 的基本语法与变数

make 的语法可是相当的多而复杂的,有兴趣的话可以到 GNU (注1) 去查阅相关的说明,鸟哥这里仅列出一些基本的规则,重点在于让读者们未来在接触原始码时,不会太紧张啊! 好了,基本的 makefile 规则是这样的:

标的(target): 目标档1 目标档2
<tab>   gcc -o 欲建立的执行档 目标档1 目标档2

那个标的 (target) 就是我们想要建立的资讯,而目标档就是具有相关性的 object files ,那建立执行档的语法就是以 <tab> 按键开头的那一行!特别给他留意喔,‘命令列必须要以 tab 按键作为开头’才行!他的规则基本上是这样的:

  • 在 makefile 当中的 # 代表注解;
  • <tab> 需要在命令行 (例如 gcc 这个编译器指令) 的第一个字元;
  • 标的 (target) 与相依文件(就是目标档)之间需以‘:’隔开。

同样的,我们以刚刚上一个小节的范例进一步说明,如果我想要有两个以上的执行动作时, 例如下达一个指令就直接清除掉所有的目标档与执行档,该如何制作呢?

# 1. 先编辑 makefile 来建立新的规则,此规则的标的名称为 clean :
[root@www ~]# vi makefile
main: main.o haha.o sin_value.o cos_value.o
	gcc -o main main.o haha.o sin_value.o cos_value.o -lm
clean:
	rm -f main main.o haha.o sin_value.o cos_value.o

# 2. 以新的标的 (clean) 测试看看执行 make 的结果:
[root@www ~]# make clean  <==就是这里!透过 make 以 clean 为标的
rm -rf main main.o haha.o sin_value.o cos_value.o

如此一来,我们的 makefile 里面就具有至少两个标的,分别是 main 与 clean ,如果我们想要建立 main 的话,输入‘make main’,如果想要清除有的没的,输入‘make clean’即可啊!而如果想要先清除目标档再编译 main 这个程序的话,就可以这样输入:‘make clean main’,如下所示:

[root@www ~]# make clean main
rm -rf main main.o haha.o sin_value.o cos_value.o
cc    -c -o main.o main.c
cc    -c -o haha.o haha.c
cc    -c -o sin_value.o sin_value.c
cc    -c -o cos_value.o cos_value.c
gcc -o main main.o haha.o sin_value.o cos_value.o -lm

这样就很清楚了吧!但是,你是否会觉得,咦! makefile 里面怎么重复的资料这么多啊!没错!所以我们可以再藉由 shell script 那时学到的‘变数’来更简化 makefile 喔:

[root@www ~]# vi makefile
LIBS = -lm
OBJS = main.o haha.o sin_value.o cos_value.o
main: ${OBJS}
        gcc -o main ${OBJS} ${LIBS}
clean:
        rm -f main ${OBJS}

bash shell script 的语法有点不太相同,变数的基本语法为:

  1. 变数与变数内容以‘=’隔开,同时两边可以具有空格;
  2. 变数左边不可以有 <tab> ,例如上面范例的第一行 LIBS 左边不可以是 <tab>;
  3. 变数与变数内容在‘=’两边不能具有‘:’;
  4. 在习惯上,变数最好是以‘大写字母’为主;
  5. 运用变数时,以 ${变数} 或 $(变数) 使用;
  6. 在该 shell 的环境变数是可以被套用的,例如提到的 CFLAGS 这个变数!
  7. 在指令列模式也可以给予变数。

由于 gcc 在进行编译的行为时,会主动的去读取 CFLAGS 这个环境变数,所以,你可以直接在 shell 定义出这个环境变数,也可以在 makefile 文件里面去定义,更可以在指令列当中给予这个咚咚呢!例如:

[root@www ~]# CFLAGS="-Wall" make clean main
# 这个动作在上 make 进行编译时,会去取用 CFLAGS 的变数内容!

也可以这样:

[root@www ~]# vi makefile
LIBS = -lm
OBJS = main.o haha.o sin_value.o cos_value.o
CFLAGS = -Wall
main: ${OBJS}
	gcc -o main ${OBJS} ${LIBS}
clean:
	rm -f main ${OBJS}

咦!我可以利用指令列进行环境变数的输入,也可以在文件内直接指定环境变数,那万一这个 CFLAGS 的内容在指令列与 makefile 里面并不相同时,以那个方式输入的为主?呵呵!问了个好问题啊! 环境变数取用的规则是这样的:

  1. make 指令列后面加上的环境变数为优先;
  2. makefile 里面指定的环境变数第二;
  3. shell 原本具有的环境变数第三。

此外,还有一些特殊的变数需要了解的喔:

  • $@:代表目前的标的(target)

所以我也可以将 makefile 改成:

[root@www ~]# vi makefile
LIBS = -lm
OBJS = main.o haha.o sin_value.o cos_value.o
CFLAGS = -Wall
main: ${OBJS}
	gcc -o $@ ${OBJS} ${LIBS}   <==那个 $@ 就是 main !
clean:
	rm -f main ${OBJS}

这样是否稍微了解了 makefile (也可能是 Makefile) 的基本语法?这对于你未来自行修改原始码的编译规则时,是很有帮助的喔!^_^!


大标题的图示Tarball 的管理与建议

在我们知道了原始码的相关资讯之后,再来要了解的自然就是如何使用具有原始码的 Tarball 来建立一个属于自己的软件啰!从前面几个小节的说明当中,我们晓得其实 Tarball 的安装是可以跨平台的,因为 C 语言的程序码在各个平台上面是可以共通的, 只是需要的编译器可能并不相同而已。例如 Linux 上面用 gcc 而 Windows 上面也有相关的 C 编译器啊~所以呢,同样的一组原始码,既可以在 CentOS Linux 上面编译,也可以在 SuSE Linux 上面编译,当然,也可以在大部分的 Unix 平台上面编译成功的!

如果万一没有编译成功怎么办?很简单啊,透过修改小部分的程序码 (通常是因为很小部分的异动而已) 就可以进行跨平台的移植了!也就是说,刚刚我们在 Linux 底下写的程序‘理论上,是可以在 Windows 上面编译的!’这就是原始码的好处啦!所以说,如果朋友们想要学习程序语言的话, 鸟哥个人是比较建议学习‘具有跨平台能力的程序语言’,例如 C 就是很不错的一个!

唉啊!又扯远了~赶紧拉回来继续说明我们的 Tarball 啦!


小标题的图示使用原始码管理软件所需要的基础软件

从原始码的说明我们晓得要制作一个 binary program 需要很多咚咚的呢!这包括底下这些基础的软件:

  • gcc 或 cc 等 C 语言编译器 (compiler):

    没有编译器怎么进行编译的动作?所以 C compiler 是一定要有的。不过 Linux 上面有众多的编译器,其中当然以 GNU 的 gcc 是首选的自由软件编译器啰!事实上很多在 Linux 平台上面发展的软件的原始码,原本就是以 gcc 为底来设计的呢。

  • make 及 autoconfig 等软件:

    一般来说,以 Tarball 方式释出的软件当中,为了简化编译的流程,通常都是配合前几个小节提到的 make 这个指令来依据目标文件的相依性而进行编译。但是我们也知道说 make 需要 makefile 这个文件的规则,那由于不同的系统里面可能具有的基础软件环境并不相同, 所以就需要探测使用者的作业环境,好自行建立一个 makefile 文件。这个自行探测的小程序也必须要藉由 autoconfig 这个相关的软件来辅助才行。

  • 需要 Kernel 提供的 Library 以及相关的 Include 文件:

    从前面的原始码编译过程,我们晓得函式库 (library) 的重要性,同时也晓得有 include 文件的存在。很多的软件在发展的时候都是直接取用系统核心提供的函式库与 include 文件的,这样才可以与这个作业系统相容啊!尤其是在‘驱动程序方面的模组 ’,例如网络卡、音效卡、USB 等驱动程序在安装的时候,常常是需要核心提供的相关资讯的。在 Red Hat 的系统当中 (包含 Fedora/CentOS 等系列) ,这个核心相关的功能通常都是被包含在 kernel-sourcekernel-header 这些软件名称当中,所以记得要安装这些软件喔!

虽然 Tarball 的安装上面相当的简单,如同我们前面几个小节的例子,只要顺着开发商提供的 README 与 INSTALL 文件所载明的步骤来进行,安装是很容易的。但是我们却还是常常会在 BBS 或者是新闻群组当中发现这些留言:‘我在执行某个程序的探测文件时,他都会告诉我没有 gcc 这个软件,这是怎么回事?’还有:‘我没有办法使用 make 耶!这是什么问题?’呵呵! 这就是没有安装上面提到的那些基础软件啦!

咦!为什么使用者不安装这些软件啊?这是因为目前的 Linux distribution 大多已经偏向于桌上型电脑的使用 (非服务器端),他们希望使用者能够按照厂商自己的希望来安装相关的软件即可, 所以通常‘预设’是没有安装 gcc 或者是 make 等软件的。所以啦,如果你希望未来可以自行安装一些以 Tarball 方式释出的软件时,记得请自行挑选想要安装的软件名称喔!例如在 CentOS 或者是 Red Hat 当中记得选择 Development Tools 以及 Kernel Source Development 等相关字眼的软件群集呢。

那万一我已经安装好一台 Linux 主机,但是使用的是预设值所安装的软件,所以没有 make, gcc 等咚咚,该如何是好?呵呵!问题其实不大啦,目前使用最广泛的 CentOS/Fedora 或者是 Red Hat 大多是以 RPM (下一章会介绍) 来安装软件的,所以,你只要拿出当初安装 Linux 时的原版光碟,然后以下一章介绍的 RPM 来一个一个的加入到你的 Linux 主机里面就好啦!很简单的啦! 尤其现在又有 yum 这玩意儿,更方便呐!

在 CentOS 当中,如果你已经有网络可以连上 Internet 的话,那么就可以使用下一章会谈到的 yum 啰! 透过 yum 的软件群组安装功能,你可以这样做:

  • 如果是要安装 gcc 等软件发展工具,请使用‘ yum groupinstall "Development Tools" ’
  • 若待安装的软件需要图形介面支援,一般还需要‘ yum groupinstall "X Software Development" ’
  • 若安装的软件较旧,可能需要‘ yum groupinstall "Legacy Software Development" ’

大概就是这样,更多的资讯请参考下一章的介绍喔。


小标题的图示Tarball 安装的基本步骤

我们提过以 Tarball 方式释出的软件是需要重新编译可执行的 binary program 的。而 Tarball 是以 tar 这个指令来打包与压缩的文件,所以啦,当然就需要先将 Tarball 解压缩,然后到原始码所在的目录下进行 makefile 的建立,再以 make 来进行编译与安装的动作啊!所以整个安装的基础动作大多是这样的:

  1. 取得原始档:将 tarball 文件在 /usr/local/src 目录下解压缩;
  2. 取得步骤流程:进入新建立的目录底下,去查阅 INSTALL 与 README 等相关文件内容 (很重要的步骤!);
  3. 相依属性软件安装:根据 INSTALL/README 的内容察看并安装好一些相依的软件 (非必要);
  4. 建立 makefile:以自动探测程序 (configure 或 config) 探测作业环境,并建立 Makefile 这个文件;
  5. 编译:以 make 这个程序并使用该目录下的 Makefile 做为他的参数设定档,来进行 make (编译或其他) 的动作;
  6. 安装:以 make 这个程序,并以 Makefile 这个参数设定档,依据 install 这个标的 (target) 的指定来安装到正确的路径!

注意到上面的第二个步骤,通常在每个软件在释出的时候,都会附上 INSTALL 或者是 README 这种档名的说明档,这些说明档请‘确实详细的’ 阅读过一遍,通常这些文件会记录这个软件的安装要求、软件的工作项目、 与软件的安装参数设定及技巧等,只要仔细的读完这些文件,基本上,要安装好 tarball 的文件,都不会有什么大问题啰。

至于 makefile 在制作出来之后,里头会有相当多的标的 (target),最常见的就是 install 与 clean 啰!通常‘make clean’代表着将目标档 (object file) 清除掉,‘make’则是将原始码进行编译而已。 注意喔!编译完成的可执行档与相关的设定档还在原始码所在的目录当中喔!因此,最后要进行‘make install’来将编译完成的所有咚咚都给他安装到正确的路径去,这样就可以使用该软件啦!

OK!我们底下约略提一下大部分的 tarball 软件之安装的指令下达方式:

  1. ./configure
    这个步骤就是在建立 Makefile 这个文件啰!通常程序开发者会写一支 scripts 来检查你的 Linux 系统、相关的软件属性等等,这个步骤相当的重要, 因为未来你的安装资讯都是这一步骤内完成的!另外,这个步骤的相关资讯应该要参考一下该目录下的 README 或 INSTALL 相关的文件!

  2. make clean
    make 会读取 Makefile 中关于 clean 的工作。这个步骤不一定会有,但是希望执行一下,因为他可以去除目标文件!因为谁也不确定原始码里面到底有没有包含上次编译过的目标文件 (*.o) 存在,所以当然还是清除一下比较妥当的。 至少等一下新编译出来的执行档我们可以确定是使用自己的机器所编译完成的嘛!

  3. make
    make 会依据 Makefile 当中的预设工作进行编译的行为!编译的工作主要是进行 gcc 来将原始码编译成为可以被执行的 object files ,但是这些 object files 通常还需要一些函式库之类的 link 后,才能产生一个完整的执行档!使用 make 就是要将原始码编译成为可以被执行的可执行档,而这个可执行档会放置在目前所在的目录之下, 尚未被安装到预定安装的目录中;

  4. make install
    通常这就是最后的安装步骤了,make 会依据 Makefile 这个文件里面关于 install 的项目,将上一个步骤所编译完成的资料给他安装到预定的目录中,就完成安装啦!

请注意,上面的步骤是一步一步来进行的,而其中只要一个步骤无法成功,那么后续的步骤就完全没有办法进行的! 因此,要确定每一的步骤都是成功的才可以!举个例子来说,万一今天你在 ./configure 就不成功了,那么就表示 Makefile 无法被建立起来,要知道,后面的步骤都是根据 Makefile 来进行的,既然无法建立 Makefile,后续的步骤当然无法成功啰!

另外,如果在 make 无法成功的话,那就表示原始文件无法被编译成可执行档,那么 make install 主要是将编译完成的文件给他放置到文件系统中的,既然都没有可用的执行档了,怎么进行安装? 所以啰,要每一个步骤都正确无误才能往下继续做!此外,如果安装成功, 并且是安装在独立的一个目录中,例如 /usr/local/packages 这个目录中好了,那么你就必需手动的将这个软件的 man page 给他写入 /etc/man.config 里面去。


小标题的图示一般 Tarball 软件安装的建议事项 (如何移除?升级?)

或许你已经发现了也说不定,那就是为什么前一个小节里面, Tarball 要在 /usr/local/src 里面解压缩呢?基本上,在预设的情况下,原本的 Linux distribution 释出安装的软件大多是在 /usr 里面的,而使用者自行安装的软件则建议放置在 /usr/local 里面。这是考量到管理使用者所安装软件的便利性。

怎么说呢?我们晓得几乎每个软件都会提供线上说明的服务,那就是 info 与 man 的功能。在预设的情况下, man 会去搜寻 /usr/local/man 里面的说明文件, 因此,如果我们将软件安装在 /usr/local 底下的话,那么自然安装完成之后, 该软件的说明文件就可以被找到了。此外,如果你所管理的主机其实是由多人共同管理的, 或者是如同学校里面,一台主机是由学生管理的,但是学生总会毕业吧? 所以需要进行交接,如果大家都将软件安装在 /usr/local 底下,那么管理上不就显的特别的容易吗!

所以啰,通常我们会建议大家将自己安装的软件放置在 /usr/local 下,至于原始码 (Tarball)则建议放置在 /usr/local/src (src 为 source 的缩写)底下啊。

再来,让我们先来看一看 Linux distribution 预设的安装软件的路径会用到哪些?我们以 apache 这个软件来说明的话 (apache 是 WWW 服务器软件,详细的资料请参考服务器搭建篇。你的系统不见得有装这个软件):

  • /etc/httpd
  • /usr/lib
  • /usr/bin
  • /usr/share/man

我们会发现软件的内容大致上是摆在 etc, lib, bin, man 等目录当中,分别代表‘设定档、函式库、执行档、线上说明档’。 好了,那么你是以 tarball 来安装时呢?如果是放在预设的 /usr/local 里面,由于 /usr/local 原本就预设这几个目录了,所以你的资料就会被放在:

  • /usr/local/etc
  • /usr/local/bin
  • /usr/local/lib
  • /usr/local/man

但是如果你每个软件都选择在这个预设的路径下安装的话, 那么所有的软件的文件都将放置在这四个目录当中,因此,如果你都安装在这个目录下的话, 那么未来再想要升级或移除的时候,就会比较难以追查文件的来源啰! 而如果你在安装的时候选择的是单独的目录,例如我将 apache 安装在 /usr/local/apache 当中,那么你的文件目录就会变成:

  • /usr/local/apache/etc
  • /usr/local/apache/bin
  • /usr/local/apache/lib
  • /usr/local/apache/man

呵呵!单一软件的文件都在同一个目录之下,那么要移除该软件就简单的多了! 只要将该目录移除即可视为该软件已经被移除啰!以上面为例,我想要移除 apache 只要下达‘rm -rf /usr/local/apache’ 就算移除这个软件啦!当然啰,实际安装的时候还是得视该软件的 Makefile 里头的 install 资讯才能知道到底他的安装情况为何的。因为例如 sendmail 的安装就很麻烦......

这个方式虽然有利于软件的移除,但不晓得你有没有发现,我们在执行某些指令的时候,与该指令是否在 PATH 这个环境变数所记录的路径有关,以上面为例,我的 /usr/local/apache/bin 肯定是不在 PATH 里面的,所以执行 apache 的指令就得要利用绝对路径了,否则就得将这个 /usr/local/apache/bin 加入 PATH 里面。另外,那个 /usr/local/apache/man 也需要加入 man page 搜寻的路径当中啊!

除此之外, Tarball 在升级的时候也是挺困扰的,怎么说呢?我们还是以 apache 来说明好了。WWW 服务器为了考虑互动性,所以通常会将 PHP+MySQL+Apache 一起安装起来 (详细的资讯请参考服务器搭建篇) ,果真如此的话,那么每个软件在安装的时候‘都有一定的顺序与程序!’ 因为他们三者之间具有相关性,所以安装时必需要三者同时考虑到他们的函式库与相关的编译参数。

假设今天我只要升级 PHP 呢?有的时候因为只有涉及动态函式库的升级,那么我只要升级 PHP 即可!其他的部分或许影响不大。但是如果今天 PHP 需要重新编译的模组比较多,那么可能会连带的,连 Apache 这个程序也需要重新编译过才行!真是有点给他头痛的!没办法啦!使用 tarball 确实有他的优点啦,但是在这方面,确实也有他一定的伤脑筋程度。

由于 Tarball 在升级与安装上面具有这些特色,亦即 Tarball 在反安装上面具有比较高的难度 (如果你没有好好规划的话~),所以,为了方便 Tarball 的管理,通常鸟哥会这样建议使用者:

  1. 最好将 tarball 的原始资料解压缩到 /usr/local/src 当中;

  2. 安装时,最好安装到 /usr/local 这个预设路径下;

  3. 考虑未来的反安装步骤,最好可以将每个软件单独的安装在 /usr/local 底下;

  4. 为安装到单独目录的软件之 man page 加入 man path 搜寻:
    如果你安装的软件放置到 /usr/local/software/ ,那么 man page 搜寻的设定中,可能就得要在 /etc/man.config 内的 40~50 行左右处,写入如下的一行:
    MANPATH /usr/local/software/man
    这样才可以使用 man 来查询该软件的线上文件啰!

小标题的图示一个简单的范例、利用 ntp 来示范

读万卷书不如行万里路啊!所以当然我们就来给他测试看看,看你是否真的了解了如何利用 Tarball 来安装软件呢?我们利用时间服务器 (network time protocol) ntp 这个软件来测试安装看看。先请到 http://www.ntp.org/downloads.html 这个目录去下载文件,请下载最新版本的文件即可。或者直接到鸟哥的网站下载 2009/05 公告释出的稳定版本:

http://linux.vbird.org/linux_basic/0520source/ntp-4.2.4p7.tar.gz

假设我对这个软件的要求是这样的:

  • 假设 ntp-4.2.4p7.tar.gz 这个文件放置在 /root 这个目录下;
  • 原始码请解开在 /usr/local/src 底下;
  • 我要安装到 /usr/local/ntp 这个目录中;

那么你可以依照底下的步骤来安装测试看看 (如果可以的话,请你不要参考底下的文件资料, 先自行安装过一遍这个软件,然后再来对照一下鸟哥的步骤喔!)。


  • 解压缩下载的 tarball ,并参阅 README/INSTALL 文件
[root@www ~]# cd /usr/local/src   <==切换目录
[root@www src]# tar -zxvf /root/ntp-4.2.4p7.tar.gz  <==解压缩到此目录
ntp-4.2.4p7/         <==会建立这个目录喔!
ntp-4.2.4p7/libopts/
....(底下省略)....
[root@www src]# cd ntp-4.2.4p7/
[root@www ntp-4.2.4p7]# vi INSTALL  <==记得 README 也要看一下!
# 特别看一下 28 行到 54 行之间的安装简介!可以了解如何安装的流程喔!

  • 检查 configure 支援参数,并实际建置 makefile 规则档
[root@www ntp*]# ./configure --help | more  <==查询可用的参数有哪些
  --prefix=PREFIX         install architecture-independent files in PREFIX
  --enable-all-clocks     + include all suitable non-PARSE clocks:
  --enable-parse-clocks   - include all suitable PARSE clocks:
# 上面列出的是比较重要的,或者是你可能需要的参数功能!

[root@www ntp*]# ./configure --prefix=/usr/local/ntp \
>  --enable-all-clocks --enable-parse-clocks  <==开始建立makefile
checking for a BSD-compatible install... /usr/bin/install -c
checking whether build environment is sane... yes
....(中间省略)....
checking for gcc... gcc           <==也有找到 gcc 编译器了!
....(中间省略)....
config.status: creating Makefile  <==现在知道这个重要性了吧?
config.status: creating config.h
config.status: executing depfiles commands

一般来说 configure 设定参数较重要的就是那个 --prefix=/path 了,--prefix 后面接的路径就是‘这个软件未来要安装到那个目录去?’如果你没有指定 --prefix=/path 这个参数,通常预设参数就是 /usr/local 至于其他的参数意义就得要参考 ./configure --help 了! 这个动作完成之后会产生 makefile 或 Makefile 这个文件。当然啦,这个探测检查的过程会显示在荧幕上, 特别留意关于 gcc 的检查,还有最重要的是最后需要成功的建立起 Makefile 才行


  • 最后开始编译与安装噜!
[root@www ntp*]# make clean; make
[root@www ntp*]# make check
[root@www ntp*]# make install
# 将资料给他安装在 /usr/local/ntp 底下

整个动作就这么简单,你完成了吗?完成之后到 /usr/local/ntp 你发现了什么?


小标题的图示利用 patch 更新原始码

我们在本章一开始介绍了为何需要进行软件的升级,这是很重要的喔!那假如我是以 Tarball 来进行某个软件的安装,那么是否当我要升级这个软件时,就得要下载这个软件的完整全新的 Tarball 呢?举个例子来说,鸟哥帮昆山资传系架了个讨论区在 http://www.dic.ksu.edu.tw/phpbb3 这个网址,这个讨论区是以 phpBB 这个软件来搭建的,而鸟哥的讨论区版本为 phpbb3.0.4.tar.gz ,目前 (2009/06) 最新释出的版本则是 phpbb3.0.5.tar.gz 。那我是否需要下载全新的 phpbb3.0.5.tar.gz 这个文件来更新原本的旧程序呢?

事实上,当我们发现一些软件的漏洞,通常是某一段程序码写的不好所致。因此, 所谓的‘更新原始码’常常是只有更改部分文件的小部分内容而已。既然如此的话, 那么我们是否可以就那些被更动的文件来进行修改就可以咯?也就是说, 旧版本到新版本间没有更动过的文件就不要理他,仅将有修订过的文件部分来处理即可。

这有什么好处呢?首先,没有更动过的文件的目标档 (object file) 根本就不需要重新编译,而且有更动过的文件又可以利用 make 来自动 update (更新),如此一来,我们原先的设定 (makefile 文件里面的规则) 将不需要重新改写或探测!可以节省很多宝贵的时间呢 (例如后续章节会提到的核心的编译!)

从上面的说明当中,我们可以发现,如果可以将旧版的原始码资料改写成新版的版本, 那么就能直接编译了,而不需要将全部的新版 Tarball 重新下载一次呢!可以节省频宽与时间说!那么如何改写原始码? 难道要我们一个文件一个文件去参考然后修订吗?当然没有这么没人性!

我们在第十二章、正规表示法的时候有提到一个比对文件的指令,那就是 diff,这个指令可以将‘两个文件之间的差异性列出来’呢!那我们也知道新旧版本的文件之间, 其实只有修改一些程序码而已,那么我们可以透过 diff 比对出新旧版本之间的文字差异,然后再以相关的指令来将旧版的文件更新吗? 呵呵!当然可以啦!那就是 patch 这个指令啦!很多的软件开发商在更新了原始码之后,几乎都会释出所谓的 patch file,也就是直接将原始码 update 而已的一个方式喔!我们底下以一个简单的范例来说明给你了解喔!

关于 diff 与 patch 的基本用法我们在第十二章都谈过了,所以这里不再就这两个指令的语法进行介绍, 请回去参阅第十二章的内容。这里我们来举个案例解释一下好了。假设我们刚刚计算三角函数的程序 (main) 历经多次改版, 0.1 版仅会简单的输出, 0.2 版的输出就会含有角度值,因此这两个版本的内容不相同。如下所示,两个文件的意义为:

请您先下载这两个文件,并且解压缩到你的 /root 底下。你会发现系统产生一个名为 main-0.1 的目录。 该目录内含有五个文件,就是刚刚的程序加上一个 Makefile 的规则文件。你可以到该目录下去看看 Makefile 的内容, 在这一版当中含有 main 与 clean 两个标的功能而已。至于 0.2 版则加入了 install 与 uninstall 的规则设定。 接下来,请看一下我们的作法啰:


  • 测试旧版程序的功能
[root@www ~]# tar -zxvf main-0.1.tgz
[root@www ~]# cd main-0.1
[root@www main-0.1]# make clean main
[root@www main-0.1]# ./main
version 0.1
Please input your name: VBird
Please enter the degree angle (ex> 90): 45
Hi, Dear VBird, nice to meet you.
The Sin is:  0.71
The Cos is:  0.71

与之前的结果非常类似,只是鸟哥将 Makefile 直接给您了!但如果你下达 make install 时,系统会告知没有 install 的 target 啊!而且版本是 0.1 也告知了。那么如何更新到 0.2 版呢?透过这个 patch 文件吧!这个文件的内容有点像这样:


  • 查阅 patch file 内容
[root@www main-0.1]# vim ~/main_0.1_to_0.2.patch
diff -Naur main-0.1/cos_value.c main-0.2/cos_value.c
--- main-0.1/cos_value.c        2009-06-09 22:52:33.000000000 +0800
+++ main-0.2/cos_value.c        2009-06-12 00:45:10.000000000 +0800
@@ -6,5 +6,5 @@
 {
        float value;
....(底下省略)....

上面表格内有个底线的部分,那代表使用 diff 去比较时,被比较的两个文件所在路径,这个路径非常的重要喔! 因为 patch 的基本语法如下:

patch -p数字 < patch_file

特别留意那个‘ -p数字’,那是与 patch_file 里面列出的档名有关的资讯。假如在 patch_file 第一行写的是这样:

*** /home/guest/example/expatch.old

那么当我下达‘ patch -p0 < patch_file ’时,则更新的文件是‘ /home/guest/example/expatch.old ’,如果‘ patch -p1 < patch_file’,则更新的文件为‘home/guest/example/expatch.old’,如果‘patch -p4 < patch_file’则更新‘expatch.old’,也就是说, -pxx 那个 xx 代表‘拿掉几个斜线(/)’的意思!这样可以理解了吗? 好了,根据刚刚上头的资料,我们可以发现比较的文件是在 main-0.1/xxx 与 main-0.2/xxx , 所以说,如果你是在 main-0.1 底下,并且想要处理更新时,就得要拿掉一个目录 (因为并没有 main-0.2 的目录存在, 我们是在当前的目录进行更新的!),因此使用的是 -p1 才对喔!所以:


  • 更新原始码,并且重新编译程序!
[root@www main-0.1]# patch -p1 < ../main_0.1_to_0.2.patch
patching file cos_value.c
patching file main.c
patching file Makefile
patching file sin_value.c
# 请注意,鸟哥目前所在目录是在 main-0.1 底下喔!注意与 patch 文件的相对路径!
# 虽然有五个文件,但其实只有四个文件有修改过喔!上面显示有改过的文件!

[root@www main-0.1]# make clean main
[root@www main-0.1]# ./main
version 0.2
Please input your name: VBird
Please enter the degree angle (ex> 90): 45
Hi, Dear VBird, nice to meet you.
The sin(45.000000) is:  0.71
The cos(45.000000) is:  0.71
# 你可以发现,输出的结果中版本变了,输出资讯多了括号 () 喔!

[root@www main-0.1]# make install   <==将他安装到 /usr/local/bin 给大家用
cp -a main /usr/local/bin
[root@www main-0.1]# main           <==直接输入指令可执行!
[root@www main-0.1]# make uninstall <==移除此软件!
rm -f /usr/local/bin/main

很有趣的练习吧!所以你只要下载 patch file 就能够对你的软件原始码更新了!只不过更新了原始码并非软件就更新!你还是得要将该软件进行编译后,才会是最终正确的软件喔! 因为 patch 的功能主要仅只是更新原始码文件而已!切记切记!此外,如果你 patch 错误呢?没关系的!我们的 patch 是可以还原的啊!透过‘ patch -R < ../main_0.1_to_0.2.patch ’就可以还原啦!很有趣吧!

例题:
如果我有一个很旧版的软件,这个软件已经更新到很新的版本,例如核心,那么我可以使用 patch file 来更新吗?
答:
这个问题挺有趣的,首先,你必须要确定旧版本与新版本之间‘确实有释出 patch file ’才行,以 kernel 2.2.xx 及 2.4.xx 来说,这两者基本上的架构已经不同了,所以两者间是无法以 patch file 来更新的。不过, 2.4.xx 与 2.4.yy 就可以更新了。不过,因为 kernel 每次推出的 patch 文件都仅针对前一个版本而已,所以假设要由 kernel 2.4.20 升级到 2.4.26 ,就必须要使用 patch 2.4.21, 2.4.22, 2.4.23, 2.4.24, 2.4.25, 2.4.26 六个文件来‘依序更新’才行喔!当然,如果有朋友帮你比对过 2.4.20 与 2.4.26 ,那你自然就可以使用该 patch file 来直接一次更新啰!


大标题的图示函式库管理

在我们的 Linux 作业系统当中,函式库是很重要的一个项目。 因为很多的软件之间都会互相取用彼此提供的函式库来进行特殊功能的运作, 例如很多需要验证身份的程序都习惯利用 PAM 这个模组提供的验证机制来实作,而很多网络连线机制则习惯利用 SSL 函式库来进行连线加密的机制。所以说,函式库的利用是很重要的。不过, 函式库又依照是否被编译到程序内部而分为动态与静态函式库,这两者之间有何差异?哪一种函式库比较好? 底下我们就来谈一谈先!


小标题的图示动态与静态函式库

首先我们要知道的是,函式库的类型有哪些?依据函式库被使用的类型而分为两大类,分别是静态 (Static) 与动态 (Dynamic) 函式库两类。底下我们来谈一谈这两种类行的函式库吧!


  • 静态函式库的特色:
  • 副档名:(副档名为 .a)
    这类的函式库通常副档名为 libxxx.a 的类型;

  • 编译行为
    这类函式库在编译的时候会直接整合到执行程序当中,所以利用静态函式库编译成的文件会比较大一些喔

  • 独立执行的状态
    这类函式库最大的优点,就是编译成功的可执行档可以独立执行,而不需要再向外部要求读取函式库的内容 (请参照动态函式库的说明)。

  • 升级难易度
    虽然执行档可以独立执行,但因为函式库是直接整合到执行档中, 因此若函式库升级时,整个执行档必须要重新编译才能将新版的函式库整合到程序当中。 也就是说,在升级方面,只要函式库升级了,所有将此函式库纳入的程序都需要重新编译!


  • 动态函式库的特色:
  • 副档名:(副档名为 .so)
    这类函式库通常副档名为 libxxx.so 的类型;

  • 编译行为
    动态函式库与静态函式库的编译行为差异挺大的。 与静态函式库被整个捉到程序中不同的,动态函式库在编译的时候,在程序里面只有一个‘指向 (Pointer)’的位置而已。也就是说,动态函式库的内容并没有被整合到执行档当中,而是当执行档要使用到函式库的机制时, 程序才会去读取函式库来使用。由于执行档当中仅具有指向动态函式库所在的指标而已, 并不包含函式库的内容,所以他的文件会比较小一点

  • 独立执行的状态
    这类型的函式库所编译出来的程序不能被独立执行, 因为当我们使用到函式库的机制时,程序才会去读取函式库,所以函式库文件‘必须要存在’才行,而且,函式库的‘所在目录也不能改变’,因为我们的可执行档里面仅有‘指标’亦即当要取用该动态函式库时, 程序会主动去某个路径下读取,呵呵!所以动态函式库可不能随意移动或删除,会影响很多相依的程序软件喔!

  • 升级难易度
    虽然这类型的执行档无法独立运作,然而由于是具有指向的功能, 所以,当函式库升级后,执行档根本不需要进行重新编译的行为,因为执行档会直接指向新的函式库文件 (前提是函式库新旧版本的档名相同喔!)。

目前的 Linux distribution 比较倾向于使用动态函式库,因为如同上面提到的最重要的一点, 就是函式库的升级方便!由于 Linux 系统里面的软件相依性太复杂了,如果使用太多的静态函式库,那么升级某一个函式库时, 都会对整个系统造成很大的冲击!因为其他相依的执行档也要同时重新编译啊! 这个时候动态函式库可就有用多了,因为只要动态函式库升级就好,其他的软件根本无须变动。

那么这些函式库放置在哪里呢?绝大多数的函式库都放置在:/usr/lib, /lib 目录下! 此外,Linux 系统里面很多的函式库其实 kernel 就提供了,那么 kernel 的函式库放在哪里?呵呵!就是在 /lib/modules 里面啦!里面的资料可多着呢!不过要注意的是, 不同版本的核心提供的函式库差异性是挺大的,所以 kernel 2.4.xx 版本的系统不要想将核心换成 2.6.xx 喔! 很容易由于函式库的不同而导致很多原本可以执行的软件无法顺利运作呢

 
小标题的图示ldconfig 与 /etc/ld.so.conf

在了解了动态与静态函式库,也知道我们目前的 Linux 大多是将函式库做成动态函式库之后,再来要知道的就是,那有没有办法增加函式库的读取效能? 我们知道记忆体的存取速度是硬碟的好几倍,所以,如果我们将常用到的动态函式库先载入记忆体当中 (快取, cache),如此一来,当软件要取用动态函式库时,就不需要从头由硬碟里面读出啰! 这样不就可以增进动态函式库的读取速度?没错,是这样的!这个时候就需要 ldconfig 与 /etc/ld.so.conf 的协助了。

如何将动态函式库载入快取记忆体当中呢?

  1. 首先,我们必须要在 /etc/ld.so.conf 里面写下‘ 想要读入快取记忆体当中的动态函式库所在的目录’,注意喔, 是目录而不是文件;
  2. 接下来则是利用 ldconfig 这个执行档将 /etc/ld.so.conf 的资料读入快取当中;
  3. 同时也将资料记录一份在 /etc/ld.so.cache 这个文件当中呐!
使用 ldconfig 预载入动态函式库到记忆体中
图 5.2.1、使用 ldconfig 预载入动态函式库到记忆体中

事实上, ldconfig 还可以用来判断动态函式库的连结资讯呢!赶紧利用 CentOS 来测试看看。假设你想要将目前你系统下的 MySQL 函式库加入到快取当中时,可以这样做:

[root@www ~]# ldconfig [-f conf] [ -C cache]
[root@www ~]# ldconfig [-p]
选项与参数:
-f conf :那个 conf 指的是某个文件名称,也就是说,使用 conf 作为 libarary 
	  函式库的取得路径,而不以 /etc/ld.so.conf 为预设值
-C cache:那个 cache 指的是某个文件名称,也就是说,使用 cache 作为快取暂存
	  的函式库资料,而不以 /etc/ld.so.cache 为预设值
-p	:列出目前有的所有函式库资料内容 (在 /etc/ld.so.cache 内的资料!)

范例一:假设我的 MySQL 资料库函式库在 /usr/lib/mysql 当中,如何读进 cache ?
[root@www ~]# vi /etc/ld.so.conf
include ld.so.conf.d/*.conf
/usr/lib/mysql   <==这一行新增的啦!

[root@www ~]# ldconfig  <==画面上不会显示任何的资讯,不要太紧张!正常的!

[root@www ~]# ldconfig -p
530 libs found in cache `/etc/ld.so.cache'
        libz.so.1 (libc6) => /usr/lib/libz.so.1
        libxslt.so.1 (libc6) => /usr/lib/libxslt.so.1
....(底下省略)....
#       函式库名称 => 该函式库实际路径

透过上面的动作,我们可以将 MySQL 的相关函式库给他读入快取当中,这样可以加快函式库读取的效率呢! 在某些时候,你可能会自行加入某些 Tarball 安装的动态函式库,而你想要让这些动态函式库的相关连结可以被读入到快取当中, 这个时候你可以将动态函式库所在的目录名称写入 /etc/ld.so.conf 当中,然后执行 ldconfig 就可以啦!


小标题的图示程序的动态函式库解析: ldd

说了这么多,那么我如何判断某个可执行的 binary 文件含有什么动态函式库呢?很简单,利用 ldd 就可以晓得了!例如我想要知道 /usr/bin/passwd 这个程序含有的动态函式库有哪些,可以这样做:

[root@www ~]# ldd [-vdr] [filename]
选项与参数:
-v :列出所有内容资讯;
-d :重新将资料有遗失的 link 点秀出来!
-r :将 ELF 有关的错误内容秀出来!

范例一:找出 /usr/bin/passwd 这个文件的函式库资料
[root@www ~]# ldd /usr/bin/passwd
....(前面省略)....
        libaudit.so.0 => /lib/libaudit.so.0 (0x00494000)     <==SELinux
        libselinux.so.1 => /lib/libselinux.so.1 (0x00101000) <==SELinux
        libc.so.6 => /lib/libc.so.6 (0x00b99000)
        libpam.so.0 => /lib/libpam.so.0 (0x004ab000)         <==PAM 模组
....(底下省略)....
# 我们前言的部分不是一直提到 passwd 有使用到 pam 的模组吗!怎么知道?
# 利用 ldd 察看一下这个文件,看到 libpam.so 了吧?这就是 pam 提供的函式库

范例二:找出 /lib/libc.so.6 这个函式的相关其他函式库!
[root@www ~]# ldd -v /lib/libc.so.6
        /lib/ld-linux.so.2 (0x00ab3000)
        linux-gate.so.1 =>  (0x00636000)

        Version information:  <==使用 -v 选项,增加显示其他版本资讯!
        /lib/libc.so.6:
                ld-linux.so.2 (GLIBC_PRIVATE) => /lib/ld-linux.so.2
                ld-linux.so.2 (GLIBC_2.3) => /lib/ld-linux.so.2
                ld-linux.so.2 (GLIBC_2.1) => /lib/ld-linux.so.2

未来如果你常常升级安装 RPM 的软件时 (下一章节会介绍),应该常常会发现那个‘ 相依属性’的问题吧!没错!我们可以先以 ldd 来视察‘相依函式库’之间的相关性!以先取得了解! 例如上面的例子中,我们检查了 libc.so.6 这个在 /lib 当中的函式库,结果发现他其实还跟 ld-linux.so.2 有关!所以我们就需要来了解一下,那个文件到底是什么软件的函式库呀?使用 -v 这个参数还可以得知该函式库来自于哪一个软件!像上面的资料中,就可以得到该 libc.so.6 其实可以支援 GLIBC_2.1 等的版本!


大标题的图示检验软件正确性

前面提到很多升级与安装需要注意的事项,因为我们需要克服很多的程序漏洞,所以需要前往 Linux distribution 或者是某些软件开发商的网站,下载最新并且较安全的软件文件来安装才行。 好了,那么‘有没有可能我们下载的文件本身就有问题?’ 是可能的!因为 cracker 无所不在,很多的软件开发商已经公布过他们的网页所放置的文件曾经被窜改过! 那怎么办?连下载原版的资料都可能有问题了?难道没有办法判断文件的正确性吗?

这个时候我们就要透过每个文件独特的指纹验证资料了!因为每个文件的内容与文件大小都不相同, 所以如果一个文件被修改之后,必然会有部分的资讯不一样!利用这个咚咚,我们可以使用 MD5 这个指纹验证机制来判断该文件有没有被更动过! 举个例子来说,台湾高速网络中心所提供的 CentOS 5.3 原版光碟下载点:

http://ftp.twaren.net/Linux/CentOS/5.3/isos/i386/

同时提供了 CentOS 5.3 所有光碟/DVD 的 ISO 文件 MD5 编码,透过这个编码的比对, 我们就可以晓得下载的文件是否有问题。那么万一 CentOS 提供的光碟映象档被下载之后,让有心人士偷偷修改过,再转到 Internet 上面流传,那么你下载的这个文件偏偏不是原厂提供的,呵呵! 你能保证该文件的内容完全没有问题吗?当然不能对不对!是的,这个时候就有 md5sum 与 sha1sum 这个文件指纹的咚咚出现啦!说说他的用法吧!


小标题的图示md5sum / sha1sum

目前有多种机制可以计算文件的指纹码,我们选择使用较为广泛的 MD5 与 SHA1 加密机制来处理。 同样的,我们以高速电脑中心谈到的 CentOS 5.3 的网络安装映像档来处理试看看好了。 在上面的连结网址上面,你会看到几个文件:

  • CentOS-5.3-i386-netinstall.iso:CentOS 5.3 的网络安装映像档;
  • md5sum.txt: MD5 指纹编码
  • sha1sum.txt: SHA1 指纹编码

如果你下载了 CentOS-5.3-i386-netinstall.iso 后,再以 md5sum 与 sha1sum 去检验这个文件时, 文件所回传的指纹码应该要与网站上面提供的文件指纹码相同才对!我们由网站上面提供的指纹码知道这个映像档的指纹为:

  • MD5 : 6ae4077a9fc2dcedca96013701bd2a43
  • SHA1: a0c640ae0c68cc0d9558cf4f8855f24671b3dadb
[root@www ~]# md5sum/sha1sum [-bct] filename
[root@www ~]# md5sum/sha1sum [--status|--warn] --check filename
选项与参数:
-b :使用 binary 的读档方式,预设为 Windows/DOS 文件型态的读取方式;
-c :检验文件指纹;
-t :以文字型态来读取文件指纹。

范例一:将刚刚的文件下载后,测试看看指纹码
[root@www ~]# wget \
> http://ftp.twaren.net/Linux/CentOS/5.3/isos/i386/CentOS-5.3-i386-netinstall.iso
[root@www ~]# md5sum CentOS-5.3-i386-netinstall.iso
6ae4077a9fc2dcedca96013701bd2a43  CentOS-5.3-i386-netinstall.iso
[root@www ~]# sha1sum CentOS-5.3-i386-netinstall.iso
a0c640ae0c68cc0d9558cf4f8855f24671b3dadb  CentOS-5.3-i386-netinstall.iso
# 看!显示的编码是否与上面相同呢?赶紧测试看看!

一般而言,每个系统里面的文件内容大概都不相同,例如你的系统中的 /etc/passwd 这个登入资讯档与我的一定不一样,因为我们的使用者与密码、 Shell 及家目录等大概都不相同,所以由 md5sum 这个文件指纹分析程序所自行计算出来的指纹表当然就不相同啰!

好了,那么如何应用这个东西呢?基本上,你必须要在你的 Linux 系统上为你的这些重要的文件进行指纹资料库的建立 (好像在做户口调查!),将底下这些文件建立资料库:

  • /etc/passwd
  • /etc/shadow( 假如你不让使用者改密码了 )
  • /etc/group
  • /usr/bin/passwd
  • /sbin/portmap
  • /bin/login ( 这个也很容易被骇! )
  • /bin/ls
  • /bin/ps
  • /usr/bin/top

这几个文件最容易被修改了!因为很多木马程序执行的时候,还是会有所谓的‘执行序, PID’为了怕被 root 追查出来,所以他们都会修改这些检查排程的文件,如果你可以替这些文件建立指纹资料库 (就是使用 md5sum 检查一次,将该文件指纹记录下来,然后常常以 shell script 的方式由程序自行来检查指纹表是否不同了!),那么对于文件系统会比较安全啦!


大标题的图示重点回顾
  • 原始码其实大多是纯文字档,需要透过编译器的编译动作后,才能够制作出 Linux 系统能够认识的可执行的 binary file ;
  • 开放原始码可以加速软件的更新速度,让软件效能更快、漏洞修补更即时;
  • 在 Linux 系统当中,最标准的 C 语言编译器为 gcc ;
  • 在编译的过程当中,可以藉由其他软件提供的函式库来使用该软件的相关机制与功能;
  • 为了简化编译过程当中的复杂的指令输入,可以藉由 make 与 makefile 规则定义,来简化程序的更新、编译与连结等动作;
  • Tarball 为使用 tar 与 gzip/bzip2 压缩功能所打包与压缩的,具有原始码的文件;
  • 一般而言,要使用 Tarball 管理 Linux 系统上的软件,最好需要 gcc, make, autoconfig, kernel source, kernel header 等前驱软件才行,所以在安装 Linux 之初,最好就能够选择 Software development 以及 kernel development 之类的群组;
  • 函式库有动态函式库与静态函式库,动态函式库在升级上具有较佳的优势。动态函式库的副档名为 *.so 而静态则是 *.a ;
  • patch 的主要功能在更新原始码,所以更新原始码之后,还需要进行重新编译的动作才行;
  • 可以利用 ldconfig 与 /etc/ld.so.conf 来制作动态函式库的连结与快取!
  • 透过 MD5 的编码可以判断下载的文件是否为原本厂商所释出的文件。

大标题的图示本章习题
实作题部分:
  • 请前往企鹅游戏网站 http://xpenguins.seul.org/ 下载 xpenguins-2.2.tar.gz 原始码文件,并安装该软件。安装完毕之后,请在 GNOME 图形介面执行 xpenguins , 看看有没有出现如同官网上面出现的小企鹅?


情境模拟题部分:
  • 请依照底下的方式来建置你的系统的重要文件指纹码,并每日比对此重要工作。

    1. 将 /etc/{passwd,shadow,group} 以及系统上面所有的 SUID/SGID 文件建立文件列表,该列表档名为‘ important.file ’;
      [root@www ~]# ls /etc/{passwd,shadow,group} > important.file
      [root@www ~]# find /bin /sbin /usr/sbin /usr/bin -perm +6000 \
      > >> important.file
      

    2. 透过这个档名列表,以名为 md5.checkfile.sh 的档名去建立指纹码,并将该指纹码文件‘ finger1.file ’设定成为不可修改的属性;
      [root@www ~]# vim md5.checkfile.sh
      #!/bin/bash
      for filename in $(cat important.file)
      do
              md5sum $filename >> finger1.file
      done
      
      [root@www ~]# sh md5.checkfile.sh
      [root@www ~]# chattr +i finger1.file
      

    3. 透过相同的机制去建立后续的分析资料为 finger_new.file ,并将两者进行比对,若有问题则提供 email 给 root 查阅:
      [root@www ~]# vim md5.checkfile.sh
      #!/bin/bash
      if [ "$1" == "new" ]; then
          for filename in $(cat important.file)
          do
              md5sum $filename >> finger1.file
          done
          echo "New file finger1.file is created."
          exit 0
      fi
      if [ ! -f finger1.file ]; then
          echo "file: finger1.file NOT exist."
          exit 1
      fi
      
      [ -f finger_new.file ] && rm finger_new.file
      for filename in $(cat important.file)
      do
          md5sum $filename >> finger_new.file
      done
      
      testing=$(diff finger1.file finger_new.file)
      if [ "$testing" != "" ]; then
          diff finger1.file finger_new.file | mail -s 'finger trouble..' root
      fi
      
      [root@www ~]# vim /etc/crontab
      30 2 * * * root cd /root; sh md5.checkfile.sh
      
      如此一来,每天系统会主动的去分析你认为重要的文件之指纹资料,然后再加以分析,看看有没有被更动过。 不过,如果该变动是正常的,例如 CentOS 自动的升级时,那么你就得要删除 finger1.file , 再重新建置一个新的指纹资料库才行!否则你会每天收到有问题信件的回报喔!

大标题的图示参考资料与延伸阅读

2002/08/21:第一次完成
2003/02/11:重新编排与加入 FAQ
2004/03/25:原本是 Tarball 与 RPM ,本日开始将 Tarball 与 RPM  分开说明与讲解(后续会花好几天喔!),
      最重要的是 Source code 的说明,并提到相关的 gcc compile 功能等等!
2004/04/10:经历了当兵中的无奈生活,终于将这篇给他完工了~(当时的鸟哥在将军渔港与青山港~)
2005/09/30:旧版文章 (Tarball 与 RPM 的简单说明) 移动到 此处
2005/10/01:将风格作个转变之外,也将一些测试移转到 FC4 上面进行!
2008/01/10:感谢网友 ayttk 的说明,原本的 make 语法网页已经移动到其他地方了,请参考 这里
2009/06/04:将基于 FC4 撰写的文章移动到 此处
2009/06/20:增加一个小练习,需要使用到 X software development 的软件群组喔!
2009/09/15:加入一个情境模拟,其实有点功力练功练功而已的习题啰!



 
     
中国存储网 chinastor.cn排版整理
原文作者鸟哥,主页,更多Linux学习资料在线看:Linux系统管理员手册 - Linux命令大全 - Linux调用大全- Linux专栏 - 国产Linux