探索Linux內(nèi)核:Kconfig的秘密
深入了解Linux配置/構(gòu)建系統(tǒng)是如何工作的。
自從Linux內(nèi)核代碼遷移到Git之后,Linux內(nèi)核配置/構(gòu)建系統(tǒng)(也稱為Kconfig/kBuild)已經(jīng)存在了很長時間。然而,作為支持基礎(chǔ)設(shè)施,它很少受到關(guān)注;即使在日常工作中使用它的內(nèi)核開發(fā)人員也從未真正考慮過它。
為了探索Linux內(nèi)核是如何編譯的,本文將深入研究Kconfig/kBuild內(nèi)部進(jìn)程,解釋.config文件和vmlinux/bzImage文件是如何生成的,并介紹一個用于依賴性跟蹤的智能技巧。
Kconfig
構(gòu)建內(nèi)核的第一步總是配置。Kconfig幫助使Linux內(nèi)核高度模塊化和可定制。Kconfig為用戶提供了許多配置目標(biāo):
config | 使用面向行的程序更新當(dāng)前配置 |
nconfig | 使用基于ncurses菜單的程序更新當(dāng)前配置 |
menuconfig | 使用基于菜單的程序更新當(dāng)前配置 |
xconfig | 利用基于qt的前端更新當(dāng)前配置 |
gconfig | 利用基于GTK+的前端更新當(dāng)前配置 |
oldconfig | 使用提供的.config作為基礎(chǔ)更新當(dāng)前配置 |
localmodconfig | 更新未加載的當(dāng)前配置禁用模塊 |
localyesconfig | 更新當(dāng)前配置,將本地MODS轉(zhuǎn)換為核心 |
defconfig | 從Arch提供的Defconfig中獲得默認(rèn)配置的新配置 |
Savedefconfig | 將當(dāng)前配置保存為./defconfig(最小配置) |
allnoconfig | 使用“no”回答所有選項的新配置 |
allyesconfig | 新配置,在該配置中,所有選項都以“是”接受 |
allmodconfig | 在可能的情況下選擇新的配置模塊 |
alldefconfig | 將所有符號設(shè)置為默認(rèn)值的新配置 |
randconfig | 具有對所有選項的隨機(jī)答案的新配置 |
listnewconfig | 列出新選項 |
olddefconfig | 與oldconfig相同,但在不提示的情況下將新符號設(shè)置為默認(rèn)值 |
kvmconfig | 為kvm客戶端內(nèi)核支持啟用其他選項 |
xenconfig | 啟用Xen dom0和來賓內(nèi)核支持的其他選項 |
tinyconfig | 配置盡可能小的內(nèi)核 |
我認(rèn)為menuconfig是這些目標(biāo)中最受歡迎的。目標(biāo)由不同的主機(jī)程序進(jìn)行處理,這些程序由內(nèi)核提供,并在內(nèi)核構(gòu)建過程中生成。一些目標(biāo)有一個GUI(為了用戶的方便),而大多數(shù)沒有。與kconfig相關(guān)的工具和源代碼主要位于scripts/kconfig/在內(nèi)核源代碼中。我們可以從scripts/kconfig/makefile,有幾個主機(jī)程序,包括CONF, mconf,和nconf。除了CONF,它們每個都負(fù)責(zé)基于GUI的配置目標(biāo)之一,因此,CONF和他們中的大多數(shù)人打交道。
從邏輯上講,Kconfig的基礎(chǔ)結(jié)構(gòu)有兩個部分:一個實現(xiàn)了新語言要定義配置項(請參閱內(nèi)核源代碼下的Kconfig文件),而其他配置項則解析Kconfig語言并處理配置操作。
大多數(shù)配置目標(biāo)的內(nèi)部流程大致相同(如下所示):
注意,所有配置項都有一個默認(rèn)值。
第一步讀取源根下的Kconfig文件以構(gòu)造初始配置數(shù)據(jù)庫;然后根據(jù)此優(yōu)先級讀取現(xiàn)有配置文件來更新初始數(shù)據(jù)庫:
- .config
- /lib/Module/$(shell,uname-r)/.config
- /etc/kernel-config
- /boot/config-$(shell,uname-r)
- ARCH_DEFCONFIG
- ARCH/$(ARCH)/Defconfig
如果您正在進(jìn)行基于GUI的配置,則通過menuconfig或基于命令行的配置oldconfig,數(shù)據(jù)庫將根據(jù)您的自定義進(jìn)行更新。最后,將配置數(shù)據(jù)庫轉(zhuǎn)儲到.config文件中。
但是.config文件不是內(nèi)核構(gòu)建的最終素材;這就是為什么syncconfig目標(biāo)存在。syncconfig以前是一個名為silentoldconfig,但是它不像舊名字說的那樣,所以它被重命名了。此外,由于它是內(nèi)部使用(而不是為用戶),它被從列表中刪除。
下面是一個例子syncconfig作用:
syncconfig接受.config作為輸入并輸出許多其他文件,這些文件分為三類:
auto.conf & tristate.conf用于生成文件文本處理。例如,您可能在組件的makefile中看到這樣的語句:
obj-$(CONFIG_GENERIC_CALIBRATE_DELAY) += calibrate.o
autoconf.h在C語言源文件中使用。
空頭文件include/config/用于在kbuild期間進(jìn)行配置依賴項跟蹤,下面將對此進(jìn)行解釋。
配置之后,我們將知道哪些文件和代碼段沒有編譯。
KBuild
組件式建筑,稱為遞歸制作,是GNU的一種常見方式。制作,使管理一個大型項目。KBuild是遞歸make的一個很好的例子。通過將源文件劃分為不同的模塊/組件,每個組件都由自己的Makefile管理。當(dāng)您開始構(gòu)建時,頂級Makefile按正確的順序調(diào)用每個組件的makefile,構(gòu)建組件,并將它們收集到最終的執(zhí)行程序中。
KBuild指的是不同類型的makefile:
- Makefile位于源根中的頂部makefile。
- .config是內(nèi)核配置文件。
- ARCH/$(ARCH)/Makefile是拱形Makefile,這是對頂部makefile的補(bǔ)充。
- scripts/Makefile*描述所有kbuild makefile的通用規(guī)則。
- 最后,大約有500個Kbuildmakefiles.
頂部的makefile包含archmakefile,讀取.config文件,進(jìn)入子目錄,調(diào)用制作,使中定義的例程的幫助下實現(xiàn)每個組件的makefile。scripts/Makefile*,構(gòu)建每個中間對象,并將所有中間對象鏈接到vmlinux。核心文件Documentation/kbuild/makefiles.txt描述這些制作文件的所有方面。
例如,讓我們看看在x86-64上如何生成vmlinux:
(插圖是根據(jù)理查德·Y·史蒂文(Richard Y.Steven)的博客。經(jīng)提交人許可后予以更新和使用。
所有.o進(jìn)入vmlinux的文件首先進(jìn)入它們自己的built-in.a,這是通過變量表示的。KBUILD_VMLINUX_INIT, KBUILD_VMLINUX_Main, KBUILD_VMLINUX_LIBS,然后收集到vmlinux文件中。
看看如何在Linux內(nèi)核中實現(xiàn)遞歸make,并借助簡化的Makefile代碼:
# In top Makefile vmlinux: scripts/link-vmlinux.sh $(vmlinux-deps) +$(call if_changed,link-vmlinux) # Variable assignments vmlinux-deps := $(KBUILD_LDS) $(KBUILD_VMLINUX_INIT) $(KBUILD_VMLINUX_MAIN) $(KBUILD_VMLINUX_LIBS) export KBUILD_VMLINUX_INIT := $(head-y) $(init-y) export KBUILD_VMLINUX_MAIN := $(core-y) $(libs-y2) $(drivers-y) $(net-y) $(virt-y) export KBUILD_VMLINUX_LIBS := $(libs-y1) export KBUILD_LDS := arch/$(SRCARCH)/kernel/vmlinux.lds init-y := init/ drivers-y := drivers/ sound/ firmware/ net-y := net/ libs-y := lib/ core-y := usr/ virt-y := virt/ # Transform to corresponding built-in.a init-y := $(patsubst %/, %/built-in.a, $(init-y)) core-y := $(patsubst %/, %/built-in.a, $(core-y)) drivers-y := $(patsubst %/, %/built-in.a, $(drivers-y)) net-y := $(patsubst %/, %/built-in.a, $(net-y)) libs-y1 := $(patsubst %/, %/lib.a, $(libs-y)) libs-y2 := $(patsubst %/, %/built-in.a, $(filter-out %.a, $(libs-y))) virt-y := $(patsubst %/, %/built-in.a, $(virt-y)) # Setup the dependency. vmlinux-deps are all intermediate objects, vmlinux-dirs # are phony targets, so every time comes to this rule, the recipe of vmlinux-dirs # will be executed. Refer "4.6 Phony Targets" of `info make` $(sort $(vmlinux-deps)): $(vmlinux-dirs) ; # Variable vmlinux-dirs is the directory part of each built-in.a vmlinux-dirs := $(patsubst %/,%,$(filter %/, $(init-y) $(init-m) \ $(core-y) $(core-m) $(drivers-y) $(drivers-m) \ $(net-y) $(net-m) $(libs-y) $(libs-m) $(virt-y))) # The entry of recursive make $(vmlinux-dirs): $(Q)$(MAKE) $(build)=$@ need-builtin=1
遞歸的配方擴(kuò)展,例如:
make -f scripts/Makefile.build obj=init need-builtin=1
這意味著make將進(jìn)入scripts/Makefile.build繼續(xù)建造每一個built-in.a。在.的幫助下scripts/link-vmlinux.sh,vmlinux文件最終位于源根下。
理解vmlinux與bzImage
許多Linux內(nèi)核開發(fā)人員可能不清楚vmlinux和bzImage之間的關(guān)系。例如,以下是它們在x86-64中的關(guān)系:
源根vmlinux被剝離、壓縮、放入piggy.S,然后將其他對等對象鏈接到arch/x86/boot/compressed/vmlinux。同時,下面生成一個名為setup.bin的文件arch/x86/boot??赡苡幸粋€包含重定位信息的可選的第三個文件,具體取決于config_x86_RELOCS.
一個名為build由內(nèi)核提供,將這兩個(或三個)部分構(gòu)建到最終的bzImage文件中。
依賴跟蹤
KBuild跟蹤三種依賴關(guān)系:
- 所有的前提文件(*.c和*.h)
- CONFIG_在所有先決條件文件中使用的選項
- 用于編譯目標(biāo)的命令行依賴關(guān)系。
第一個很容易理解,但是第二個和第三個呢?內(nèi)核開發(fā)人員經(jīng)??吹竭@樣的代碼片段:
#ifdef CONFIG_SMP __boot_cpu_id = cpu; #endif
什么時候CONFIG_SMP更改后,這段代碼應(yīng)該重新編譯。編譯源文件的命令行也很重要,因為不同的命令行可能導(dǎo)致不同的對象文件。
當(dāng).C文件通過#include指令,您需要編寫這樣的規(guī)則:
main.o: defs.h recipe...
在管理一個大型項目時,您需要很多這樣的規(guī)則;所有這些規(guī)則都會乏味。幸運(yùn)的是,大多數(shù)現(xiàn)代C編譯器可以通過查看#include源文件中的行。對于GNU編譯器集合(GCC),只需添加一個命令行參數(shù):-MD depfile
# In scripts/Makefile.lib c_flags = -Wp,-MD,$(depfile) $(NOSTDINC_FLAGS) $(LINUXINCLUDE) \ -include $(srctree)/include/linux/compiler_types.h \ $(__c_flags) $(modkern_cflags) \ $(basename_flags) $(modname_flags)
這將生成一個.D文件的內(nèi)容如下:
init_task.o: init/init_task.c include/linux/kconfig.h \ include/generated/autoconf.h include/linux/init_task.h \ include/linux/rcupdate.h include/linux/types.h \ ...
然后主機(jī)程序fixdep通過獲取其他兩個依賴項來處理其他兩個依賴項。depfile命令行作為輸入,然后以makefile語法輸出.cmd文件,它記錄目標(biāo)的命令行和所有先決條件(包括配置)。看起來是這樣的:
# The command line used to compile the target cmd_init/init_task.o := gcc -Wp,-MD,init/.init_task.o.d -nostdinc ... ... # The dependency files deps_init/init_task.o := \ $(wildcard include/config/posix/timers.h) \ $(wildcard include/config/arch/task/struct/on/stack.h) \ $(wildcard include/config/thread/info/in/task.h) \ ... include/uapi/linux/types.h \ arch/x86/include/uapi/asm/types.h \ include/uapi/asm-generic/types.h \ ...
在遞歸生成過程中將包含一個.cmd文件,提供所有依賴項信息,并幫助決定是否重新構(gòu)建目標(biāo)。
這背后的秘密是,F(xiàn)ixdep將解析depfile(.d文件),然后解析其中的所有依賴文件,搜索所有config_string的文本,將它們轉(zhuǎn)換為相應(yīng)的空頭文件,并將它們添加到目標(biāo)的先決條件中。每次配置更改時,相應(yīng)的空頭文件也將被更新,因此kbuild可以檢測到該更改并重新構(gòu)建依賴于它的目標(biāo)。因為還記錄了命令行,所以很容易比較最后的編譯參數(shù)和當(dāng)前的編譯參數(shù)。
展望未來
Kconfig/kbuild很長一段時間沒有變化,直到新的維護(hù)者山田正一郎(Masahiro Yamada)在2017年初加入,現(xiàn)在KBuild又在積極發(fā)展。如果你很快看到了與本文不同的東西,不要感到驚訝。
總結(jié)
以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,謝謝大家對腳本之家的支持。如果你想了解更多相關(guān)內(nèi)容請查看下面相關(guān)鏈接
- 詳解Linux內(nèi)核內(nèi)存管理架構(gòu)
- Linux 內(nèi)核空間與用戶空間實現(xiàn)與分析
- 詳解Linux內(nèi)核進(jìn)程調(diào)度函數(shù)schedule()的觸發(fā)和執(zhí)行時機(jī)
- Linux利用Sysctl命令調(diào)整內(nèi)核參數(shù)
- Linux內(nèi)核參數(shù)調(diào)整方法
- Linux內(nèi)核啟動參數(shù)詳解
- 簡單談?wù)凩inux內(nèi)核定時器
- Linux中的內(nèi)核鏈表實例詳解
- 淺談安裝ORACLE時在Linux上設(shè)置內(nèi)核參數(shù)的含義
- Linux內(nèi)核設(shè)備驅(qū)動之Linux內(nèi)核基礎(chǔ)筆記整理
相關(guān)文章
如何查看Apache的連接數(shù)和當(dāng)前連接數(shù)
查看Apache的連接數(shù)和當(dāng)前的連接數(shù)以及IP訪問次數(shù),下面有個不錯的示例,大家可以參考下,希望對大家解決問題有所幫助2014-01-01Centos7配置fastdfs和nginx分布式文件存儲系統(tǒng)實現(xiàn)過程解析
這篇文章主要介紹了centos7配置fastdfs及nginx并實現(xiàn)分布式文件存儲系統(tǒng),文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2020-06-06CentOS7環(huán)境下gcc(版本10.2.0)升級詳細(xì)過程
大家好,本篇文章主要講的是CentOS7環(huán)境下gcc(版本10.2.0)升級詳細(xì)過程,感興趣的同學(xué)快來看一看吧,希望對你有幫助2021-11-11解決atd服務(wù)報錯Failed with result‘exit-code‘問題
在isoftserveros-v5.1-oe1-aarch64系統(tǒng)中,安裝at軟件包后,由于手動執(zhí)行導(dǎo)致atd守護(hù)進(jìn)程出錯,通過查看后臺Process行,手動kill原atd進(jìn)程,使用systemctl重啟atd服務(wù)后,問題得以解決,此經(jīng)驗可為類似情況提供參考2024-09-09Apache rewrite的重寫相關(guān)的參數(shù)說明
Apache的rewrite的重寫非常常用,現(xiàn)總結(jié)了一下.2008-08-08