嵌入式Linux系統在運行時，除了小概率的因突然斷電等非正常關機造成的文件系統損壞之外，更大概率的是因為應用程序編程不當，造成對Nandflash的頻繁擦寫，行業術語稱之為 過度編程（Over Program） ，逼近Nandflash約十萬次的擦寫壽命，表現為Nandflash的某些塊/頁陸續出現位反轉（bit flip，所謂位反轉，指的是原先Nandflash中存儲的某個數據位變化了，即要么從1變成了0，要么從0變成了1）的現象，少量的位反轉是可以靠硬件/軟件ECC（Error Checking and Correction，錯誤檢查和糾正）算法自糾過來的，但大量的位反轉超出ECC的糾正能力之后，會導致文件系統數據損壞，嚴重時會導致系統崩潰，終端運行不起來。

對于大規模量產的終端設備而言，這種問題一旦發生，往往不是升級下應用程序就能解決的，因為底層存儲器件的壽命已到，必需要更換硬件才行，這會給公司帶來大量的人力、物力及財力消耗，公司產品口碑也會受到影響，后果是非常嚴重的。

然而現實中，采用嵌入式Linux系統的應用程序，其代碼規模一般都不會很小，少則幾萬十幾萬行，多則幾十上百萬行，想要快速找到應用程序中對文件寫操作比較頻繁的地方，猶如大海撈針。這種情況下，尋找一種快速有效的方法，協助我們研發人員快速定位問題所在，將有問題的應用程序在家里提前暴露出來，不要流到現場等著問題去爆發，就顯得尤為重要。

Linux內核從2.6.13版本起，加入了inotify特性，這是一種文件系統的變化通知機制，通過inotify可以監控文件系統中添加、刪除、修改，移動等各種文件操作，當事件發生時可及時發出相關的事件警告。利用這個內核接口，第三方軟件就可以監控文件系統下文件的各種變化情況。

具體實施方式

以嵌入式Linux系統常用的ubi文件系統為例，具體步驟如下：

步驟1： 觀察內核啟動時掛載ubi文件系統時的打印信息，或者在系統正常運行過程中隨時輸入ubinfo命令，查看目前文件系統對Nandflash閃存的最大擦寫次數。

ubinfo -d 0

ubi0

Volumes count: 1

Logical eraseblock size: 126976 bytes, 124.0 KiB

Total amount of logical eraseblocks: 400 (50790400 bytes, 48.4 MiB)

Amount of available logical eraseblocks: 0 (0 bytes)

Maximum count of volumes 128

Count of bad physical eraseblocks: 0

Count of reserved physical eraseblocks: 8

Current maximum erase counter value: 36864

Minimum input/output unit size: 2048 bytes

Character device major/minor: 251:0

Present volumes: 0

步驟2： 正常如果應用程序沒有過度編程的話，上面顯示的最大擦寫次數（Current maximum erase counter value）一般不會很大，如果看到這種幾萬次的擦寫次數，或者短時間內這個最大擦寫次數增長比較快，說明應用程序中應該有過度編程的情況，這時我們可以借助Linux系統中的文件操作監控工具inotify協助定位。

步驟3： 在inotify的站點下載inotify-tools監控工具源代碼，這里以版本inotify-tools-3.13.tar.gz為例。

步驟4： 由于嵌入式Linux系統一般運行在ARM平臺上，需要將上面下載的源代碼進行交叉編譯（cross-compiling，所謂交叉編譯，就是在一種平臺上編譯，編譯出來的程序，放到別的平臺上運行，即編譯環境和運行環境不一樣，這個概念主要和嵌入式開發有關，一般是在x86平臺上編譯，在ARM平臺上運行），生成inotifywait、inotifywatch可執行程序及運行時需要的庫文件。

make CC=arm-none-linux-gnueabi-gcc

步驟5： 將交叉編譯后生成的inotifywait、inotifywatch可執行程序上傳到嵌入式Linux設備的/sbin目錄下，并修改可執行權限。

chmod 755 inotifywait
chmod 755 inotifywatch

步驟6： 將交叉編譯后生成的庫文件libinotifytools.so.0.4.1上傳到嵌入式Linux設備的/lib目錄下，并在/lib目錄下建立符號鏈接。

ln -s libinotifytools.so.0.4.1 libinotifytools.so.0

步驟7： 執行如下命令即可啟動對文件操作的監聽。

inotifywait -mrq --timefmt '%y/%m/%d %H:%M' --format '%T %w %f %e' -e modify,delete,create,attrib --exclude 'ptmx|pts|ttyS*' /

其中：

--timefmt選項用于控制打印出來的時間格式，這里采用了“年/月/日 時:分”的格式。

--exclude選項用于剔除過濾不需要監控的文件名稱，支持通配符*過濾。

-e選項用于注冊要監聽的文件操作事件。

步驟8： 這時應該就可以看到inotify打印的監聽到的文件操作，根據打印信息再到代碼里面去搜索對應的文件操作，便可以很容易定位。