RTOS文件系統對比:LittleFS Vs. SPIFFS
- 2020 年 3 月 15 日
- 筆記
概述
在RTOS上免費的文件系統本身就不多,廣泛使用且掉電安全的就更少了。本文選取當前RTOS上比較受歡迎的兩個文件系統 SPIFFS 和 LittleFS 做全方位的對比,以便項目上評估在RTOS上使用什麼FS。
對嵌入式設備來說,掉電時有發生。如果文件系統無法保證掉電安全,那麼非常有可能在某一次掉電時,設備就變磚了。
不管是 SPIFFS 還是 LittleFS 的小型文件系統,都號稱做到掉電安全。而常見的FAT32由於無法做到掉電安全,或者某些特供版要付費使用,更多時候是在需要Windows兼容性時才會考慮。
開源協議
不管是 SPIFFS 還是 LittleFS 都開源在 GitHub 中。前者是 MIT開源協議,後者是 BSD開源協議。
在文章《了解常見的開源協議(BSD, GPL, LGPL,MIT)》 上這麼評論 BSD開源協議
BSD程式碼鼓勵程式碼共享,但需要尊重程式碼作者的著作權。BSD由於允許使用者修改和重新發布程式碼,也允許使用或在BSD程式碼上開發商業軟體發布和銷售,因此是對商業集成很友好的協議。
對MIT開源協議有如下總結:
MIT是和BSD一樣寬范的許可協議,作者只想保留版權,而無任何其他了限制。也就是說,你必須在你的發行版里包含原許可協議的聲明,無論你是以二進位發布的還是以源程式碼發布的。
雖然從使用者的許可權來說,MIT開源協議要比BSD開源協議更少限制,但對企業商用來說,兩者都可放心使用。
社區維護情況
以GibHub上第一個提交作為項目開始時間,那麼SPIFFS項目作者是Peter Andersson,始於2013年7月4日。而LittleFS的作者是Christopher Haster,始於2017年2月20日。值得一提的是,LittleFS是ARM工程師折騰出來的文件系統,最先應該是運用在ARMmbed上的。
從時間上來說,LittleFS項目要晚於SPIFFS項目。我們再看看社區當前維護情況。
SPIFFS項目在2018年沒有任何提交,在2019年只有2個提交。分析提交修補程式的內容,我們發現對FS的運行流程有實質修改的最後一個提交是在2017年10月15日。換句話說,SPIFFS項目要不是已經足夠穩定到沒有任何bug,要不漸漸被遺棄。
相比與SPIFFS項目的落日餘暉,LittleFS更像冉冉升起的太陽。從2017年到文本撰稿時的2020年3月初,社區一直非常活躍,以2019年為例,共計合併了124個提交,釋放了10個版本。目前最新的版本是2.1.4,而據我與作者的溝通,其正在為2.2版本做Bug修復。
到目前為止,在GitHub的統計上,SPIFFS項目共計934個星,而LittleFS項目達到1.7K個星。
因此,SPIFFS在社區上已經不怎麼維護,而LittleFS依然活躍。持續迭代的軟體會更強大和更穩定。
靜態系統資源
對比靜態系統資源,我們主要比較編譯後的bin文件的text/data/bss段的大小。
text段:存放程式碼執行語句 data段:存放已初始化的全局變數和局部靜態變數 bss段:未初始化的全局變數和局部靜態變數
這3個段的數據都是在編譯時就已經確定下來的。如果某一個軟體程式碼量非常龐大,其對應的text段也會龐大,也就意味著在運行時,需要用更多的記憶體存放程式碼語句。
我設計了下面的Shell命令統計靜態資訊:
find -name "*.o" -exec size {} ; | awk ' BEGIN{ datasum = 0; textsum = 0; bsssum = 0; }; /data/{ getline; textsum += $1; datasum += $2; bsssum += $3; }; END{ printf "text %dndata %dnbss %dn", textsum, datasum, bsssum } '
統計結果如下:
FS | text | data | bss |
---|---|---|---|
littlefs | 24000 | 0 | 0 |
spiffs | 36940 | 0 | 0 |
可以發現,SPIFFS的程式碼量比LittleFS多53%,也就意味著SPIFFS需要更多的記憶體存放程式碼。
實測-環境
並不是所有的對比都可以直接從程式碼上看出來,我們需要上機實測。實測是為了獲取最真實的對比數據。
不講環境和配置,直接對比SPIFFS和LittleFS,簡直是在耍流氓。因此,我們先看看實測的環境。
測試時使用 0.3.7 版本的SPIFFS,其配置如下:
phys_size = 5013504B phys_addr = 0 phys_erase_block = 32K log_block_szie = 64K log_page_size = 256B
測試時使用 2.1.3 版本的LittleFS,其配置如下:
read_size = 256B prog_size = 256B block_szie = 32K or 4K cache_size = 256B lookahead_size = 16
在旺宏16M的SPI Nor上測試,SPI Nor運行在4線讀寫命令和100MHz的SPI時鐘頻率上。用於做測試的分區有4896KB。
確保RTOS上並無任何無關進程在搶CPU、IO資源。
換句話說,測試在使用相同的硬體環境,無其他進程干擾的情況下進行。
空間利用率
文件系統需要額外空間存放一些元數據,因此用戶可用的空間實際大小並不直接等於分區大小。在 4896KB 的分區上分別掛載SPIFFS和Littlefs兩個文件系統,他們的可用空間是多少呢?
空的文件系統體現不出來,我們試著往不同文件系統中存放一些資源文件,再觀察使用情況。
這些資源文件在ubuntu的ext4 (塊大小為4K)中統計有2794KB的大小。以此為標準,我們看看SPIFFS和LittleFS的空間使用情況
FS | used(KB) | total(KB) | note |
---|---|---|---|
SPIFFS | 2722 | 4607 | |
LittleFS | 3680 | 4896 | block size = 32K |
LittleFS | 2800 | 4896 | block size = 4K |
由於LittleFS的塊大小決定了文件存儲的最小單位,因此分別統計塊大小為4K和32K的空間使用情況。當塊越大,則越有可能會出現空間浪費的情況。例如32K的塊大小,即使文件內容只有1KB,LittleFS也會為其分配32K的空間,造成了31K的空間浪費。
從空間利用率來看,SPIFFS略優於LittleFS。
掉電安全和修復
文件系統的掉電安全指在任意一時刻掉電,文件系統依然能保證其一致性,文件系統允許丟失掉電時沒寫完整的數據,但不能奔潰。
我們通過讀寫掉電的方式驗證掉電安全,即在讀寫壓測時隨機時間掉電,再次上電後需要保證文件系統正常運行且已寫入的文件數據不丟失。
SPIFFS掉電後需要調用SPIFFS_check()
進行修復,否則無法保證文件系統一致性。這就類似於ext4與e2fsck的關係。
在實測中,4896KB的空間,SPIFFS的修復竟然要5~10s,相對於一次RTOS啟動總耗時2~3s而言,簡直無法忍受。在項目中已經放棄對其的掉電壓測。
與SPIFFS相反,LittleFS在設計時就保證了掉電安全的問題,因此不需要每次掉電後執行修復工作。
而2.1.3版本的LittleFS在10W次的掉電測試中,在數萬次掉電後小概率出現文件系統奔潰導致不能正確掛載的情況。分析良久,確認是LittleFS本身邏輯的問題。已回饋社區,預計在2.2版本解決。
總的來說,SPIFFS的掉電安全修復耗時不符合項目需求,而LittleFS目前還做不到絕對的掉電安全。比較幸運的是,LittleFS的掉電安全問題復現概率比較低,且LittleFS社區比較活躍,在發現問題後能及時提出解決方案。
讀寫性能
當空間使用率不同,測試的性能有可能不一樣,在SPIFFS中尤其明顯。
IO操作 | 空閑空間 | SPIFFS | LittleFS(32K Block) | LittleFS(4K Block) |
---|---|---|---|---|
讀 | 20% | 6095.24 KB/s | 8629.21 KB/s | 7529.41 KB/s |
讀 | 100% | 6564.10 KB/s | 8727.27 KB/s | 7314.29 KB/s |
寫 | 20% | 21.64 KB/s | 142.54 KB/s | 121.92 KB/s |
寫 | 100% | 128.49 KB/s | 155.37 KB/s | 127.87 KB/s |
在讀寫性能表現上,SPIFFS最差,且剩餘空間越少,SPIFFS寫性能越差。LittleFS的性能相對比較高和穩定,塊大小會直接影響到寫性能。
動態記憶體
動態記憶體指通過malloc
申請分配的堆記憶體大小。不管是SPIFFS還是LittleFS都是為小系統設計的,其記憶體使用情況都經過精心設計,記憶體佔用非常小。
LittleFS會為每個打開的文件單獨申請一個cache_size
的記憶體,在測試時,cache_size 為256B。為了對比的公平性,我們假設SPIFFS和LittleFS打開相同數量的文件情況下統計記憶體。
LittleFS | SPIFFS |
---|---|
3856 B | 3790 B |
兩者使用動態記憶體的情況相近,在最大打開數量的情況下,SPIFFS使用動態記憶體略少。
由於SPIFFS的記憶體使用並不會隨著打開文件增加而增加,也就意味著,在打開少量文件的情況下,LittleFS會比SPIFFS更少的動態記憶體使用量。
CPU佔用
在讀寫壓測時,統計進程使用的CPU資源百分比
LittleFS (32K) | LittleFS (4K) | SPIFFS |
---|---|---|
22~27 | 27~50 | 44~80 |
可以發現,在相同情況下,LittleFS的CPU佔用率會比SPIFFS少。
總結
本文從多個方面對比評估 LittleFS 和 SPIFFS,發現資源、性能、掉電安全和社區支援情況來說,後來者 LittleFS 已經青出於藍。