【C/C++】檔案讀取與資料庫讀取速率對比
由於開發物流資訊網,關於這個問題也是最近才想到的,就是到底讀檔案更快還是讀資料庫更快,能快多少,書生也搜尋過,沒見有網友就這個問題答覆過,也可能是太簡單的緣故,我們本文還是來實測一下,由於時間關係,VC還沒裝,書生先用PHP測試了一下,下次有時間在C/C++上補充測試到本文來,因為PHP的底層解析應該也是基於C的,所以估計兩者環境測試結果差不多,小問題大收穫,現在就來看一下測試過程及結果。
測試程式如下:
//說明1:由於讀資料庫語句呼叫簡單的封包函式兩次,所以把讀檔案也改成連續呼叫兩次,資料庫記錄ID為1就在第一條,並且唯一索引。
//說明2:測試兩次一次是4K資料,一次是整形資料
set_time_limit(0); { $content = file_get_contents($filename); return $content; } function fnGetContent($filename) { $content = fnGet($filename); return $content; } $times=100000; echo '資料庫查詢結果:<br/>'; //--------------------------------- $begin=fnGetMicroTime(); for($i=0;$i<$times;$i++) { $res=$dbcon->mydb_query("SELECT log_Content FROM blog WHERE log_ID='1'"); $row=$dbcon->mydb_fetch_row($res); $content=$row[0]; } echo 'fetch_row '.$times.' 次時間:<font color=red>'.(fnGetMicroTime()-$begin).'</font>秒<br/>'; //--------------------------------- $begin=fnGetMicroTime(); for($i=0;$i<$times;$i++) { $res=$dbcon->mydb_query("SELECT log_Content FROM blog WHERE log_ID='1'"); $row=$dbcon->mydb_fetch_array($res); $content=$row['log_Content']; } echo 'fetch_array '.$times.' 次時間:<font color=red>'.(fnGetMicroTime()-$begin).'</font>秒<br/>'; //--------------------------------- $begin=fnGetMicroTime(); for($i=0;$i<$times;$i++) { $res=$dbcon->mydb_query("SELECT log_Content FROM blog WHERE log_ID='1'"); $row=$dbcon->mydb_fetch_object($res); $content=$row->log_Content; } echo 'fetch_object '.$times.' 次時間:<font color=red>'.(fnGetMicroTime()-$begin).'</font>秒<br/>'; //--------------------------------- $dbcon->mydb_free_results(); $dbcon->mydb_disconnect(); fnWriteCache('test.txt',$content); echo '直接讀檔案測試結果:<br/>'; //--------------------------------- $begin=fnGetMicroTime(); for($i=0;$i<$times;$i++) { $content = fnGetContent('test.txt'); } echo 'file_get_contents直接讀'.$times.'次時間:<font color=red>'.(fnGetMicroTime()-$begin).'</font>秒<br/>'; //--------------------------------- $begin=fnGetMicroTime(); for($i=0;$i<$times;$i++) { $fname = 'test.txt'; if(file_exists($fname)) { $fp=fopen($fname,"r");//flock($fp,LOCK_EX); $file_data=fread($fp, filesize($fname));//rewind($fp); fclose($fp); } $content = fnGetContent('test.txt'); } echo 'fopen直接讀'.$times.'次時間:<font color=red>'.(fnGetMicroTime()-$begin).'</font>秒<br/>'; |
4K大小資料的查詢結果: fetch_row 100000 次時間:16.737720012665秒 fetch_array 100000 次時間:16.661195993423秒 fetch_object 100000 次時間:16.775065898895秒 直接讀檔案測試結果: file_get_contents直接讀100000次時間:5.4631857872009秒 fopen直接讀100000次時間:11.463611125946秒 |
整形ID查詢結果: fetch_row 100000 次時間:12.812072038651秒 fetch_array 100000 次時間:12.667390108109秒 fetch_object 100000 次時間:12.988099098206 直接讀檔案測試結果: file_get_contents直接讀100000次時間:5.6616430282593秒 fopen直接讀100000次時間:11.542816877365秒 |
測試結論:
1、直接讀檔案相比資料庫查詢效率更勝一籌,而且文中還沒算上連線和斷開的時間。
2、一次讀取的內容越大,直接讀檔案的優勢會越明顯(讀檔案時間都是小幅增長,這跟檔案儲存的連續性和簇大小等有關係),這個結果恰恰跟書生預料的相反,說明MYSQL對更大檔案讀取可能又附加了某些操作(兩次時間增長了近30%),如果只是單純的賦值轉換應該是差異偏小才對。
3、寫檔案和INSERT幾乎不用測試就可以推測出,資料庫效率只會更差。
4、很小的配置檔案如果不需要使用到資料庫特性,更加適合放到獨立檔案裡存取,無需單獨建立資料表或記錄,很大的檔案比如圖片、音樂等採用檔案儲存更為方便,只把路徑或縮圖等索引資訊放到資料庫裡更合理一些。
5、PHP上如果只是讀檔案,file_get_contents比fopen、fclose更有效率,不包括判斷存在這個函式時間會少3秒左右。
6、fetch_row和fetch_object應該是從fetch_array轉換而來的,書生沒看過PHP的原始碼,單從執行上就可以說明fetch_array效率更高,這跟網上的說法似乎相反。
實際上在做這個試驗之前,從個人經驗判斷就有了大概的結果,測試完成後則有種豁然開朗的感覺。假定在程式效率和關鍵過程相當且不計入快取等措施的條件下,讀寫任何型別的資料都沒有直接操作檔案來的快,不論MSYQL過程如何,最後都要到磁碟上去讀這個“檔案”(記錄儲存區等效),所以當然這一切的前提是隻讀內容,無關任何排序或查詢操作。
轉貼自 http://www.zjhblog.com/post/118.html