socket傳送二進制流的一些總結
第一次實質性的接觸socket通信方面的工作,所以遇到的問題還真不少,寫篇博客記錄一下,提升下記憶。
需求是通過私有協議進行二進制數據的傳輸,必須保證數據包不能被丟失,所以選擇tcp的socket進行通信。
1. 遇到的第一個問題是客戶端與服務端的socket通信沒有保持持續的連接狀態
這個是一個想當然的錯誤。想當然的以為TCP是有連接的通信,但是你如果長時間不通信,服務端一直保持著通信,這對服務器資源是一種極大的浪費。客戶端與服務端的連接是需要占用一定資源的,而服務端的資源是有限的。如果一直保持連接狀態,那麽你的服務器的性能肯定是有問題的。
解決這個問題的辦法是保活。服務端發送心跳包,客戶端接受到之後進行回應。客戶端告訴服務器,還在線,不要斷開連接。如果客戶端長時間沒有回應,服務器斷開與此客戶端的連接,減少資源占用。
2. 二進制文件的讀寫問題
第一次嘗試讀取二進制文件采取了分段讀取的方式。測試過程中發現一個很大的問題:文件讀取到部分就會中斷讀取。debug下,得出是讀取到了空字符(‘\0‘)。這個直接導致一次讀取到內容在發送前丟失,甚至有些情況下會有空字符,客戶端接受時會產生崩潰現象。
既然分段不行,就幹脆全部讀取,然後在分段發送。boost.asio庫支持對vector包裝發送,分段發送時,把一塊二進制流拷貝到vector中,然後整體發送。
3. 提高二進制流的傳輸效率
直接傳輸二進制流不是一個高效的行為,也不是一個安全的行為。直接發送一個二進制流很容易被截獲,從而導致信息泄露。
提高二進制流傳輸效率的辦法就是加密壓縮再發送。服務器加密壓縮,客戶端解密解壓縮。可采取兩種方式:
1)整體壓縮,分段發送
2)分段壓縮,分段發送
要求不是很高的話,采取方式一比較好。簡單粗暴。。
貼一些代碼,整體讀取二進制文件的:
先是C++的:
1 string fileName = "D:/XtAmpClient/XtAmpTradeClient_x64_3.0.1.14473.exe"; 2 ifstream ifs(fileName, ios_base::binary); 3 4 filebuf* pbuf = ifs.rdbuf();5 int size = pbuf->pubseekoff(0, ios_base::end, ios_base::in); 6 pbuf->pubseekpos(0, ios_base::in); 7 8 char* buf = new char[size]; 9 pbuf->sgetn(buf, size); 10 ifs.close(); 11 delete []buf;
最後是C的:
1 const char* fileName = "D:/XtAmpClient/XtAmpTradeClient_x64_3.0.1.14473.exe"; 2 FILE* fp = fopen(fileName, "rb"); 3 if (NULL == fp) 4 { 5 cout << "open file failed" << endl; 6 return ; 7 } 8 9 fseek(fp, 0, SEEK_END); 10 long size = ftell(fp); 11 rewind(fp); 12 13 char* buffer = (char*)malloc(sizeof(char) * size); 14 if (NULL == buffer) 15 { 16 cout << "malloc failed" << endl; 17 return ; 18 } 19 20 int ret = fread(buffer, 1, size, fp); 21 if (ret != size) 22 { 23 cout << "reading failed" << endl; 24 return ; 25 } 26 27 fclose(fp); 28 free(buffer);
性能上C比C++好一點點,但是C++的代碼明顯更簡潔。
socket傳送二進制流的一些總結