經驗之談:優化演算法兩句話精煉總結
之前,我的部落格中寫了幾種經典的優化演算法和機器學習領域的方法:
學習完畢這麼多優化演算法後,我們可以發現它們的思路無外乎兩個:
Exploration,群優化,全域性搜尋,避免陷入區域性最優。
Exploitation,區域性的精細化搜尋。
或者是以上兩種方法的融合使用:哪個階段用哪一個方法。
除了直接使用別人的方法,如果我們也想自己設計一個優化演算法,那麼就可以按照上面的兩種思路來做。
同時,看別人的演算法時,也要從以上兩個角度來思考,對方為什麼這麼做,我們可以如何改進。在寫論文、做研究時,也要多加思考,儘量避免拿來主義、囫圇吞棗!