D. Sculley, Gary Holt, Daniel Golovin, Eugene Davydov, Todd Phillips, Dietmar Ebner, Vinay Chaudhary, Michael Young, Jean-Franc¸ois Crespo, Dan Dennison, Hidden Technical Debt in Machine Learning Systems, Proceedings of the 28th International Conference on Neural Information Processing Systems, 2015, Pages 2503-2511.
由上圖所示,機器學習程式 (ML code) 只佔機器學習系統中的一小部分。作者們使用軟體工程技術債務 (Technical Debt) 的概念,說明潛在大量的持續維護成本 (massive ongoing maintenance costs) 和解方,例如資料變化導致模型的錯誤等等。
潛在的挑戰和痛點也帶來新的機會,有不少企業便是針對其中的一部分提供相關的解方,也適合正在開發系統者一讀,以窺全貌。