Dynamic Programming and Reinforcement Learning (動態規劃和強化學習)

• Course objective: This course introduces dynamic decision-making under uncertainty, with an emphasis on dynamic programming and reinforcement learning. Drawing on applications in business and engineering, students will learn key theories and algorithms for solving multi-stage decision problems, both with and without explicit models of the environment. Assignments and a final project provide practical experience in problem formulation, algorithm evaluation, and Python-based implementation.

(Plz read it first) Business Analytics Laboratory (商業分析實驗室)

(Important) Please read this webpage first if you want to join my lab and schdule an interview.

(26/7/10) Another paper published in IJSS (Closed-loop EOQ)

(26/7/8) 115 學年度教育部校務發展獎補助計畫通過 (Industrial AI Teaching Platform)

(26/7/1) 國科會115 年度計畫通過 (NSTC project awarded)

中原隨筆 (My days at CYCU)

在台南住了20幾年，因為種種因素，來到中原大學任教。懷念台南的好天氣、上下班不太塞車、和美食。秉持共好的精神，紀錄我在中原的所見所聞。

• 商業分析實驗室 (Business Analytics Laboratory)
• 指引 (Guides)，論文報告 (Group meeting)
• 新課：Dynamic Programming and Reinforcement Learning (動態規劃和強化學習)，Nonlinear Optimization (非線性最佳化)

作業研究期末報告

優秀作品 (內容和投影片製作)

• 戴維萱、彭彥智、蔣咏錡、鍾定豊、黃郁潔，冷凍食品配送車輛路徑問題的最佳化模型(2026 春作業研究 (下)，學科競賽版本)
• 林昱綺、李昀諺、嚴振瑋、許耀倫、蕭瑋萱，結合蟻群演算法之物流配送路徑最佳化研究 (2026 春作業研究 (下)，學科競賽版本)
• 胡嘉豪、陳昱安、彭琬婷、呂仲皓，醫院護理人員排班最佳化之應用 (2026 春作業研究 (下)，學科競賽版本)

工業系作業研究學科競賽

主題 (開放題目) (二選一)

• 結合生產計畫與管制和作業研究兩門課求最佳解，包括工廠 (或公司) 內的排程、派工、設施規劃、廠內運輸、廠外運輸、供應鏈網路設計等相關問題 
• 以桃園巿為研究對象的相關最佳化問題

助教：蔡豐安 (Frank) (email: ann3866631 at Gmail)

所有的文件格式，以修課班級為主。

YouTube 人氣獎

• 影片上傳期限：5/21 ~ 5/28 (6 pm)

Nonlinear Optimization (非線性最佳化)

• Course objective: Nonlinear optimization is widely used in engineering, business, data science, and machine learning. We will introduce fundamental algorithms through examples in this course, enabling students to read research articles, formulate their own problems, and solve them efficiently using the appropriate algorithms.

(教書有感) 態度與方法

以前念博班的時候，指導教授雖然有提供獎學金，但採取的是自由開放方式。而且，他一次只思考一件事情，所以要爭取和老師見面的機會不多。到了寒暑假，教授回家鄉，進入釣魚和思考的時間， 也不可能連絡到他。學期中，有時候研究卡關了， 一點進度也沒有，也要硬著頭皮硬擠出些東西出來， 主動和老師約時間討論。見面的時候，也大多由我講，老師負責聽和給方向。和老師討論時，有時候，老師在黑板上，隨手畫了個方程式，或是在一張紙上寫了5個字，我也是小心翼翼地抄下來、或者把那張紙拿回家，好好思考。 我至今還保留那些真跡。 

作業研究競賽題目

Please cite this webpage if you use the material/method in this blog. Thank you. (如果您使用本部落格中的資料/方法，請註明此來源網頁。謝謝。)

• Some papers/information for idea generation or implementation

資料科學相關研究所和職涯準備

基礎知識：工業系必修課程 

• 資料科學：領域知識 (智慧製造，量化投資，行銷等等)，數學，資訊科技 
• 如果不會寫 for loop 和 function：自學 Python (每一講有作業)
• 很棒的免費課程：CS50's Introduction to Programming with Python (Malan at Harvard), Mathematics for Machine Learning and Data Science (at Coursera)
• 發展和待遇：機器學習，AI 工程師，最佳化演算法，optimization，量化交易 (方法)，智慧製造演算法，作業研究 (台達電，薪水，奇點無限 )，資料科學家
• 謝謝庭煜

上：

• 核心：IE623G 機器學習，IC258D 資料結構 (查怡老師)，CS361L 資料庫系統 
• 庭煜跟我念 4 + 1，修資料結構，拿到全班第一名，系上還提供一萬元的獎金。大四也有修資料庫系統，和此文章中許多難的課程，加上努力，所以研究做得好。據我所知，只有他聽進去我的建議。
• 數學：MA305G 離散數學，MA202 高等微積分(一)，MA306G 數值分析
• 資訊科技：IE440G 系統模擬 (包含數學和領域知識)，IE250D 網路原理與應用，IE302G 製造聯網整合技術
• 領域知識
• 作業管理 (含智慧製造)：IE238G 電腦輔助設計與製造等等
• 量化交易：FA319 財務管理(一)，FA295E 金融市場，FA082G 投資學等等
• 行銷：BA245 行銷管理學，BA336 網路行銷，IU209G 消費者行為 (和 IT911D 二選一) 等等

下：

• 核心：IE326G 人工智慧導論，IE371G 實驗設計，EL602L 計算機演算法
• 數學：MA202 高等微積分(二)，MA203 微分方程(一)
• 資訊科技：MA405M 圖論演算法，IE582G 視覺系統
• 領域知識
• 作業管理 (含智慧製造)：IE431G 電腦整合製造，IE527G 物聯網與大數據於智慧製造應用 等等
• 量化交易：FA320 財務管理 (二)，FA011 金融科技，FA323 區塊鏈與加密貨幣，FA447 期貨與選擇權等等
• 行銷：IT911D 消費者行為等等

中原大學 x 台積電半導體智慧製造學程。

預備研究生 (4 + 1) 

• 獎學金和支援
• 節省一年時間。
• 學校：
• 歷年平均成績系排名在前 30% 者，發給獎學金貳萬元整。獎學金於學生就讀碩士班一年級依學期分 2 次發给。
• 全人榮譽獎，全人標竿獎。
• 系上：
• 歷年平均成績系排名在前 20% 者，發給獎學金十萬元整。
• 參與國外國際研討會與競賽之報名費、交通費、住宿費與生活費，至多兩萬元。
• 商業分析實驗室 (Business Analytics Laboratory)：論文。
• 人少，老師 (每週) 單獨討論。學生的光，老師看得見。
• 根據經驗，班排不是一個絕對的指標。重點在於想要 (投入時間) 改變自己。
• 可詢問庭煜，準時畢業且有良好的研究成果。建議從三下開始；庭煜從三下準備校外機器學習競賽、暑假實習和我做研究。
• Guides for students in Business Analytics Laboratory (實驗室學生指引)：修課。
• Nice quality to have: Enjoy learning and coding (or willing to), think independently, willing to share and help
• 表現優良，老師將提供研究助理費。

資訊

• 同學的問題：我們 (工業系) 從事軟體開發和資工系的差別？
• 我：如果想要從事軟體開發的 (高薪) 工作，量化學科的基礎 (例如機統、作業研究)、流程和系統的思維 (例如生產計劃與管制、品質管制、人因工程)、和商管的知識背景 (例如經濟學、會計)，是工業系的優勢。只要加上軟體系統開發需要的課程，例如資料結構、資料庫、(資管) 系統分析與設計 (開放式課程)、演算法、物件導向分析與設計、作業系統、離散數學等等，就可如虎添翼。工業系畢業學長姐，目前 (2023) 擔任純網銀的董事長和台北市資訊局副局長，就是最好的例證。
• 舉例說明工業系的優勢：線上購物定價的需求函數和最佳化，資訊系統的人機介面 (可以利用機統、實驗設計、機器學習做進階分析)，熱門售票活動中的 (軟體系統) 瓶頸等等。
• 曾子軒，旺宏吳敏求：AI 時代與其學程式，懂應用數學才是業界最想要人才，遠見，2023-11-10
• 一方面感念母校栽培，一方面從個人經驗中認知到統計學，甚至是人工智慧的重要，吳敏求因此效法黑石集團 (Blackstone Group) 創辦人蘇世民 (Stephen Schwarzman) 捐贈麻省理工學院蘇世民運算學院 (MIT Schwarzman College of Computing，簡稱 MIT 運算學院) 的作法，捐贈成大設置敏求智慧運算學院。
• 數學邏輯和程式語言的邏輯是相通的。
• Brian Christian and Tom Griffiths, Algorithms to Live By: The Computer Science of Human Decisions, William Collins, 2017. 甘錫安譯，決斷的演算：預測、分析與好決定的 11 堂邏輯課，行路，2017

工業工程總結實踐

建議

作業與資訊 (Homework and Information)

作業研究和機器學習

課程

• 作業研究 (上): 3.8 迴歸，11.2 迴歸，12.3.1 類神經
• Google Scholar: generative ai optimization
• 作業研究 (下): 2 Robust Optimization (穩健最佳化)，3 適應穩健最佳化，5 資料驅動的報童模型
• Applications in generative AI: diffusion probabilistic models 
• Dmytro Kuzmenko, Denoising diffusion probabilistic models
• Lilian Weng, What are Diffusion Models?
• Dimitris Bertsimas and Georgios Margaritis, Robust and Adaptive Optimization under a Large Language Model Lens, arXiv:2501.00568.
• 最佳化和機器學習：

  機器學習和作業研究的奇妙結合

專題和論文的製作與報告 (tips for the final project and your thesis)

• (at the bottom) Avoid common phenomena, final written report (for your ppt content)
• (大學生) 重要任務

• 人生困境：

• 計算機程式補考後的人生 (1/2) 

• 我的方法：運動，音樂 (馬友友)，閱讀 (哲學，堅忍的挑戰，老莊)

• Tal Ben-Shahar, Happier: Learn the Secrets to Daily Joy and Lasting Fulfillment, McGraw Hill, 2007. (譚家瑜譯，更快樂：哈佛最受歡迎的一堂課，天下雜誌，2012)

如何選填大學志願

緣起：朋友念南一中理組的兒子要念大學，詢問我的意見，所以才準備了此檔案的大綱 (電子檔)。

聽到我描述 (相關) 電子產品中需要的機構設計和熱流問題，覺得挺有趣的。後來，他選擇了成大機械系。念完 6 年和尚學校的他，聯誼變成一個非常重要的考量因素。

什麼是『大學生』

(25/6/30) 今晚，真的是開眼界。讓我體驗到人生的另一個高點。

睡不著，想一下今晚和研究生討論的方法，第 16 章 Sampling Plans 的確是我們需要的。他是『大學生』。

(25/7/1) 2:30 am 還沒睡意，來寫部落格。

「工業系 許某教授」和同學的「道歉」

Dcard: 6 月 27 日 14:25

奉勸各位工業系學弟妹 遠離許某教授（相信大家已經知道是誰了） 

成績不公開 課也不上叫大家看影片 (1)

影片的音質我還以為在聽什麼考古檔案  

更扯的是 有時候影片還沒拍到 自己花10分鐘在台上講不知道什麼鬼 就要大家寫心得出來 請問學生會通靈是不是 

能退選就退選 能停修就停修 免得影響那些想出國 推甄的好學生 

自己爛就算了 還要拖別人下水 什麼心態啊  

由衷希望系上可以把他調走 好不容易新進那麼多老師了

Think Like an Amateur, Do As an Expert

作者：金出武雄，譯者：鄭舜瓏，像外行一樣思考，像專家一樣實踐：成功解決問題的高階技術，遠流

Jitendra S. Mudhol, Think Like an Amateur, Do As an Expert: Lessons from a Career in Computer Vision, CollaMeta, May 17, 2019. (video)

到高中介紹作業研究 (和適性教育、選填大學志願)

臺北市立陽明高級中學，作業研究，2023/11/30。適性教育、AI 和作業研究，2024/2/22。 (簽到和提問)

學生問題之回答

Some information and papers related to the seminar

(4/9/2025) 許志華 (The original speaker needs to take care of emergency affairs.)

• Dimitris Bertsimas and Michael Lingzhi Li, Scalable holistic linear regression, Operations Research Letters, Volume 48, Issue 3, May 2020, Pages 203-208.
• We could not reproduce their results in the paper, so I asked Prof. Li for his code. He told me he finished the paper as a course project (MIT style?!😂), and the codes were stored on another obsolete hard drive. 
  

電路和電子學的產業知識

工業與系統工程學系隸屬於電機資訊學院，所以系上同學們都要修習電路學和電子學相關的課程。在電機系，這些是非常重要的基礎知識；而且，從 IC 設計、晶圓代工、到封裝測試，台灣有許多世界級的領導廠商，所以，值得同學們好好地學習相關的知識。更多資訊。

TaiwanPlus Docs, Inside Micron Taiwan’s Semiconductor Factory (美國美光科技在台灣的工廠，稱為外國直接投資 (Foreign direct investment, FDI))

以下介紹一些科普和整體產業的書籍和影片，希望可以增加同學們的學習動機，並且增加職涯發展的機會：

大學與創業精神

 沈榮欽 【微知識：大學與創業精神】

就大學部而言，過去十年美國加州大學柏克萊分校產生的創業家（至少獲得一輪創投）數目第一，一年畢業八千多人，過去十年就產生了1,811 位創業者，平均每年約 2.6% 的大學畢業生成為創業者。