⚙️ مدل‌های Machine Learning دقیقاً چطور «یاد می‌گیرند»؟ جوابش تا حد زیادی در بهینه‌سازی است!
بعد از جبر خطی و احتمال، در این قسمت از یکشنبه‌های Data Elites می‌ریم سراغ ضلع سوم ریاضیات Data و AI:
Optimization | بهینه‌سازی
از Gradient Descent و Regularization گرفته تا آموزش شبکه‌های عصبی، تقریباً پشت هر مدل یادگیری یک مسئله بهینه‌سازی وجود دارد.
برای این هفته چهار منبع فارسی و انگلیسی انتخاب کردیم؛ از پایه نظری تا Optimization for Machine Learning.🚀
مسیر نظری فارسی
بهینه‌سازی خطی — دکتر مجید سلیمانی دامنه | دانشگاه تهران
برای ساختن پایه ریاضی Optimization؛ مناسب برای یادگیری مدل‌سازی، ساختار مسائل بهینه‌سازی خطی و منطق ریاضی پشت روش‌های حل.
🔗 ویدئوها:
[لینک دوره]
مسیر کاربردی فارسی
Optimization در دوره Machine Learning — دکتر علی شریفی زارچی
برای بخش Optimization در ML:
Gradient Descent
Adam
Newton Algorithm
Regularization
Lasso & Ridge
اگر می‌خواهید ببینید بهینه‌سازی واقعاً کجای Machine Learning وارد می‌شود، این بخش از دوره انتخاب خیلی خوبی است؛ از Gradient Descent تا Newton، Adam و Regularization
🔗 ویدئوها:
[لینک دوره]
مسیر نظری انگلیسی — 2025
EE5606: Convex Optimization — IIT Hyderabad
یک دوره دانشگاهی برای یادگیری جدی Convex Sets & Functions، Unconstrained/Constrained Optimization، Lagrange Multipliers و KKT؛ همراه با Python، CVXPY و تمرین‌های برنامه‌نویسی.
🔗
https://people.iith.ac.in/shashankvatedka/html/courses/2025/EE5606/course_details.html
مسیر کاربردی انگلیسی — 2025
CS769: Optimization in Machine Learning — IIT Bombay
اینجا Optimization مستقیماً وارد Machine Learning می‌شود:
🔹 Gradient & Proximal Methods
🔹 Accelerated Optimization
🔹 Newton & Quasi-Newton
🔹 Duality
🔹 Discrete & Submodular Optimization
🔹 Feature Selection
🔹 Data Subset Selection
🔹 Model Compression
🔗 دوره و منابع:
https://www.cse.iitb.ac.in/~ganesh/cs769/
🔗 ویدئوهای دوره:
https://www.youtube.com/playlist?list=PLyo3HAXSZD3y-tdFpfw8CZcIG-rJ6ckn9
💡 مسیر پیشنهادی DE:
دکتر سلیمانی دامنه → ساختن پایه Optimization
⬇️
EE5606 → یادگیری عمیق‌تر Convex Optimization
⬇️
دکتر شریفی زارچی → دیدن Optimization در قلب ML
⬇️
CS769 → ورود جدی به Optimization for Machine Learning
🚨 مدل بدون Optimization فقط یک ساختار ریاضی است؛ بهینه‌سازی همان چیزی است که به مدل یاد می‌دهد پارامترهایش را چگونه پیدا کند.
📚 یکشنبه‌های Data Elites؛ از ریاضیات پشت مدل‌ها تا کاربرد واقعی آن‌ها 🚀g