درحال بارگذاري...
جستجو
جستجو در این منبع
ترتيب بر اساس
آموزش شبکه‌ های عصبی ژرف فشرده و مقاوم در برابر خطاهای تهاجمی
2 مرتبه مشاهده شده

آموزش شبکه‌ های عصبی ژرف فشرده و مقاوم در برابر خطاهای تهاجمی

محسنی سنگتابی، سامان Mohseni Sangtabi, Saman

  1. شماره پایان نامه:56356
  2. کد دانشکده:19
  3. پديدآور: محسنی سنگتابی، سامان
  4. عنوان:آموزش شبکه‌ های عصبی ژرف فشرده و مقاوم در برابر خطاهای تهاجمی.
  5. نام دانشگاه/پژوهشگاه:صنعتی شریف
  6. سال اخذ مدرك:1402.
  7. نام دانشکده:مهندسی کامپیوتر
  8. مقطع:کارشناسی ارشد
  9. گرایش:معماری کامپیوتر
  10. توصیف ظاهری:99ص.: جدول، نمودار، کتابنامه؛ چکیده به فارسی و انگلیسی
  11. توصیفگر: شبکه های عصبی عمیق Deep Neural Networks
  12. توصیفگر: روش هرس کردن Pruning Method
  13. توصیفگر: کوانتش Quantization
  14. توصیفگر: حمله های متخاصم Adversarial Attacks
  15. توصیفگر: شبکه عصبی فشرده Compressed Neural Network
  16. توصیفگر: هرس کردن مدل های یادگیری ماشین Pruning Machine Learning Models
  17. استاد راهنما. سربازی آزاد، حمید

 فهرست محتوای دیجیتالی

 فهرست مطالب

  • مقدمه
    • تعریف مسئله
    • راهکارهای موجود
    • چالش‌های فشرده‌سازی
      • دقت در برابر حملات تخاصمی
      • بهره‌وری از پتانسیل حاصل از فشرده‌سازی
      • فراپارامترهای فشرده‌سازی
      • سربار زمانی فشرده‌سازی
    • اهداف پژوهش
      • افزایش دقت در برابر حملات تخاصمی
      • افزایش بهره‌وری از پتانسیل حاصل از فشرده‌سازی
      • کاهش فراپارامترهای فشرده‌سازی
      • کاهش سربار زمانی فشرده‌سازی
    • دست‌آوردها
    • ساختار پایان‌نامه
  • مفاهیم پایه
    • یادگیری نظارت شده
    • شبکه‌های عصبی
      • لایه‌های کاملا متصل
      • لایه‌های پیچشی
    • فشرده‌سازی شبکه‌های عصبی
      • هرس وزن‌ها
      • پله‌ای کردن مقدار وزن‌ها
    • شتاب‌دهنده‌های سخت‌افزاری شبکه‌های عصبی
      • موازی‌سازی محاسبات
      • بهبود سلسله مراتب حافظه
      • بهره‌وری از پله‌ای کردن
      • نکات مهم برای هم‌طراحی الگوریتم-سخت‌افزار
    • حملات تخاصمی
      • حملات تخاصمی به روش علامت مشتق سریع
      • حملات تخاصمی به روش گرادیان کاهشی نگاشت شده
  • کارهای پیشین
    • آموزش و فشرده‌سازی بدون توجه به دقت تخاصمی
    • آموزش با در نظر گرفتن دقت تخاصمی
    • آموزش و فشرده‌سازی با در نظر گرفتن دقت تخاصمی
  • سازوکار پیشنهادی
    • آموزش کشسان
    • ساختار کلی آموزش کشسان
    • آموزش با کشش به سمت هدف
    • تنظیم‌کننده‌ی پویا با شدت متغیر
    • هرس وزن‌ها
      • تعریف محدودیت‌های هرس
      • معیار سنجش اهمیت وزن‌ها
      • معیار سنجش اشتیاق وزن‌ها
      • اعمال محدودیت‌های هرس
      • اعمال محدودیت‌های هرس روی گرادیان
      • برداشت محدودیت‌های هرس
      • نرخ اعمال محدودیت‌های هرس
      • نرخ برداشت محدودیت‌های هرس
      • کنترل شدت تنظیم‌کننده‌ی پویا برای هرس
    • پله‌ای کردن وزن‌ها
      • تعریف محدودیت‌های پله‌ای کردن
      • معیار سنجش حساسیت وزن‌ها
      • معیار سنجش ناسازگاری وزن‌ها
      • اعمال محدودیت‌های پله‌ای کردن
      • اعمال محدودیت‌های پله‌ای کردن روی گرادیان
      • برداشت محدودیت‌های پله‌ای کردن
      • نرخ اعمال محدودیت‌های پله‌ای کردن
      • نرخ برداشت محدودیت‌های پله‌ای کردن
      • کنترل شدت تنظیم‌کننده‌ی پویا برای پله‌ای کردن
    • ترکیب هرس و پله‌ای کردن
    • آموزش تخاصمی کشسان
    • فشرده‌سازی با معیار آموزش تخاصمی
  • نتایج
    • پیاده‌سازی
    • آزمایش‌ها و شرایط انجام آن‌ها
    • نتایج مربوط به آموزش معمولی
      • نتایج مربوط به هرس تنها
      • نتایج مربوط به هرس و پله‌ای کردن همزمان
      • نتایج مربوط به هرس به همراه توازن بار کاری
      • مقایسه‌ی نتایج به صورت نمودار
    • نتایج مربوط به آموزش تخاصمی
    • نتایج تحلیل افزایش بهره‌وری در هرس به همراه توازن بار کاری
  • نتیجه‌گیری
    • خلاصه نتایج
    • کارهای آتی
  • مراجع
...ادامه

 فهرست نقدها