دانلود Fairseq برای لینوکس

این برنامه لینوکس به نام Fairseq است که آخرین نسخه آن را می توانید با عنوان v0.10.2.zip دانلود کنید. می توان آن را به صورت آنلاین در ارائه دهنده میزبانی رایگان OnWorks برای ایستگاه های کاری اجرا کرد.

عکس ها

Fairseq

شرح

Fairseq(-py) یک ابزار مدل‌سازی توالی است که به محققان و توسعه‌دهندگان اجازه می‌دهد تا مدل‌های سفارشی را برای ترجمه، خلاصه‌سازی، مدل‌سازی زبان و سایر وظایف تولید متن آموزش دهند. ما پیاده سازی های مرجع مقالات مدل سازی توالی مختلف را ارائه می دهیم. کار اخیر مایکروسافت و گوگل نشان داده است که آموزش موازی داده‌ها را می‌توان با تقسیم پارامترهای مدل و وضعیت بهینه‌ساز در بین کارگران موازی داده، کارآمدتر کرد. این ایده ها در پوشش جدید FullyShardedDataParallel (FSDP) ارائه شده توسط fairscale گنجانده شده است. Fairseq را می توان از طریق افزونه های ارائه شده توسط کاربر گسترش داد. مدل‌ها معماری شبکه عصبی را تعریف می‌کنند و تمام پارامترهای قابل یادگیری را محصور می‌کنند. معیارها تابع ضرر را با توجه به خروجی ها و اهداف مدل محاسبه می کنند. Tasks لغت نامه ها را ذخیره می کند و کمک هایی برای بارگذاری/تکرار روی مجموعه داده ها، مقداردهی اولیه مدل/معیار و محاسبه ضرر ارائه می دهد.

امکانات

• آموزش چند GPU روی یک ماشین یا در چندین ماشین (داده و مدل موازی)
• تولید سریع در هر دو CPU و GPU با الگوریتم های جستجوی متعدد پیاده سازی شده
• انباشت گرادیان امکان آموزش با مینی بچ های بزرگ را حتی روی یک GPU می دهد
• آموزش با دقت ترکیبی (سریع تر با حافظه GPU کمتر در هسته های تانسور NVIDIA آموزش می بیند)
• مدل‌ها، معیارها، وظایف، بهینه‌سازها و زمان‌بندی‌های نرخ یادگیری را به راحتی ثبت کنید
• پیکربندی انعطاف پذیر بر اساس Hydra که ترکیبی از کد، خط فرمان و پیکربندی مبتنی بر فایل را امکان پذیر می کند.

زبان برنامه نویسی

پــایتــون

دسته بندی ها

این برنامه ای است که می توان آن را از https://sourceforge.net/projects/fairseq.mirror/ نیز دریافت کرد. در OnWorks میزبانی شده است تا به آسانی از یکی از سیستم عامل های رایگان ما به صورت آنلاین اجرا شود.