این یک برنامه لینوکس به نام minGPT است که آخرین نسخه آن را میتوانید با نام minGPTsourcecode.tar.gz دانلود کنید. این برنامه را میتوان به صورت آنلاین در ارائه دهنده خدمات میزبانی وب رایگان OnWorks برای ایستگاههای کاری اجرا کرد.
این برنامه با نام minGPT with OnWorks را به صورت رایگان دانلود و اجرا کنید.
برای اجرای این برنامه این دستورالعمل ها را دنبال کنید:
- 1. این برنامه را در رایانه شخصی خود دانلود کنید.
- 2. در فایل منیجر ما https://www.onworks.net/myfiles.php?username=XXXXX نام کاربری مورد نظر خود را وارد کنید.
- 3. این برنامه را در چنین فایل منیجر آپلود کنید.
- 4. OnWorks Linux آنلاین یا شبیه ساز آنلاین ویندوز یا شبیه ساز آنلاین MACOS را از این وب سایت راه اندازی کنید.
- 5. از سیستم عامل لینوکس OnWorks که به تازگی راه اندازی کرده اید، به مدیر فایل ما https://www.onworks.net/myfiles.php?username=XXXXX با نام کاربری که می خواهید بروید.
- 6. اپلیکیشن را دانلود کرده، نصب و اجرا کنید.
عکس ها
Ad
حداقل GPT
شرح
minGPT یک پیادهسازی مجدد آموزشی و مینیمالیستی از معماری GPT (ترانسفورماتور مولد از پیش آموزشدیده) است که در PyTorch ساخته شده و توسط Andrej Karpathy طراحی شده است تا ساختار اصلی یک مدل زبانی مبتنی بر ترانسفورماتور را در کمترین تعداد خط کد ممکن آشکار کند. این مدل، جزئیات اضافی را حذف میکند و هدف آن نشان دادن چگونگی تغذیه توالی شاخصهای توکن به مجموعهای از بلوکهای ترانسفورماتور و سپس رمزگشایی آنها به احتمالات توکن بعدی است، که هم از آموزش و هم از استنتاج پشتیبانی میکند. از آنجا که کل مدل حدود ۳۰۰ خط کد است، کاربران میتوانند هر مرحله - از جستجوی جاسازی، کدگذاریهای موقعیتی، توجه چند سر، لایههای پیشخور تا سرهای خروجی - را دنبال کنند و بنابراین نحوه عملکرد مدلهای سبک GPT را در زیر سطح مشخص کنند. این مدل یک محیط آزمایشی عملی برای آزمایش فراهم میکند و به زبانآموزان اجازه میدهد معماری، مجموعه دادهها یا حلقه آموزش را بدون غرق شدن در انتزاع چارچوب، تغییر دهند.
امکانات
- پیادهسازی فشرده PyTorch از یک ترانسفورماتور به سبک GPT (حدود ۳۰۰ LOC)
- روالهای آموزشی و استنتاج گنجانده شده است تا بتوانید یک مدل بسازید و از آن نمونهبرداری کنید
- معماری واضح: جاسازی، کدگذاری موقعیتی، توجه چند سر، لایههای پیشخور
- اصلاح، گسترش یا ریفکتور آسان برای آزمایش
- کد شفاف برای استفاده آموزشی به جای مقیاس تولید در نظر گرفته شده است
- از مجموعه دادههای اسباببازی و وظایف اثبات مفهوم برای درک مدلسازی توالی پشتیبانی میکند.
زبان برنامه نویسی
پــایتــون
دسته بندی ها
این برنامهای است که میتوان آن را از https://sourceforge.net/projects/mingpt.mirror/ نیز دریافت کرد. این برنامه در OnWorks میزبانی شده است تا بتوان آن را به سادهترین روش به صورت آنلاین از یکی از سیستمهای عامل رایگان ما اجرا کرد.
