هذا تطبيق ويندوز يُدعى Tiktoken، ويمكن تنزيل أحدث إصدار منه برقم 0.11.0sourcecode.tar.gz. ويمكن تشغيله عبر الإنترنت من خلال موفر الاستضافة المجاني OnWorks لمحطات العمل.
قم بتنزيل وتشغيل هذا التطبيق المسمى Tiktoken عبر الإنترنت باستخدام OnWorks مجانًا.
اتبع هذه التعليمات لتشغيل هذا التطبيق:
- 1. قم بتنزيل هذا التطبيق على جهاز الكمبيوتر الخاص بك.
- 2. أدخل في مدير الملفات الخاص بنا https://www.onworks.net/myfiles.php؟username=XXXXX باسم المستخدم الذي تريده.
- 3. تحميل هذا التطبيق في هذا الملف.
- 4. ابدأ تشغيل أي محاكي لنظام التشغيل OnWorks عبر الإنترنت من موقع الويب هذا ، ولكن أفضل محاكي Windows عبر الإنترنت.
- 5. من نظام التشغيل OnWorks Windows الذي بدأته للتو ، انتقل إلى مدير الملفات الخاص بنا https://www.onworks.net/myfiles.php؟username=XXXXX مع اسم المستخدم الذي تريده.
- 6. قم بتنزيل التطبيق وتثبيته.
- 7. قم بتنزيل Wine من مستودعات برامج توزيعات Linux الخاصة بك. بمجرد التثبيت ، يمكنك النقر نقرًا مزدوجًا فوق التطبيق لتشغيله باستخدام Wine. يمكنك أيضًا تجربة PlayOnLinux ، وهي واجهة رائعة على Wine والتي ستساعدك على تثبيت برامج وألعاب Windows الشائعة.
يعد Wine طريقة لتشغيل برامج Windows على نظام Linux ، ولكن بدون الحاجة إلى Windows. Wine عبارة عن طبقة توافق Windows مفتوحة المصدر يمكنها تشغيل برامج Windows مباشرة على أي سطح مكتب Linux. بشكل أساسي ، يحاول Wine إعادة تنفيذ ما يكفي من Windows من البداية حتى يتمكن من تشغيل جميع تطبيقات Windows دون الحاجة إلى Windows بالفعل.
لقطات الشاشة:
تيك توك
الوصف:
tiktoken هي مكتبة ترميز عالية الأداء (تعتمد على ترميز أزواج البايتات، BPE) مصممة للاستخدام مع نماذج OpenAI. تتولى هذه المكتبة ترميز وفك ترميز النصوص إلى معرفات الرموز بكفاءة، مع الحد الأدنى من التكاليف الإضافية. ولأن الترميز خطوة أساسية في إعداد النصوص للنماذج، فقد تم تحسين tiktoken من حيث السرعة والذاكرة والدقة في سياقات النماذج (مثل مطابقة الترميز الداخلي لـ OpenAI). يدعم المستودع ترميزات متعددة (مثل "cl100k_base") ويتيح للمستخدمين تبديل أسماء الترميز لمطابقة سياقات النماذج المختلفة. كما يوفر آليات توسعة لتسجيل ترميزات مخصصة. داخليًا، تتضمن منطق الترميز الأساسي (غالبًا ما يتم تنفيذه في Rust أو كود فعال منخفض المستوى)، وواجهات برمجة تطبيقات للترميز وفك الترميز وحساب الرموز، وربط الطبقات بلغة Python (وأحيانًا بلغات أخرى) لسهولة الاستخدام.
شرح المميزات:
- مُجزئ سريع قائم على BPE لتحويل النص إلى معرف الرمز
- دعم مخططات الترميز المتعددة (على سبيل المثال "cl100k_base")
- واجهات برمجة التطبيقات لتشفير وفك تشفير وحساب الرموز بكفاءة للتحكم الفوري في الطول
- آلية التمديد/المكون الإضافي لتسجيل الترميزات المخصصة
- ربطات اللغة (Python / Rust / إلخ) للتكامل في بيئات مختلفة
- تُستخدم لتقدير التكلفة ومنطق التقليص والتوافق مع توقعات نموذج OpenAI
لغة البرمجة
Python
التصنيفات
هذا تطبيق يُمكن تنزيله أيضًا من https://sourceforge.net/projects/tiktoken.mirror/. وقد استُضيف في OnWorks لتشغيله عبر الإنترنت بسهولة من أحد أنظمتنا التشغيلية المجانية.