Best AI Utility logo
Best AI Utility
العودة إلى المشاريع المفتوحة

tiktoken

بواسطة openai

Fast BPE tokenizer for use with OpenAI's models.

النجوم
19,619
التفرعات
1,669
اللغة
Python
الفئة
Libraries & Tools

الحصول على الكود

# استنسخ المستودع
git clone https://github.com/openai/tiktoken
عرض على GitHub

الأسئلة الشائعة

ما هو tiktoken؟

Fast BPE tokenizer for use with OpenAI's models.

هل استخدام tiktoken آمن؟

tiktoken مشروع مفتوحة المصدر من openai على GitHub. راجع الكود المصدري والترخيص قبل استخدامه في الإنتاج.

كيف أبدأ مع tiktoken؟

git clone https://github.com/openai/tiktoken

بأي لغة كُتب tiktoken؟

openSource.faqWhatLanguageAnswer

مشاريع ذات صلة