Best AI Utility logo
Best AI Utility
ओपन सोर्स पर वापस

tiktoken

द्वारा openai

Fast BPE tokenizer for use with OpenAI's models.

स्टार
19,619
फोर्क
1,669
भाषा
Python
श्रेणी
Libraries & Tools

कोड प्राप्त करें

# रिपॉजिटरी क्लोन करें
git clone https://github.com/openai/tiktoken
GitHub पर देखें

अक्सर पूछे जाने वाले प्रश्न

tiktoken क्या है?

Fast BPE tokenizer for use with OpenAI's models.

क्या tiktoken का उपयोग सुरक्षित है?

tiktoken GitHub पर openai का ओपन-सोर्स प्रोजेक्ट है। प्रोडक्शन में उपयोग से पहले सोर्स कोड और लाइसेंस देखें।

tiktoken के साथ कैसे शुरू करें?

git clone https://github.com/openai/tiktoken

tiktoken किस भाषा में लिखा गया है?

openSource.faqWhatLanguageAnswer

संबंधित प्रोजेक्ट्स