الصفحة الرئيسية > Term: tokenizer
tokenizer
A text segmentation program that scans text and determines if and when a series of characters can be recognized as a token.
- قسم من أقسام الكلام: noun
- المجال / النطاق: البرامج
- الفئة: خدمة برمجيات العولمة
- Company: IBM
0
المنشئ
- Peteh
- 100% positive feedback