Count the Tokens چالش 1 از جلسهی 39، آسان
یک توکنساز خیلی ساده: هر کلمه یک توکن، و هر کلمهی بلندتر از ۶ حرف دو توکن. تابع count_tokens(text) را کامل کن. خروجی برای دو جمله: 5 و 8.
def count_tokens(text):
total = 0
for word in text.split():
# 1 token, or 2 if len(word) > 6
pass
return total
print(count_tokens("the cat sat on mat"))
print(count_tokens("unbelievable discoveries happen everywhere today"))
راهنما و جواب این چالش · برگشت به درس جلسهی 39: مدلهای بزرگ: پشت صحنه · چالش بعدی: Build a System Prompt
بیشتر بخوان: تابع در پایتون: آموزش def، پارامتر و return با مثال