مثال تابع (هوش مصنوعی با پایتون): def chunk_words(text, size):
مثال 3 از درس جلسهی 71 آموزش هوش مصنوعی برای نوجوانان با پایتون: RAG کوچک (۱): تکهی درست را پیدا کن
تکه کردن: سادهترین راه، هر size کلمه یک تکه. مشکل: ممکن است یک جمله از وسط نصف شود («This is | called condensation») و معنی بین دو تکه گم شود. راه حل: همپوشانی؛ هر تکه چند کلمهی آخر تکهی قبلی را هم داشته باشد. اگر اندازه ۲۰ و همپوشانی ۵ باشد، تکهها از کلمهی ۰، ۱۵، ۳۰... شروع میشوند (قدم = ۲۰ − ۵).
def chunk_words(text, size):
words = text.split()
chunks = []
for start in range(0, len(words), size):
chunks.append(" ".join(words[start:start + size]))
return chunks
این کد را همینجا در ویرایشگر پایتون اجرا کن، عددها و متنهایش را عوض کن و دوباره اجرا کن تا ببینی چه تغییری میکند.
بیشتر بخوان: تابع در پایتون: آموزش def، پارامتر و return با مثال
برگشت به درس جلسهی 71: RAG کوچک (۱): تکهی درست را پیدا کن · مثال بعدی → · چالشهای این جلسه