جلسهی 32: پروژه: بازی با دست Project: Play with Your Hand
بازی سبد و میوه را بدون کیبورد بازی میکنی: دستت را جلوی دوربین چپ یا راست میبری (یا در دفتر نقاشی لکه را چپ و راست میکشی) و k-NN هر لحظه حدس میزند سبد کدام طرف برود. آخر کاری میکنی که فقط وقتی مطمئن است حرکت کند.
در این جلسه یاد میگیری
- در پایان این جلسه میتوانی عکسهای سه برچسب (چپ، راست، هیچ) را در بازی بارگذاری کنی و بشماری.
- میتوانی در هر فریم بازی تصویر زنده را با k-NN حدس بزنی.
- میتوانی با حدس مدل یک شخصیت بازی را حرکت بدهی.
- میتوانی با آستانهی رأی جلوی حرکتهای نامطمئن را بگیری و بگویی در نور کم چه شد.
درس
اول ماشین را آموزش بده. با دوربین (یا دفتر نقاشی به جای دوربین) برای هر برچسب حدود ده عکس بگیر: «چپ» دستت سمت چپ تصویر، «راست» سمت راست، «هیچ» بدون دست. اول حدس بزن: اگر عکسهای «هیچ» را نگیری، وقتی دستت بیرون تصویر است مدل چه میگوید؟ حدس زنده را نگاه کن. همین عکسها با «اجرا» به بازی تو میرسند.
تصویر زنده در بازی: در یک بازی Pygame Zero، cam.live(size=8) تصویر همین لحظهی دوربین را به شکل ۸×۸ عدد میدهد؛ صفحه حدود پنج بار در ثانیه تصویر تازه به بازی میفرستد. اگر دوربین نداری، دفتر نقاشی همین کار را میکند: هر بار که لکه را جابهجا میکشی، بازی تصویر تازه میگیرد. ۸×۸ (بهجای ۱۶×۱۶) یعنی حساب چهار برابر کمتر، تا بازی کند نشود.
import cam
photo = cam.live(size=8)
print(len(photo), "rows of", len(photo[0]))عکسهای آموزش: cam.photos(size=8, labels=["left", "right", "none"]) عکسهایی را میدهد که در ماشین یاددهی گرفتی. اگر هنوز عکسی نگرفته باشی، عکسهای نمونهی همین سه برچسب را میدهد؛ «بررسی جواب» هم همیشه با نمونههاست. پس بازی بدون دوربین و بدون عکس هم اجرا میشود.
«فقط وقتی مطمئنی حرکت کن»: با k = 5، اگر ۵ رأی از ۵ «چپ» باشد مدل خیلی مطمئن است؛ اگر ۲ چپ، ۲ راست و ۱ هیچ، اصلاً مطمئن نیست. در قدم ۴، knn دو چیز برمیگرداند: برچسب و تعداد رأیهایش. اگر رأی کمتر از ۴ بود، سبد تکان نمیخورد. ماشینهای خودران و رباتها هم همین کار را میکنند: وقتی مطمئن نیستند، کار مطمئنتر (ایستادن) را انتخاب میکنند.
⚠️ حریم خصوصی و انصاف: دوربین فقط با دکمهی خودت روشن میشود و هیچ عکسی از صفحه بیرون نمیرود. وقتی بازی را در گالری میگذاری، عکسهای تو با آن نمیروند؛ هر بازدیدکننده با دست خودش آموزشش میدهد. چراغ اتاق را کم کن و دوباره بازی کن: هنوز کار میکند؟ هر چه دیدی را در یک خط توضیح # low light: بنویس. جلسهی ۳۵ دقیقاً سراغ همین مشکل میرویم.
مثالهای این جلسه
چالشها
- Step 1: Load the Photos (آسان)
- Step 2: A Guess in Every Frame (متوسط)
- Step 3: The Hand Moves the Basket (متوسط)
- Step 4: Only When Sure (سخت)
بیشتر بخوان
← جلسهی 31: آموزش یعنی اصلاح اشتباه جلسهی 33: خوب یا بد؟ →