חזרה לGlossary
מרחב מצב
מרחב המצב הוא הקבוצה המלאה של תצורות שרובוט וסביבתו יכולים להיות בהן. ב-RL, המצב Markov s מקודד את כל המידע הדרוש לחיזוי תגמולים וקפיצי מצב — באופן אידיאלי תיאור מלא של העולם. בפועל, לסוכן יש גישה רק לתצפיות חלקיות (תמונות, זוויות מפרקים) שאולי לא לוכדות במלואן את המצב (למשל, עצמים מוסתרים, פרמטרי פיזיקה לא ידועים). עיצוב מרחב תצפיות המקרוב את המצב Markov בצורה טובה תוך שהוא נשאר ניתן לביצוע חישובי הוא אתגר מרכזי בעיצוב מערכת למידת רובוטים. ראה זאת בפועל: ההערכות שלנו בעולם האמיתי →