אם אני לא אלך ליום המאה זה יכול לפגוע בשיבוץ שלי בשח"מ?

כן, זה חובה

את חייבת ללכת

יום המא"ה הוא לא חובה, אבל הוא כן פותח בפנייך דלתות לתפקידים שונים וטובים יותר.
אם לא תלכי, כנראה פשוט ישבצו אותך בהתאם לצורכי הצבא או שפשוט יציעו לך תפקידים לא כל כך טובים (וגם לא תהיה לך בחירה מאוד רחבה).
את המנילה מקבלים אחרי יום המא"ה, והיא מתבססת על היכולות שהפגנת באותו יום, אם לא תגיעי, יכול להיות שלא תהיה לך את האופציה לשח"מ במנילה אבל אני כבר לא בטוחה בנוגע לזה.
בכל מקרה כדאי לך ללכת, רק בשביל לא בטעות לסגור לעצמך אופציות טובות.