קבלת שולחן ערוך

שלום כבוד הרב
קודם כל תודה רבה על הדברים המחכימים אתמול בהפגנה
שנית, לגבי קבלת השולחן ערוך. אני יודע שהרב אומר שסמכות הפורמלית היחידה שיש לנו זה הגמרא ועליה לא ניתן לחלוק, הרב מביא את סברת רב שלמה פישר שאומר שזה בגלל שקיבלנו את הגמרא עלינו. מה שנקרא סמכות מלמטה למעלה.
מכאן יוצא, שאפשר לא לקבל את פסיקת השו״ע ולעשות לפי הבנתך בסוגיה אם אתה בר הכי (הרב גם אומר שהשו״ע בעצמו פוסק שמאז הגמרא אין שום מוסד מוסמך לקביעת הלכה בחושן משפט כה, לא מצאתי את זה שם אשמח שהרב יראה לי את הדברים).
לגופו של עניין, היום השו״ע הוא בסיס בפסיקת ההלכה, מסיימים בו סוגיות ומפרשים מסוימים מתחילים בו ומתבססים עליו, והכי חשוב, עמ״י בפועל קיבל את המחבר והרמ״א עליו גם אם חלקו עליהם עוד בזמנם (ככה לפי דברי הרב, אני לא יודע מי חלק עליהם בזמנם).
אז למה השו״ע לא מחייב גם כן? למה גם הוא לא נחשב סמכות פורמלית ומחייבת?
תודה רבה!