שלבי ביטול קידושין

שלום רב. לא בטוח שהבנתי את השאלה.
כשבע"ד מעיד נגד עד, זו סוגיית סנהדרין כג ע"ב."בבא הוא ואחר לפוסלן". שם מוכח שבע"ד שמעיד על עד הוא נוגע (ולא בע"ד), וכשהוא מעיד על הורי העד (למשל שהם עבדים), נחלקו תנאים האם הוא כשר או לא. להלכה קי"ל כחכמים שלא. עיין ברש"י שם שזה רק כשמעידים על עדים ולא על דיינים. אבל בשו"ע סי' יג ס"ד משום מה מביא זאת רק על דיינים, וראה שם בנו"כ.
אם כן, הבעל והאישה הם כנראה נוגעים בדבר ולא בע"ד. אבל לא הבנתי את מה שכתבת "זו זכותם להיות חלק מההליך אבל לא חובתם". מה זה?
דומני שציבור אף פעם לא נחשב נוגע בדבר, אחרת דיינים לא היו יכולים לדון עבריינים או לדון בדיני מעמד אישי. אנשים מהציבור הם נוגעים בדבר (ראה ב"ב מג ע"ב על ס"ת שנגנב מהעיר ועוד).