燕荣与郑艳堂一来二往，成了奸夫淫妇，起初还有些避讳，燕荣在京城住的时间一长，反倒越发猖狂，一连几日胡乱在驿馆之中。
常言道：“若要人不知，除非己莫为。”终究此事还是传到了御史大夫杨素的耳中，杨素后院本有妾室，怎知正房夫人郑艳堂早已红杏出墙，心有他人，气得杨素怒不可解。
偏巧这日，郑艳堂又去找那燕荣，竟是一夜未归，等到天明，才迟迟归来。郑艳堂是正房夫人，杨府的家丁谁也不敢多为，任由郑艳堂进出。
唯有杨素早已藏在后院小门的后面，欲抓个正着，当面质问郑氏。郑艳堂打着哈欠，刚到后院，守候多时的杨素突然院中跳出，把郑氏吓了一跳。
这杨素长得身材瘦弱，未老先衰，四十多岁须发半白，如同六十岁老人，只是精神还算矍铄，一把羊角胡子标志且美观。
“你这老东西，都还没起床，闹什么鬼？”
杨素怒斥道：“不要脸的妇人，一夜未归，找谁鬼混去了？”
郑艳堂一看杨素这龌龊老脸，再想想雄性强壮的燕荣，不免得说话冷嘲热讽，说道：“我去看我小表妹了。”
“呸！贱人！偌大京师，你何时有过小表妹？”杨素瞪着眼，撇着嘴问道：“是不是小情郎呀?”
郑艳堂是何等泼辣，眼珠子一瞪，骂道：“放你娘的狗屁！”只身就往后院走，杨素一把揪住郑艳堂的头发，怒道：“你这淫妇，私会情夫，当我不知？”
郑艳堂哪里受过这种质问，抱头喊疼，反手揪住杨素的羊角胡子，破口大骂，夫妻二人扭打一起，听见动静的家丁、婆子一看夫妻二人又打又骂，赶忙拉开劝架，郑艳堂骂不绝口：“准你三妻四妾，就不能我找个相好、知音!”
杨素怒不可及，一把被家丁拽着，一边骂道：“我若作天子，你定不堪为皇后。”
夫妻吵架斗嘴，毕竟是出出气罢了，怎知这郑艳堂是个泼辣女人，半吊子脾气，一听杨素说了这冒犯天威的气话，顿时恼羞成怒，一气之下跑出家门，头也不回，理也不理，就去告发杨素。
这郑艳堂带着满腔怒火，一路跑到宫廷，皇宫当值的小太监拦住问道：“这位夫人，这可是皇宫，外人不得擅入。”
“我要告发御史大夫杨素!出言不逊，有谋逆之罪。”
“那夫人何许人氏？”
“我乃杨素之妻郑氏！”
这一语，把当值的小太监说的发懵，“那夫人在此稍后，待我通禀一声。”小太监也不敢怠慢，慌慌忙忙去宫里禀报了隋文帝。
宫苑通深，太监一级挨一级禀告，等告到大太监王文同这里，已是快半个时辰了。杨坚正与独孤皇后喝茶聊天，王文同奏报：“启禀皇上，门外有一妇人，自称御史大夫杨素之妻，要告发杨素谋逆之罪。”
“嗯？”隋文帝还从未见过妻子告发自己丈夫的怪事，独孤皇后更是觉得妻子告夫，有些蹊跷，独孤皇后道：“想必杨素家事出了乱子，不如听听那妇人如何说。”
独孤皇后开了口，隋文帝便准了郑氏请求，传旨到宣文殿见驾。
来到宣文殿，郑艳堂双膝跪倒，叩首称罪。独孤皇后一看郑氏，头发凌乱，装束不整，便知道像是受了极大委屈，独孤后看了一眼杨坚，杨坚问道：“郑氏你状告亲夫，是何罪名？”
“今早我夫妻吵架，杨素竟说他若为天子，我定不堪为皇后。如此狂言，妾身岂敢隐瞒，所以如实禀报。”
杨坚又问：“杨素可是你亲夫，你确认不是误听？”
“皇上若是不信，众家丁婆子可以为证。”
这是臣子家事，杨坚本不想多管，奈何已告到皇廷，又不得不过问，便立刻命人去传杨素觐见。
杨素骂了郑氏，以为郑氏不过去找情夫诉苦，万没想到事情闹到天下脚下，杨素赶忙换了朝服，匆匆忙忙来到宣文殿。
杨素上殿，赶忙跪倒请罪，此时郑艳堂早在一边等候多时，杨坚问道：“杨素，你妻郑氏告你口出谋逆之言，说‘你若为天子，她定不堪为皇后’，可有此话？”
杨素吓得战战兢兢，答道：“确实说了此话，臣罪该万死。”
杨坚毕竟是个贤明之主，凡是想知道个原为，遂问道：“你为何与郑氏闹到如此地步？”
杨素毕竟头脑机灵，知道皇上这是看在君臣情面，给了个申辩机会，眉头一锁，嘴角一撇，禁不住哭泣起来。一把鼻涕一把泪的诉道：“臣丢死人啦！”杨素指着一旁的郑艳堂说道：“这无耻贱人，红杏出墙，背着微臣做下苟且之事。”说罢，杨素伏地大哭。
郑艳堂哪里能承认此事，一边反驳，一边冲着跪在地上的杨素，挥手便打，夫妻二人又在朝堂之上厮打起来。
“罢啦！”杨坚一声呵斥，夫妻二人赶忙跪地，不敢再闹，独孤皇后看的是捂嘴偷笑。杨坚心里也是好笑，毕竟天子威严，未有外露，说道：“罪臣杨素，治家无方，管教不严，致使夫妻失和，有失做派，且出言不逊，有谋逆之嫌。今革去杨素御史大夫一职，削职为民，还乡思过。”
杨素毕竟是北周时期就追随杨坚，且战功显赫的臣子，家里出了这般丑剧，杨素被人带了绿帽子，杨坚还是念及旧情，从轻而论，削官夺职，还乡了事。杨素只得灰溜溜带着妻子郑艳堂，收拾铺盖，返回弘农老家。
杨素刚被免职，到了次日晋王杨广便赶回京师。杨广把燕荣诸多罪证和以往卷宗，汇集成卷，写了参劾文书，便往御史台去参劾青州总管燕荣。到了御史台，当值差官一见是晋王杨广，赶忙来迎：“晋王殿下，来御史台何事？”
杨广道：“我有要紧的参劾案卷，要秉承御史大夫杨素。”
差官答道：“殿下来的不巧，杨大人已被皇上革职返乡了。新的御史尚未到任，所以殿下若有急事需暂且耽搁几日。”这便是：
贼臣无度逞猖狂，勿把御史贬还乡。
几度参劾皆不利，何日才将正义匡。
欲知后事如何，其看下回分解。