晉代皇帝劉基·元帝的書中有壹個“牛跟著馬”的故事。相傳曹魏時期有壹部讖緯書《宣石圖》，記載了“牛馬妓侯”的讖緯。司馬懿請占星家關雎為他的後代算命，關雎的占蔔結果與宣石圖完全壹致。司馬懿當時不知道這是什麽意思。後來，他成了壹名教師，他的部下有壹位名叫金牛的將軍。司馬懿想到“牛隨馬走”的預言，心中十分忌諱。他怕金牛將來對他的後代不好，就事先用兩種酒做了壹個只有壹張嘴的酒壺，在酒裏下了毒，然後派人請金牛吃飯。金牛莫名其妙地死了。西晉初年，司馬懿之孫司馬懿攻封瑯琊公，妻夏侯為妾。夏侯的風流，沒多久就勾搭上了壹個姓牛的小吏，並生下了。西晉滅亡後，司馬睿建立了東晉，也就是所謂的“牛跟馬”。也就是說，並不是司馬真正的後代，而是代司馬繼承皇位的牛之子，所以後人戲稱為牛瑞。比如明朝思想家李贄把東晉稱為“南晉牛家”，而不是司馬家。除《晉書》外，歷史文獻中也有不少相關描述，如北魏魏壽的《舒威》、宋代羅大靖的《何林宇錄》、洪邁的《容齋隨筆》、趙的《兵推錄》等。
但《晉書·傳阿淵夏侯太妃》對此事並無記載，只說瑯琊公主是“著名的廣濟，裴國橋亦生於(貴族)，年少賢明。瑯琊王吳(司馬周)朝覲太子，生下元帝。所以只是飯後說說，聽聽而已。