不久,孝谦女皇和表弟兄藤原仲麻吕没有了那种不可言传的感觉了,从此二人分道扬镳。公元760年,藤原仲麻吕的姑妈光明子太后去世,这让藤原仲麻吕顿时失宠。原来,孝谦女皇移情别恋,将一个叫做道镜拉上了自己的大床。藤原仲麻吕一时怒火中烧,便策反淳仁天皇,干掉孝谦太上皇,结果反倒被孝谦太上皇干掉。但是,淳仁天皇也被废掉,在流放中穷困潦倒而死。
孝谦上皇再度即位为天皇,是为称德女皇。称德女皇封和尚道镜为国师。二人出双入对,俨然情人一般。直到称德女皇临终前得知和尚道镜突然起兵夺位之时才清醒过来,立即派她的娘家人藤原氏击溃了和尚道镜。称德女皇死后,和尚道镜被逐出朝廷,成为称德女皇的守陵人。
藤原家族立天智天皇的孙子为光仁天皇。此人之所以被藤原氏看中,是因为他娶了称德女皇的姐姐为妃。而称德女皇的这位姐姐,原是藤原家的外孙女。说起来,称德女皇姐妹是光仁天皇的孙女辈了。这还不算,光仁天皇即位后,又立称德女皇的妹妹井上为皇后,又娶了个孙女辈的女人。虽然辈份乱了,但这爷爷辈的天皇和孙女辈的皇后年龄倒相差不大,光仁天皇六十二岁即位时,井上皇后也已经五十五岁。
更为无耻的事还在后面。两年后,有一次井上皇后和光仁天皇下棋,天皇输了,按照事先的约定,天皇答应给皇后找个年轻男人做情人。而天皇为她找的这个情人,竟是自己的儿子山部亲王。此时,山部亲王才三十六岁,要与他五十七岁的后妈上床一点也不怯阵。当天晚上,就抱着他的后妈进了灯火通明的洞房。二人一夜风流之后,便如胶似漆,双宿双飞。