相传李贤被母武则天贬为庶人，流放巴州，途经木门（今四川广元市旺苍县木门镇），曾与木门寺内方丈在石上晒经，巨石上刻有佛像700余尊，曰“晒经石”，他写下“明允受谪庶巴州，身携大云梁潮洪，晒经古刹顺母意，堪叹神龙云不逢”的诗句为自己感到惋惜。后来上官婉儿去巴州看望李贤，行至此地，闻李贤被害，就在“晒经石”上修建亭子（惜毁于战火），题写《由巴南赴静州》一诗于亭上，怀念李贤：“米仓青青米仓碧，残阳如诉亦如泣。瓜藤绵瓞瓜潮落，不似从前在芳时。”
公元684年，上官婉儿前去巴州看望李贤，闻听太子已经被害，就在木门寺旁李贤曾经翻晒经书的“晒经石”上修建亭子，并赋诗一首题于亭上，怀念李贤。至此，这段传说中的感情完结。
除去这位传说中的初恋情人，上官婉儿正式的丈夫是李贤的弟弟李显。大约神龙元年十一月，武则天去世后，上官婉儿正式进入中宗李显的后宫，受封婕妤，官秩三品。不久又进拜为昭容，真正进入后宫主人的行列。
婉儿与李显的缘分是什么时候开始的呢？一般认为，性情温顺的李显或许早已仰慕婉儿的才名，后在女儿安乐公主的婚宴上再次领略了婉儿的聪慧与高贵气质，更是心驰神往，婉儿心领神会眉目传情，二人以此结缘。也有一说，武则天退位的诏书极有可能为婉儿所拟，论功行赏之下，也足当宠妃之封。