对于当时的李白来说，“星星还是那颗星星，月亮还是那个月亮”，但老婆已不是那个老婆了，可李白还是那个李白，依旧天天飘在外边，而且经常是千百里之外的远方。独守空房的寂寞和抚养继子女的辛苦让没有做好足够心理准备的刘氏渐渐有些抓狂，她最后终于彻底愤怒了，写信要求李白立刻回来，否则离婚。
自信“天生我材必有用，千金散尽还复来”的李白自然不会受这份气，他不但对刘氏的来信不予理睬，而且还在给朋友的信里写诗批判刘氏的所作所为——彼妇人之猖狂，不如鹊之强强；彼妇人之淫昏，不如鹑之奔奔，坦荡君子，无悦簧言。
虽然李白不肯向老婆认错屈服，但其实他也知道自己不是个好丈夫，他曾在《赠内》一诗中这样自嘲：“三百六十日，日日醉如泥。嫁与太白妇，何如太常妻。”其内省精神还是值得后人学习的。
刘氏离开之后，李白离开了让他伤心的湖北安陆，来到了他父亲当年为官的山东任城，然后以此为中心，开始了新一轮漫游四方、求仙学道的生涯。此时的李白似乎对仕途功名不像之前那么热衷了，可机会偏偏在这个时候忽然降临了——皇帝召他入京面圣。后来在京城长安的事情大家都再熟悉不过了——放浪不羁的李白根本不适合官场，于是上书自请归山，随后便带着皇帝赠送的金银珠宝回到了任城。