回到安陆的李白，做了两件事：从寿山搬到白兆山隐居。
主要是因为主动出击干谒没效果，只好以退为进，隐居。干谒也好，隐居也好，都是手段，目的要是出仕，然后建功立业。这个手段不行，就换那个手段，对于一般人来说，有三个手段，科举、察举\/征辟\/干谒、隐居，对于李白来说，只有后两个。
隐居归隐居，干谒不能停，不然就真的隐居了，于是李白给侍御史刘绾的投献诗文，首先要说情，现在我李白是真心修道，不是那种假模假式的隐居。
云卧三十年，好闲复爱仙。
蓬壶虽冥绝，鸾鹤心悠然。
归来桃花岩，得憩云窗眠。
虽然成仙这件事不比干谒出仕容易，但是起码能睡个好觉，甚至有几回，李白还能在梦中与老子、庄子等先贤遨游太虚。
梦中遨游太虚，现实中登山揽胜也是文人的一大雅事，每次登上家门口的白兆山，李白都有一种幻觉，和梦中与孔子、庄子在群山之间遨游的感觉是一样的，令他有点分不清的梦境和现实。
这些年来碰的壁，在这些似梦非梦的感觉中，也慢慢变淡。在梦里，他与自己进行着对话：
问余何意栖碧山，笑而不答心自闲。
桃花流水窅然去，别有天地非人间。
这话是对自己的说的，也是对世界说的，也是对先贤说的。
金樽清酒斗十千，玉盘珍羞直万钱。
停杯投箸不能食，拔剑四顾心茫然。
欲渡黄河冰塞川，将登太行雪满山。
闲来垂钓碧溪上，忽复乘舟梦日边。
行路难！行路难！多歧路，今安在？
长风破浪会有时，直挂云帆济沧海。
他也很苦闷，他说“大道如青天，我独不得出”，这是一种强烈的英雄无用武之地的挫败感，那种挫败感，很让人窒息，也让人绝望，有时候他真想躺平，吃着火锅唱着歌，且乐生前一杯酒，何须身后千载名，也挺好。
也有令人欢喜鼓舞的事情，李白的女儿出生了，他给女儿取名叫平阳，对于李白这个年纪的人来讲，说老来得子也不为过，所以李白非常宠爱女儿，只是可惜，李白并没有将自己的这一身艺术细胞传给他的孩子，他甚至没有尽到一个父亲的责任。
他太渴望出仕了，以至于不敢放弃任何一个干谒的机会，有时候不远千里，出门的女儿还在襁褓之中，回来的时候，孩子已经会爬了，还没等女儿认得出他这个父亲，他又要出门了，再回来，女儿依然不知道他是谁。
照顾孩子的重任就落在许夫人一个人的肩上了，他们许家的人，并不待见李白，连带着也不待见李白的儿子，所以许夫人回家娘家的时候很少，虽然只隔着几里的路程，只有孩子的外婆，会是不是来看一看孩子，也顺带着一些钱粮，否则，这娘两真的饿死。
然后李白的第二个孩子也出生了，是个儿子，他给儿子取名伯禽，小字明月奴。这第二跟孩子除了性别和姓名不一样之外，跟第一个孩子没有什么区别，并没有因为他的父亲是李白，而得到命运一丁点的青睐。