据《旧唐书》记载，李白之父名叫李客，为任城尉，大概是取客居之意。当然也有人说因为姓李，当地人因他是外来户便叫他李客。定居昌隆以后，李客始终过着不求仕进的隐逸生活。而在此之前他去西域究竟干些什么，已经无法猜度。从李白后来的诗文中看，他的家庭十分富裕，他曾“不逾一年，散金三十余万”，有人因此猜测李客内迁前或许是做生意的，是一名丝绸之路上的富商；当然，也有可能是他的祖先流落西域时所带甚丰，历经几世仍旧富甲一方。家中有钱，对李白后来善成“千金散尽还复来”的豪放诗句有颇大的影响。李客赋闲在家，常常管管孩子们读书，李白后来还回忆起父亲令他诵读《子虚赋》的情景。李白这位旷世奇才，大概就是在这位神秘的乡间隐士手中发蒙的。