唐開元四年張說貶到岳州后，決定張榜招聘名工巧匠，在魯肅閱兵臺舊址修造“天下名樓”。有一位從潭州來的青年木工李魯班，手藝高強，擅長土木設計，被張說相中。張限李木匠在一個月內設計出一座三層、四角、五梯、六門、飛檐、斗拱、的樓閣圖紙。誰知李魯班擺弄了一個月的時間，設計出來的圖紙只是一座過路小亭。張說很不滿意，再限七天時間，一定要拿出與洞庭出水形勝相得益彰的有氣派的樓閣圖紙。
　　正當李魯班一籌莫展時，一位白發(fā)老人了走過來，問清緣由，便把背的包袱打開，指著編有號碼的木它它說：“這些小玩意兒，你若喜歡，不妨拿去擺弄擺弄，或許會擺出一些名堂來。若是還差點什么，就到連升客棧來找我。”李魯班接過來，擺了又撤，撤了又擺，果然構成了一個十分壯的樓癡呆劃型。大家十分高興，都說是祖師爺顯靈，向白發(fā)長者道謝。老人說自己是魯班的徒弟，姓盧。后來，老者在湖邊留下了寫有“魯班尺”3字的木尺，一陣風不見了。工地上失群紛紛跪下，向老者逝去的方向叩頭不止。 不久，一座新樓拔地而起，高聳湖岸，氣象萬千。