话说万年之前，玉帝因天宫狭促，想到人间游玩。但是因为年事已高，不愿意再受腾云之苦。于是就宣太白金星进见。
太白金星见了玉帝就问：“陛下宣老臣何事？”玉帝说：“朕想修一条通往人间的甬道，一来朕可以乘车前去下界巡视，了解民间疾苦。二来人间的忠臣孝子，节妇烈女，朕也可以宣他们上来，让他们到天宫游玩游玩。朕也能当面褒奖于他。”
一旁的太上老君听了，想到以后可以坐车去看看下界多年未见的老朋友，还能用车把老朋友送的礼物运回来，就说：“此事甚好，甚好。”
太白金星就说：“陛下真是仁德之君，如此关心人间疾苦。有尧舜之风。臣当马上就去办理此事。”
想那太白金星本是个做事认真负责，又有主动精神的人。想到玉帝下界须有行宫居住。又想到早先下界之时，在徽州有一处山，很是清凉。就决定把天门修在徽州之处。于是叫千里眼来观看甬道走向。哪知那千里眼喝酒误事，竟把方向标错了。太白金星率领众天工，披星带月，总算修好了甬道。出得门来一看，竟是在西湘之地。那千里眼情知闯祸，赶紧跪求太白金星不要禀报玉帝。金星老头一想，事已至此，处罚千里眼也于事无补。不如做个人情。就打算不把千里眼失职的这件事报告玉帝，也叫众天工不得传扬出去。于是千里眼就用一年的薪奉，请太白金星和所有天工豪饮了三天。还孝敬太白金星不少金银珠宝。
甬道修好后，玉帝十分欢喜，就乘龙车凤辇去往人间。出得天门一看，玉帝很不高兴，因为门外是一个巨大的石头秃山。于是再命太白金星在此地修个花园。
太白金星因此就向玉帝奏道：“陛下，此处乃人间之地，天工在此施工多有不便。也难有人间的韵味。须请人间之能工巧匠为之。”玉帝就问他：“何人可为此事？”太白金星又回答道：“起奏陛下，鲁班可当此任。”玉帝就奇怪了：“鲁班乃木匠，怎可做得此事？”太白金星又说了：“陛下有所不知，那鲁班虽为木匠，石工也是了得。先时鲁班在河北赵州修了一座石桥，张果老为了难为他，架独轮小车担泰山从上面压过，也未曾垮塌。只在桥上留下一道车辙。”玉帝听了就说：“速带他到天庭见我。”
玉帝说完，就回天上去了。太白金星连忙去找鲁班，带着他通过甬道到了天庭。玉帝见了鲁班，就把自己的意思说了。鲁班听完就说：“要做此事不难，可以岩石为枝干，以云霞为花叶。修成后以天水灌溉。此花园必为陛下所爱。”玉帝听了大喜：“卿可速速去办，事成以后必有重赏。”
鲁班就对玉帝说：“此工程浩大，须大量劈石之工人。”玉帝说：“卿可去人间招募。工钱吃住，皆由天庭报销。”鲁班回答道：“陛下，此非凡人所能做，须鬼中会劈石的，才有此力担当。”
于是玉帝就命令钟馗，凡是孤魂野鬼中，会劈石的，一律不得捉拿。要以礼相待，带去给鲁班做工。钟馗接旨，便去办理不提。
鲁班回到家中，先辞别众父老乡亲，又拜别了父母，告别妻儿子女，便去往那天门所在之地。他的妻子就留在家中照料年迈的公婆，和幼小的子女。
鲁班到了天门外，和众鬼并肩作战，日夜不停，十年间从来不曾回家一次。十年以后，花园终于修好了。果然是秋丹春碧，冬雪夏花，美不胜收。玉帝看了十分欢喜。于是鲁班就为那些做工的野鬼向玉帝求情。玉帝想到那些野鬼劈石之苦，就准他们下世投胎。众野鬼们都欢欢喜喜的投胎做人去了。玉帝还要重重的封赏鲁班，被鲁班谢绝了。鲁班仍然回到民间，继续为百姓做事去了。
那鲁班修园之时，太白金星就为玉帝在徽州之处，选了一座山，在山里的一座山峰上面，仿照天宫的模样，修了一座宫殿。此峰后来就叫做天都峰。而此山就成了玉帝在下界避暑疗养之地，凡人是不准上去的。这座山当年叫做皇山。