毛延壽的傳說，來源于漢元帝時古代宮庭畫家毛延壽的故事。元帝時，宮中有個不成文的規矩，因為宮中的宮人太多，皇帝不便于人人挑選，每晚臨幸的宮人，是在宮庭畫家們畫出宮人的像中挑選。

    王昭君因為家貧，又不愿意巴結畫師，所以毛延壽等畫師故意將容色第一的王昭君畫的一般，而沒有得到皇帝的臨幸。后來和匈奴和親，昭君報名被選上，在臨行時得皇帝召見，元帝才發現其貌若天仙，然愧之晚矣。昭君出塞后，元帝一怒之下，將畫師們統統處死，抄其家產，都是擁有巨富的資產。據傳說，昭君出塞后，元帝要治畫師們的罪，統統都要抄產殺頭。當時的后宮中，有幾個深愛元帝喜歡的韓妃，在當年，她就是賄賣了毛延壽，得毛延壽精心繪畫，為其增色不少，才得到元帝的寵幸，被封為貴妃的。現在看恩人要被砍頭，急忙出面求情，才被免于一死，被發配充軍，又被韓妃求情配到韓地，也就是現在密縣的洧水崖邊，安下家來。

    因為毛延壽得韓妃之力，到密縣以后，仍擁有萬貫的家財。到這安家時，他廣置田產，大興土木，興建莊園，臨河修建了樓房一片，其中有二座相連的小樓，都是用糯米坐漿勾縫，十分結實，就像銅鑄的一般。毛延壽大概是對前事不滿，就曾發了大話，夸下海口：“我有這幾盤龍拽磨(水磨)，還有十頃不靠天(水澆地)，要想窮了我毛延壽，除非天塌龍叫喚。”這是一種蔑天的大話，是一定會受到上天懲罰的。果不其然，老天爺知道后他對天庭的蔑視，十分震怒，洧水河猛漲，電閃雷鳴，一下子把毛延壽的大小水磨，沖的無影無蹤，水田沖成了河道，又在毛延壽修建莊園的地方，把大小房屋全部沖走，十幾畝地的莊園變成了一個深不見底的巨潭，大小家口無一幸免。只有那一對小樓因為十分結實，沒有被沖散，一直飄到了下游三十多里的岸邊，留下了現在還有的大隗鎮東雙樓村。這一潭深水，也被后人取名為毛潭，流傳至今。