西汉建昭三年（公元前36年），汉元帝派大将陈汤打败了经常南侵的匈奴，初步安定了北方。到了公元前三十八年，匈奴的首领郅支单于害怕汉军再次兴师攻打，要求与汉帝和亲，既当汉元帝的门婿又称臣，汉元帝就答应了下来。因宫中有三千粉黛，皇帝不可能一一召幸，就命翰林画师毛延寿将所有嫔妃的相貌画下来让他过目，谁长得出色优先被召幸，相貌不曲众者，一生也难召幸一次。

    汉元帝就从画像中挑出个一般相貌的王昭君送给郅支单于作妻子，郅支单于迎娶那天，汉元帝刘爽前来送别，见王昭君貌若天仙光彩照人，汉元帝后悔不已，就问王昭君：“美人入官三载，为何未曾见过你的面像？”王昭君含着眼泪说：“毛延寿画像时向宫女索取磨墨钱，有时宫女一时没钱，竟将金簪作价给了他，谁交的钱多，谁的像就画得好看，小女卑视这种贿赂行为，拒绝付予磨墨钱，故将小女的相貌画得丑陋……”汉元帝听后十分气恼。但君子之言，驷马难追。既已许诺王昭君出嫁匈奴，反悔不得，只好忍痛割爱，借别送行，王昭君与汉元帝挥泪告别而去。

    元帝回到宫中气愤难消，心想都是毛怪物（毛延寿）索贿，竟使绝代佳丽远嫁匈奴，不得与君陪欢。气怒之下，便将毛延寿斩首，并派人将其家抄袭。

    毛氏后裔家贫如洗，毛延寿的儿子毛常，只好迁居往南三里许的土岗上搭庵栖身——现在的开封县陈留乡西北十五里的地方。因毛延寿的儿子在岗上居住过，故名毛儿岗。