刑部侍郎裴长卿为人刚方正直，广有谋略，生有一儿两女。其府后花园新建一楼，尚未题名。八月十五这一天，一家人在后花园赏月，裴侍郎命儿女各为此楼想一个名字，但题的都不尽人意。不想此事惊动了上天的月神吴刚，代为题写了 听月楼 三字。