常大用喝过毒药，躺在床上，等待药性发作，死去。可他觉得药味清凉，还有一种特别的香味。喝过不久，觉得头脑清醒了些。他把眼睛闭上，躺着不动。过了会儿，觉得心胸渐渐地宽松了许多，遍身都很舒服，他不再考虑如何死法，也不再想其它的事情，不知不觉地睡着了。第二天醒来，早晨的阳光已照射在窗子上了。他已病了三天不能起床，此时觉得病痛消失，他试着起身下床，走了几步，病已完全好了。他更加认定那女郎是位仙女。
常大用一心想去见见这位仙女，但不知她住在哪里，又找不出个理由来去见她。没有别的办法，只好在没有人的时候，诚心诚意地对天祷告，以表达他对女郎的思念之情。
一天，常大用又要去看牡丹花，刚走到一个小树林中，恰巧碰到他思念的那位女郎。他往四下里一望，别无他人，就高高兴兴地走上去施礼问讯。
女郎客客气气地还了礼。常大用闻到女儿身上有一股奇异的香气。他刚要再和她说话，老女仆从远处走来。女郎让常大用暂到一块大石后面避一避，又用手向南指了指，小声说：“夜间踏着花梯过墙，看那所四面有红窗的房子，就是我住的地方。”说完，急匆匆地走了。
女郎走后，常大用象丢魂失魄一样，不知该怎么办好。
这天夜间，他要找个梯子扛到南墙跟。到了南墙跟前，有一个梯子已经在那里放好了。常大用很高兴，爬上梯子，越过垣墙，到了里面，果然有一所房子，四面都有窗子，窗子上都挂着红绢窗帘，里面的灯光透过红窗帘射了出来，整个窗子都是红的。他小心地走近窗前，听到里面有人在下棋，棋子敲打棋盘的声音不时传了出来。常大用久久地站在外面，不敢往里走。站了好长时间，里面下棋的仍未结束。他想，与其站在这里等候，还不如先回到自己那边，等到里面下完了棋，再过来。常大用登上花梯，爬回到墙这边。
等了一会儿，他又爬过墙这边看看，见棋局还没散，就再爬了回来，如此往返，爬了四五趟，仍没有机会进屋。
是谁在和女郎下棋呢？常大用决定从窗缝里往里望望。原来和她下棋的也是一位女郎，长得也很美丽，只是衣服穿得更淡雅些。那个老女仆也坐在里面，还有一个丫鬟，常给两位女郎端茶，剪烛花儿。常大用见此时仍不能进去，又踏着梯子越墙回到自己这边。这时听到谯楼上鼓打三更。
这次，常大用登上花梯，趴在墙头上，目不转睛地看着里面的动静。不久，就听到老女仆从屋里走了出来。常大用心中高兴：“你们可都走了！”
谁知老仆人没回自己的住室，却走到墙脚下察看，说道：“花梯子怎么放在这里？是谁放的？”说完，又招呼丫鬟出来，把梯子搬走了。常大用心中直埋怨这老太婆多事。
梯子搬走了，常大用想再过去，已过不去了，没有办法，只好回到自己的寓所。
第二天晚上，常大用又去了，来到墙下，见梯子又安放好了。他四下望了望，幸好四周没有人。他越墙而过，见女郎一个人坐在室内，象是在等人，又象是在思考什么事情。女郎见常大用进来，惊惶地站了起来。常大用上前行过礼，说道：“我知道自己缘份浅薄；怕今生见不到你了。没想还终于能见到你。”常大用激动得不知该说什么话好，女郎说：“有志者，事竟成。
你请坐。”常大用刚要对她说说自己的心里话，就听到远处传来说话的声音。
女郎赶紧对常大用说：“我妹妹玉版姑娘来了，你赶快趴到床底下去躲一躲。”
常大用只好顺从地爬到床底下去。他趴在那里，大气儿也不敢出一声。
一会儿，一个女郎从外面走进来，笑着说：“败军之将，还敢再和我战吗？走吧，我那里已经泡好茶，摆上棋盘等着你呢！今天我非和你下个通宵不可！”女郎推托说：“今天身上不大舒服，有些发困，不去了。”玉版姑娘哪里肯答应，非让她去下几盘不可。女郎推托着不肯去，一直坐在床沿上没动。玉版姑娘急了，走上前去，取笑说：“一个人在这里坐着，空屋子有什么可恋的！莫非床底下藏着汉子！”边说笑，边生拉硬拽着走。女郎这才站起身，默默地跟着走了。
女郎走后，常大用十分懊丧。他从床底下爬出来，环视室内，室内整齐清洁，香气袭人，但并没有什么梳妆打扮的化妆用品。看她床上，也没有什么多余的陈设，只有一块水晶如意，芳香清洁，十分可爱。他想：“没有别的可拿，我就拿它权当个信物吧。”于是把那柄水晶如意揣在怀内，越墙而回。
常大用回到自己的寓所，思念时，就拿出水晶如意来展玩。看到如意，闻到芳香，又更加思念那女郎。他想起前天伏在床底下时的情景，听到玉版姑娘说的那些话，真觉得有些后怕。如今偷拿了她的水晶如意，一方面觉得不好意思，但又很盼望女郎能来寻找。
几天之后的一个晚问，女郎果然来了。笑着说：“我还以为你是个君子呢，没想到却是个小偷。”常大用应声说道：“不错，不错，我当过一次小偷。偶然偷了一次，只是希望能够‘如意’罢了。”说着赶快向女郎让坐，女郎大大方方地对面坐下。女郎一入室，室内异香扑鼻，沁人心脾。常大用说：“我第一次见面时，就觉得你是个仙女，现在看来，更加证实了我的想法。我只怕这是一场梦。”女郎笑着说：“你想得也太多了。明明是我和你在一起，怎么会是梦！不过，以后还是小心些好。现在的人，往往爱无端说些闲话。人言可畏，倘或被他们捏造些黑白，那时，你不能生出翅膀来飞走，我也不能乘风飞去，弄得说不清道不明，多不好啊！”