会儿郎玉柱寻找颜如玉，却不知道她在哪里。郎玉柱失魂落魄，边诉说边祈祷。忽然想起她所藏身的地方，拿来《汉书》仔细翻阅，一直翻到原来的地方，果然找到颜如玉。叫她她不动，伏地哀求，她才走下来说："你再不听，我一定和你永远断绝关系！"颜如玉让他准备围棋棋盘等玩具，每天和他游戏。但郎玉柱心思完全不在这里，窥探颜如玉不在时，就偷偷拿书来读。因为担心被她发现，就暗中把《汉书》第八卷拿出来，夹杂在其他地方来迷惑她。一天，郎玉柱正读得入神，颜如玉来到时竟没有发觉；一看见她，急忙把书掩起来，但颜如玉一去不复返。郎玉柱搜遍所有的书，再也找不到。后来，仍然在《汉书》第八卷中找到她，连页数都不错。于是他再跪下哀求，发誓不再读书。颜如玉于是走下来，和他下棋，说："如果过了三天还下不精，我一定又要离去。"到了第三天，有一局棋郎玉柱赢了颜如玉两个子。颜如玉很高兴。又给他一把琴，限定他五天练熟一支曲子。郎玉柱集中注意力，用心练琴，没有时间顾及别的事。后来，他随手弹来都符合节拍。颜如玉于是每天和他喝酒下棋，他因此快乐得忘了读书。颜如玉又放他外出，让他交结朋友。颜如玉对他说："你可以参加科试了。"

　　一天晚上，郎玉柱对颜如玉说："我和你同住了这么久，为什么你不生孩子呢？"过了八九个月，颜如玉果真生下个男孩，他们雇了一个老妈子抚养他。一天，颜如玉对郎玉柱说："我跟你两年了，已生了儿子，可以分别了。时间久了，恐怕成为你的祸患，到那时后悔就来不及了。"郎玉柱听了以后伏在地上不起来，说："你难道不顾念那呱呱啼哭的儿子吗？"颜如玉也伤心，很久才说："你一定要我留下，就应当把书架上的书全部散掉。"

　　郎玉柱说："这是你的故乡，也是我的生命，怎么能说出这种话！"先前，郎氏亲族中有人窥见过颜如玉，没有人不大吃一惊，因此都来问他。郎玉柱不会说假活，只是默不作声。这件事被县令史公听到了。史公是福建人，青年进士，听说这事儿，想看一下传说中的颜如玉究竟是个什么样的美人，就传令拘捕郎玉柱和颜如玉。颜如玉听到消息就隐身消失了。县令发怒，拘留郎玉柱，下令革除他的身份，严刑拷打，一定要知道颜如玉的去向。郎玉柱宁死也不说一句话。县令又叫人拷打他的丫鬟，丫鬟透露了一点情况，县令认为颜如玉是妖怪，亲自乘车前往郎家。只见满屋书卷，多得搜寻不尽。于是放火烧书，庭院中烟气凝结，久久不散。郎玉柱被释放后，托人说情，才恢复了功名。这一年秋试中举，第二年考中进士。他对县令恨入骨髓，为颜如玉设了一个灵位，早晚祈祷说："你如果有灵，一定要保佑我去福建作官。"后来他果然以御使身份到福建巡视。在福建期间，他查访出那个县令的罪行，抄没了他的家。