本片根据《聊斋》中之〈书痴〉改编。书呆子郎玉柱被叔叔郎中元欺负，被迫搬进了传说中常闹恶鬼的「孝廉府」，遇上了颜如玉母女，颜母因伤重毙命，玉柱与如玉日久生情，终结成夫妇。郎中元不信玉柱如此幸运，与友史良金往「孝廉府」查察，良金见如玉美艳动人，竟拐走如玉，将其迷奸。良金妻妾，因妒成恨，以孔雀胆毒害如玉，如玉化成厉鬼，将中元、良金等人杀毙报仇。玉柱因如玉已不在人世，不禁一阵辛酸，只有无尽的寂寞与怀念。

荷兰船医达利（小林）因船只故障暂时停留安平港，秀琴（杨丽花）的病，多亏达利的医治得以痊愈。达利和秀琴互相喜欢，秀琴也因此怀孕。就在达利和秀琴准备结婚的同时，达利却因居留证到期被迫离台。回国前，达利将随身佩带的金色十字架交给秀琴，并承诺一定会再回到安平港。时光在等待中流逝，秀琴所生的女儿阿金（林小芳）也已经七岁，达利却迟迟未归，秀琴因身体孱弱，在交代完阿金的身世后便撒手人寰，留下阿金与外公万成相依为命。15年后，亭亭玉立的阿金（杨丽花）爱上了从台北来的医学院学生志强，两人彼此相爱也互许终生，却因家庭背景悬殊，遭到志强父亲的反对。志强即将出国留学，他希望阿金能够等他回来，并约定二年后归国…