婚后，他和妻子感情非常好，对外姑（即岳母）借走指环的事也浑不在意，一心等着外姑参透其中的妙处，好让他也跟着一起修习道术。这一过便是三年，他们有了个女儿，就是唐英子，她大名唐瑛，乳名英子。建宁二年的一天，外姑忽然大发雷霆，指责唐瑁不经过她的同意，擅自取回了指环。唐瑁莫名其妙，矢口不认，他的妻子也帮他解释，不料这更惹怒了外姑，外姑打了他妻子一掌，扬长而去，从此再也没有露过面。