安逸之的家人都在浙江老家,和他一同赴任的,只有妻子并幾個家奴,他與妻子恩和睦,從不納妾,因此家中人口非常簡單,皇上賜給他一個大宅子,多半的房屋都是空的。
尚書夫人聽說救命恩人來了,立刻遣了自己的丫頭到前面去迎,并請丫頭帶話給常富,說自己原本應當親自接見他,奈何子不爽利,又