黄子由尚书夫人胡氏，与可元功尚书之女也。俊敏强记，经史诸书略能成诵。善笔札，时作诗文亦可观。于琴奕写竹等艺尤精，自号惠斋居士，时人比之李易安云。

时赵师Э从善知临安府，立放生池碑于湖上，高文虎炳如内翰为之作记，误书”鸟兽鱼鳖，咸若商历以兴”。既以锓石分送朝行，夫人一诵，即知其误。会炳如以藏头策题得罪多士，而从善又以学舍张盖殴人等，尝断其仆。诸士既闻其事，遂作小词讥诋之：”作为夏王道不是商王，这鸟兽鱼鳖是你者？”乃胡氏首指其误也。他日，胡氏殂，其婢窃物以逃，捕得之，送临安府。从善衔之，遂鞫其婢，指言主母平日与奕者郑日新通（郑、越人，世号越童），所失物乃主母与之耳，因逮郑系狱黥之。未几，子由以帷薄不修去国。事之有无固不可知，而从善之用心亦薄矣。

后十余年，从善死，其子希苍亦死。其妇钱氏茕处，独任一仆干主家事。有老仆知其私，颇持之。钱氏与干者欲灭其口，遂以他事系官，竟毙于狱，且擅焚之。未几，仆家声其冤于宪台。时林介持宪节方振风采，遂逮钱氏于庭，经营巨援，仅尔获免，而干者遂从黥籍。信人之存心，不可以不近厚，而报复之理，昭昭不容掩也如此。