23岁时，郑板桥与幼读诗书的徐氏成婚，他们相濡以沫生活了16年，生有一子二女：一子犉儿早夭，长女适袁氏，次女适赵氏。徐氏夫人在郑板桥39岁时病故，约过了三年光景，板桥续娶郭氏夫人，婚后并无子嗣。
饶氏夫人是郑板桥43岁时在扬州玉勾斜偶遇的小家碧玉，她芳名饶五娘，当时年仅17岁。饶五娘对郑板桥慕名已久，在其母亲的撮合下，与郑板桥定下了婚约。两年后，已成进士的郑板桥纳饶氏为妾。多年以后，饶五娘诞下一子，小名麟儿，郑板桥52岁再度得子，可谓喜不自胜。然而，麟儿6岁夭亡，这使郑板桥陷入了无子可续香烟的境地。
