同样，潘家长房也陷入了混乱中。

潘氏的父亲潘世祥为正三品的工部右侍郎，一辈子只有一妻一妾，嫡妻生两子一女，妾室没有子嗣。

长子便是小潘氏的父亲潘启敏，为正七品通政司经历。

长女就是胡祭酒的嫡妻大潘氏。

次子潘启瑞是嫡妻老蚌怀珠，因此比长子小了十六岁，只比侄儿潘文大了三岁，现在河间府宁津县做知县。

潘启敏的长子，小潘氏的长兄潘文，为国子监正八品监丞。