汤库的祖父，单名一个宽字。明太祖起兵，在滁州的汤宽投入帐下，做个小小的养目，名为“总旗”。天下平定，论功行赏，汤宽升为管一百兵丁的“百户”；是最低级的武官，驻地在广东电白一带。

明朝的武官是世袭的，汤宽的儿子汤铭袭职仍旧当百户，但驻地不同；被调到中都——明太祖的家乡，驻守中都都城金川门。

汤库是汤铭的儿子，以战功升为“千户”；驻地由凤阳调到河南归德府的“睢阳前卫”，从此汤家在睢州落籍。一传汤英，再传汤讳卿；那于汤家最恒赫的一位武官，因为平巨寇王堂，定汝南之乱，又调到宣化府抵御鞑靼入侵，积功升到“指挥佥事”，世袭骠骑将军，最后的官职是“中都正留守”；那是他的曾祖父汤铭服官之地，但职位已大不相同，“正留守”是守卫凤阳的指挥官。

汤讳卿有两个儿子，长子袭职，次子名叫希范，另外在仕途上发展，当过山西赵城的县丞；那就是汤斌的曾祖。

汤家在那时，已成睢州的巨富，但家内宽厚，乐善好施，而且不废诗书；汤武臣家世，到了汤斌的父亲，几乎完全改观了。

汤斌的父亲行之，名叫祖契，字孝先，号命式。从小是个神童，对于诗经的造诣甚高；中过秀才。为人慷慨热情而有侠气。他先后娶过三位太太，第二位太太姓赵，在天启七年生下一个儿子，就是汤斌，字孔伯，号潜庵。

在汤斌十一岁那年，遭遇了一场家难。有个豪绅趁他祖父去世，夺了他家的财产；而其时流寇如麻，已成乱世，没有道理可讲，汤祖契只得忍气吞声，把全部希望寄托在独子身上。

破家以后买不起书，汤祖契手抄《左传》、《战国策》、《史记》、《汉书》，以及唐宋八大家的文章数百篇，亲自课子；寒夜青灯，书不读熟，父子俩都不睡觉。这样五年下来，另一场大灾难，又降落到他们父子身上。

崇祯十