蘇嘉全出生於傳統的大家庭，父母親育有九個兒女，他則是家中是小的么兒；因為家中食指浩繁，父母靠薄田務農、兼賣豬肉辛苦拉拔子女，家境並不富裕，養成他節儉、惜物的習慣，即使貴為內閣首長，就連在大賣場買的一雙皮鞋破了底，他都捨不得丟，請隨扈拿去修理，結果還被消遣「老闆，八百塊的鞋子幹嘛修啊！」

而在部屬面前威風的蘇嘉全，女兒則是他是的剋星，一遇上寶貝女兒，蘇嘉全總是百煉鋼化繞指柔，如果說「女兒是爸爸前世的情人」，那蘇嘉全就有兩位「小情人」，他的大女兒已是輔仁大學大四生，小女兒則唸義守大學，兩位千金都很有個性，當他端起父親的威嚴要小孩聽話時，女兒也很強硬地說：「你那麼兇，我要跟媒體爆料喔！」

前年暑假，蘇嘉全把兩個女兒送到美國遊學，「思」女心切的他和女兒的聯絡方式，就是讓惡龍張錫銘洩漏行蹤的MSN，蘇嘉全不只以麥克風線上聊天，還會用視訊和寶貝女兒見面一解相思之苦：「用MSN聊天可以省下大筆的越洋電話費。」雖然不會打電腦，但為了兩塊心頭肉，蘇嘉全可是卯起來用「一指神功」和女兒線上「開槓（台語，聊天）」。

由於生日和小女兒相差一天，十幾年來蘇嘉全都是和小女兒一起過生日。他說：「小女兒以前心臟不好，六歲時就請心臟外科權威洪啟仁、麻醉醫師黃芳彥開刀，可說是『撿回來的女兒』，所以特別疼愛。」女兒很會撒嬌，以前自己房間不睡，硬是要擠在他和太太中間，要人不疼都難。

兩個女兒也都長得相當標致。目前是輔大校園美女的大女兒國一時就已是校內票選美女，當時蘇嘉全就常常接到仰慕者打到家裡來的電話，那時候他通通把電話擋掉，恨不得用「打狗棒」把圍在女兒身邊的男同學給打跑，現在女兒已經長大了，有時連他都找不到人，「雖然管不到了仍不免擔心」；至於身高一七二公分的小女兒正是情竇初開，他則公開呼籲優質男來追求，「因為到現在都還沒有男生打電話到家裡來找啦」。

至於對女兒的管教之道，蘇嘉全主張讓孩子適性發展，因此，兩個女兒參加升學考試時，為了不讓她們有壓力，他連問「考得怎樣」都不敢，碰到親友關心也要他們「麥擱問啊」，他認為考試「盡力就好，不一定要念多好的學校，快樂比較重要」、「就算考上理想學校，不代表和未來成就成正比」。