Gesztesi Károly háromszor nősült, öt gyermeke született. Első házasságából született fia, Máté, akinek az édesanyja Csarnóy Zsuzsanna színművész. Második felesége és nagy szerelme Karel Nikoletta két gyermekkel, Márkkal és Dáviddal ajándékozta meg a 3 éve elhunyt színészt. Harmadik felesége Liptai Claudia volt, akivel közös lányuk, Gesztesi Panka.