Neben Gunnar Tallberg waren auch zahlreiche weitere Familienmitglieder Tallbergs bei olympischen Segelregatten aktiv. Seine Enkel Henrik, Johan und Peter Tallberg segelten ebenso bei Olympia wie sein Urenkel Mathias Tallberg, der Sohn von Peter Tallberg.