J'ai longtemps trouvé douteux le choix du 24-105 en APS-C.
Mais depuis que je suis revenu à ce format après un 5D Mark II, je ne regrette pas ce choix :
Le 24-105 est LE couteau suisse des objos sur ce format, certes il lui manque le très grand angle, mais les photos de ce type sont rarement des photos dont on a besoin à la volée : paysages, archi, photos de groupe,... , on a en général le temps de monter un UGA pour ces photos. Par contre il passe des focales standards au télé (38-168mm environ) aisément.

Mais ton cas semble particulier. Tu parles de photos de rallye, de portraits volés qui semble te porter vers le 70-200 en effet (à 105mm x 1.6 on arrive tout de même à "voler" quelques portraits).
Reste juste à voir si c'est ton utilisation standard, sans quoi n'avoir qu'un télé me semble trop restrictif.
Bon courage.