Je peux te parler de ma petite expérience avec le Minolta 100-400 APO que j'ai acheté avant de partir en Éthiopie.
Le 400 est vraiment très bien pour les cuicuis ou autres bestioles un peu farouches, il faut juste bien se caler en visant juste avant de shooter.
Par contre, 100 est poil long et j'ai dû reculer 2-3 fois pour prendre une photo
Par contre, en utilisation balade photo dans Paris, ce que je fais le plus sauvant, 100 est vraiment trop long pour moi.
Inversement, dans ce mode de balade, 400 est trop "long" pour moi : je ne sais pas repérer à l'œil nu des photos que je pourrais prendre au 400.
En gros, mon attention se limite à une zone où un 300 suffit.
Je prends généralement des portraits volés, des moments cocasses et autres scènes de rue.
C'est un très bon objectif (j'ai fait des photos de la lune à main levée... c'est bluffant, vous verrez ça

).
Mais je vais sûrement passer au 70-300 G.