Non c'è nulla di male ad uscire anche con gente più forte, altrimenti non ti miglioreresti più, arrivato ad un certo livello.
Poi, diversamente da te, agli altri non interessa sempre fare la gara, quindi magari farebbero volentieri anche le salite al tuo passo, o ti aspetterebbero volentieri in cima, ed in pianura (in gruppo) non andrebbero troppo forte per non lasciarti indietro.
Già abbiamo fatto un solo giro insieme ma un pezzo di salita l'abbiamo fatto insieme anche se tu stavi andando a spasso.