Varicocele da due mesi, spermiogramma ok?

Buongiorno,
da un paio di mesi ho notato sopra al testicolo sinistro qualcosa di anomalo come un piccolo grumo.
Sono stato dal medico di base che alla palpazione mi ha detto che molto probabilmente soffro di varicocele di grado primo o secondo. Mi ha prescritto lo
spermiogramma che è ok con valori nella norma come motilità, forme normali ecc. e il numero di spermatozoi è 180 milioni (a suo dire molto buono).
Mi ha dunque sconsigliato per ora l'operazione se non ho alterazioni dello spermiogramma oppure dolori.
A volte ho un senso di fastidio e pesantezza come da corpo estraneo ma poi passa.
Io temo che lo spermiogramma sia ok perchè sono soltanto due mesi che ho notato questo disturbo arrivato imporvvisamente dopo l'estate.
Può essere dovuto alla palestra e ai pesi che ultimamente ho aumentato un pochino? Non ho mai esagerato però!!
oppure a qualche trauma subito due-tre anni fa a calcio o cadendo sulla canna della bicicletta?
Sono preoccupato di peggiorare velocemente.
Nel frattempo posso fare attività fisica e sessuale tranquillamente?
Che precauzioni devo prendere?
Grazie infinitamente!