Emorroidi non infiammate da anni

Buongiorno,
Circa dieci anni fa mi sono recato dal medico di base per un gonfiore in zona anale (sensazione di avere una o più palline) senza sanguinamento, né prurito, né bruciore.

Il medico ha controllato e immediatamente detto, guardando, che si trattava di emorroidi (a destra).
Alla mia domanda su cosa fare ha risposto: Niente, non sono infiammate.

Da allora non ci ho più fatto caso, non è cambiato nulla, niente fastidi, né sangue.
Ho notato che tendo alcune volte a sporcare il wc sulla sinistra, dopo la defecazione mi lavo con acqua tiepida e sapone neutro, alcune volte la sensazione di avere delle palline è più accentuata, a riposo sembra comunque esserci una piccola appendice sgonfia.
Evito comunque manovre o tentativi di rientro, talvolta spingendo delicatamente lavandomi sembrano rientrare di più.

Recentemente un mio familiare per un problema simile (ma con sanguinamento) ha avuto l'asportazione di un polipo, quindi mi è tornato in mente il mio problema.

Vorrei sapere se devo preoccuparmi, farlo presente al mio medico attuale o fare una nuova visita specialistica e se, nel caso, affrettarmi, o se semplicemente posso stare tranquillo con quella prima diagnosi.

Non ho malattie, non sono in sovrappeso né soffro di stitichezza, lavoro in ufficio.

Grazie, cordiali saluti.