Amore non corrisposto sul lavoro: cosa fare?

Salve a tutti!
Ecco la mia situazione: con un collega ho stabilito, negli anni, un bel rapporto d'amicizia.
Per me, però, la cosa è andata oltre: mi piace sia fisicamente che mentalmente.
Credo di essermene innamorato.
Gliene ho parlato e lui, seppur non ricambiando, con il tempo ha iniziato, via via, da abbracciarmi a: baciarmi sulle guance, sul collo, bacetti veloci sulle labbra, lasciarsi toccare anche nelle parti intime.
Ma non siamo mai andati sul sessuale.
Anzi, se ci provavo mi chiedeva di smettere.

Perché lui è sposato.

Ed ha pure un figlio.

Nonostante ciò, questi comportamenti -da parte di entrambi- si ripetono ed usciamo, talvolta, insieme (da soli) dove capitano spesso.

Lui dice che con me sta bene, ma non riesce ad andare oltre, seppur gli abbia detto più volte che non io ho intenzione di "strapparlo alla famiglia".

Ho l'impressione che vorrebbe/potrebbe ma non vuole/può.

Il fatto è che la cosa mi sta logorando perché io vorrei di più.
Sto pensando a distruggere questo rapporto, qualunque cosa essa sia, approfittando pure del fatto che ora lo vedo meno perché sono stato trasferito in un altro reparto, sebbene sempre nella stessa azienda.

Prima di agire, però, cosa mi consigliate?

Grazie in anticipo.