Come evitare di affezionarsi troppo

Buongiorno, da qualche anno ho un problema che non mi fa vivere serenamente i rapporti con le altre persone. Quando mi trovo bene con una persona, tendo ad affezionarmi troppo e a desiderare sempre di più da quella persona... Inizialmente sono consapevole che con quella specifica persona non posso costruirci un rapporto stretto perché magari ricopre un ruolo diverso dal mio, però più passa il tempo e più mi affeziono, se vedo che non riesco ad approfondire il rapporto ci rimango male per ogni singola cosa e provo rabbia e delusione. Questo mi succede più con persone del mio stesso sesso. Io vorrei soltanto voler bene a qualcuno senza provare queste emozioni fastidiose. Come si fa a non affezionarsi così tanto? Forse il mio problema sono le mie aspettative e il mio fantasticare troppo. Io quando mi trovo bene con qualcuno vorrei farci di tutto. Mi piacciono gli aspetti più semplici delle persone e colgo ogni minimo dettaglio... Mi piacerebbe che facessero lo stesso loro con me, ma è così complicato... o comunque non lo dimostrano come lo dimostro io. So che siamo tutti diversi, però io penso che se non esternano certe cose vuol dire che non mi vogliono così tanto bene!
È probabile che questa modalità è qualcosa che mi porto dietro dai rapporti avuti durante l'infanzia? Come faccio ad uscire da questo circolo vizioso?
Grazie per aver letto. Cordiali saluti.