Bimbo di 2 anni e mezzo vuole solo la mamma per dormire

Salve a tutti,
Ho un bambino di due anni e mezzo che, come scritto nel testo della domanda, vuole solo me per dormire.
Io sono in attesa della seconda bambina, e attualmente lavoro solo di pomeriggio: durante quelle ore lui sta con la nonna e poi con il padre che rientra un po' prima di me.
Il problema è che se lo lascio che già dorme e al risveglio trova la nonna non sorge quasi nessun problema, piagnucola giusto 5 minuti e poi subito a giocare...se invece lo lascio sveglio la tragedia, Piange disperatamente quando arriva la stanchezza, mentre comunque questo non accadeva fino a qualche giorno fa.
C'è da dire che mia madre (la nonna che si occupa di lui) è una persona ansiosa, che più volte mi ha fatto scappare dal lavoro perché sicura che il pianto del bambino denotasse un qualche terribile malessere.
Il bambino comunque l'adora perché giocano molto insieme.
Un'altra novità, legata appunto alla nuova gravidanza, è nel fatto che non posso più per ragioni fisiche, tenere il bambino in braccio come prima, anche se non gli faccio mancare le coccole.
Ultimamente lo rassicuro continuamente dicendogli che pomeriggio andrò a lavoro ma che comunque tornerò, sembra andare meglio e mia madre mi rassicura dicendomi che segue il mio consiglio di dirgli sempre la verità, e cioè che sto arrivando, ma credo che nei momenti di panico comunque non resista alla tentazione di "imprecare" contro di me in presenza del bambino (spesso dice: "questa mamma che va a lavoro...")