sakee 
tu peux en discuter avec le médecin qui le suit mais chez certains enfants le langage, comme beaucoup d'autres choses, peut exploser d'un coup. C'est le cas pour la mienne, à 3 ans, elle disait un tas de mots avec un vocabulaire riche mais quasi zéro "vraie" phrase et en une semaine PAF.
Oui le fait qu'il ne soit gardé que par toi, peut jouer, dans le sens, où tu le comprends, donc il ne va pas forcément avoir besoin de développer davantage cette compétence. Pour les phrases et ma fille, on l'a comprenait très bien avec ses mots, mais on a commencé à lui dire qu'on ne comprenait pas bien, qu'il fallait qu'elle nous explique, genre elle disait "yaourt" euh oui chouquinette "quoi yaourt ?" Tu veux qu'on achète des yaourts aux courses ?, tu veux que papa t'apporte un yaourt ? Elle nous regardait en mode "euh mes parents, ils comprennent rien

" Et on ne se contentait pas de son hochement de tête à nos propositions et ça l'a "forcée" à faire l'effort et maintenant c'est en mode "

" limite son père peut regretter

Tu le fais sans doute déjà, mais demande lui de nommer les choses dont il te parle.
En tout cas, à son âge, ça ne va affoler personne du corps médical à priori