А мне кажется "мой" может быть отец, мать, сестра, дочь, сын (т.е. родственник). Мой друг, начальник, сосед.
А мой... и половой признак ..... как-то не контуются, как возврастной. Когда говорят мой младенец или старик, все-таки имеют ввиду кого-то конкретного.