Дети и родители. Не устраивают отношения. Как решить вопрос в семье?

День добрый! Живу с женщиной, собираюсь сделать ей предложение, но иногда, при общении, меня не устраивают некоторые моменты... У неё 2 е детей, у старшего отец умер, а у дочи, отец бросил их на 6-ом месяце беременности... Дочь видела отца до 2-х лет пару раз, сейчас ей уже 4... Моя любимая женщина переодически, а сейчас очень часто заводит разговор о том, что была бы не против если бы дочь общалась с отцом и бабушкой (мамой отца). Она меня спрашивает, как я отношусь к этому, а меня бесит этот разговор и я не могу ей ничего сказать адекватного, что делать? Меня разрывают мысли о моем отношении к доче, я считаю ее своей, так- как ее папе не до нее, я люблю их всех и немогу запретить своей женщине, что либо делать, но боюсь если они будут встречаться с отцом дочи, статус моего отношения изменится к ним ко всем... Помогите пожалуйста мне разобраться в себе или как разрешить эту ситуацию?