Migrationsverket, uppehållstillstånd, lång väntetid

Hej,

Jag har en undrar gällande min mans ärende.
Vi bodde ihop i ca 6 månader och var tillsammans i ca 8-9 månader innan han lämnade Sverige då vi skulle ansöka om uppehållstillstånd. Han var i Sverige illegalt innan han skulle lämna, men fick välja att söka asyl då han inte fick lämna flygplatsen. Han var bara asyl i ca 1.5 månad då han valde att avsluta för att ansöka om att få bo med mig. Något som Migra så klart vet om. Han är ca 10 år yngre än mig och jag har två barn tillsammans med annan pappa. Vi har väntat i ca 1.5 år nu, jag har träffat honom 3 gånger under denna period och skall åka iväg snart igen. 
Finns det några hinder för oss att leva tillsammans här i Sverige eller kan vi känna oss lugna? Blir orolig över alla skriverier. Vi förlovade oss detta år och har ett väldigt seriöst förhållande och har varit fullständigt ärlig till Migra om allt, så det finns inga konstigheter i våran ansökan.

Tacksam för svar!