Non escludo che l'errore sia radicato in quella famiglia, il che rende impossibile far rispettare la regola delle storie di quartiere. Se lo elimini manualmente continua a venire adottato? Hai fatto altri tentativi, tipo trasferirli in un lotto diverso.. ?
In quanti sono? Puoi provare a dividerli momentaneamente e vedere cosa succede nel tempo in cui sono separati.
Altro tentativo (un pochino più estremo perché va a resettare l'albero genealogico) puoi salvare la famiglia in galleria e successivamente ricollocarla e vedere se facendo così si riesce a sistemare.