umziehen braucht keinen Bezugspunkt, wegziehen schon. 

Ich ziehe immer von etwas weg. Ein Mitglied aus der Familie, oder auch eine ganze Familie weg von einem Ort ( dabei ist der Ort der Bezugspunkt). Die Bedeutung ist nicht gleich. Es hängt von dem ab was du sagen möchtest