В средние века феодал строил себе укрепленный дом - замок для того, что бы в первую очередь защищать себя, свою семью и свое имущество от посягательств других феодалов.
"Мой дом - моя крепость" - выражение возникло именно тогда.
Дело в том, что феодалы в Средние века, особенно в период феодальной раздробленности, очень активно промышляли военными походами друг против друга (по простому - военным грабежом), что являлось важным источником доходов феодалов, поэтому для защиты от поползновений ближних и дальних соседей и строили замки.