Reference for Chullin 270:29

מזוזה אף על גב דכתיב (דברים ו, ט) ביתך דידך אין שותפות לא כתב רחמנא (דברים יא, כא) למען ירבו ימיכם וימי בניכם ואלא ביתך למאי אתא

What then is the significance of 'thy field'? - It excludes what is held jointly with a gentile.

Jastrow