ציון שדה תחרש, ביטול הבית