После кика игрока лидером через команду /partyleave ‹Player name›, игрока которого кикнули нельзя бить и он тоже не может нанести урон.