desactivar manejador

Hola, quería saber si al igual que para activar un manejador de eventos desde programación como con la siguiente sentencia: this.SizeChanged += new System.EventHandler(this.sizeChangedForm); ¿existe lo mismo para desactivar ...

Cuando tngo varios controles agrupados dentro de un groupBox o de un panel, al desactivar el panel o el groupBox, todos los controles que tngo dentro se desabilitan. Tengo un componente que no quiero que se deshabilite en caso de que se deshabilite ...