Brooks, que era el responsable de la cartera para la Sociedad Civil, tenía entre sus responsabilidades fomentar el acceso de la mujer a los puestos más representativos.
El ministro emitió un comunicado en el que pide "respeto por la vida privada de su familia" y afirma que seguirá siendo "un leal apoyo del Partido Conservador".
Según informa el matutino español ABC, David Cameron, el primer ministro, ha aceptado su renuncia.
Nerwmark había sido parlamentario por Braintree desde 2005 y había sido promovido a ministro el pasado julio.
Ahora será sustituido por Rob Wilson, un protegido del ministro de Hacienda, George Osborne.