Use un MOSFET de canal P para cargar el condensador y luego puede unir las puertas (bajo = carga, alto = descarga). La configuración del seguidor de origen que tiene actualmente requeriría más como una unidad de compuerta de 10 V para funcionar correctamente.
No se necesita resistencia con 47pF, sin embargo hay una capacitancia significativa en los MOSFET (incluso los más pequeños que puede encontrar) que harán que el voltaje en el 47pF se comporte de manera diferente de lo que podría esperar.
Hay mucha literatura disponible sobre cómo hacer interruptores analógicos que tengan un acoplamiento mínimo. Si no tiene ganas de reinventarlo todo, busque "inyección de carga" y cambie. También considere las capacidades de fuente a drenaje.