Sospecho que tiene que ver con el cableado interno del controlador IC. Primero, intentaría conectar a tierra uno de los resistores de segmento (no DP) y ver si todavía se atenúa. P.ej. desconecte la resistencia de Out 1 y átela directamente a tierra. Supongo que el segmento no se atenuará bajo la condición que describió, lo que confirmaría que la corriente proviene del controlador. Creo que probablemente sea obvio, pero sería bueno confirmar y descartar otras posibilidades extrañas, por ejemplo. Componentes defectuosos, cortocircuitos de cableado, etc.
Suponiendo que la corriente proviene del controlador, sospecharía los diodos en cada salida. Estos son excelentes diodos de retorno para conducir relés u otras cargas inductivas, pero lo que podría estar sucediendo aquí es que el pin de tierra recibe un transitorio de alto voltaje, que puede pasar directamente a través de todas las salidas. Supongo que no tiene cables largos u otras fuentes de inductancia, por lo que supongo que entonces la tierra para el IC y para el MOSFET no son de impedancia lo suficientemente baja. Quizás intente conectar la fuente del MOSFET y la GND de los circuitos integrados directamente a la fuente de alimentación, si no lo está ya, en lugar de vincularlos primero.
Dicho esto, me parece una posibilidad remota, pero se basa en la suposición de que las entradas del conductor se mantienen bajas. Quizás haya pulsos breves, ruido, etc. en los pines de entrada. Si no está seguro de eso, primero intentaría desconectar la entrada de uno de los controladores de segmento (atando el pin a tierra), para estar seguro de que la entrada es realmente baja y ver si ese segmento se atenúa.