Puede haber varios problemas. Como decían los comentarios, puede intentar apagar todas las fuentes de infrarrojos, como las fuentes ambientales.
Otro punto es el potenciómetro. Mientras escribía, verificaba el cableado y también la fijación. Yo esperaría que el potenciómetro esté allí para cambiar el voltaje en la entrada del opamp. Trate de encontrar el punto donde el voltaje en la entrada negativa y positiva del opamp sea igual.
Como veo en el circuito, el potenciómetro es un divisor de voltaje. Cuando gire la rueda, podrá medir diferentes voltajes en la entrada -.
Supongo que el diodo será un poco conductivo o que se debe cambiar la posición del potenciómetro (posición del limpiador). Así que mi consejo es que gire (lentamente) el potenciómetro y vea si puede encontrar el punto. O si tiene una medida de multímetro + voltaje (entre + de opamp y masa) e intente seleccionar la posición del limpiador que - voltaje (entre - de opamp y tierra) es igual a + voltaje.