En realidad, deberías poder.
La batería suministra un par de voltios más de lo que necesita, pero los reguladores del módem deberían poder manejarlo, aunque se calentará ya que tiene que regular un voltaje más alto. También puede funcionar más cerca de los límites de algunas partes (condensadores y demás en la fuente de alimentación).
Si prefiere estar más seguro que lamentarlo, puede obtener una pequeña fuente de alimentación de conmutación de CC / CC que libere 12 voltios regulados del voltaje de la batería. De esa manera, su módem obtiene los 12 V que le gustan y cualquier calor adicional se genera fuera de la carcasa del módem.
En respuesta al comentario:
Yo usaría un pequeño módulo convertidor de CC a CC. Los encuentro disponibles en varios lugares de Internet.
Este es un ejemplo de lo que necesita. No le recomiendo que lo compre a ese distribuidor. Eso es solo un ejemplo. Espero que pueda encontrar mejores ejemplos con mejores precios o distribuidores más confiables o lo que sea.