Ah ya, pues creo que en Excel 2021 actualizado u office 365 agregaron una función IMAGE que si se puede centrar porque están muy ligadas a la celda, en versiones anteriores a lo mucho que se puede hacer es usar el autoajuste para estirar la imagen a los bordes de la celda y cambie con ella, el problema es que puedes deformar la imagen si varias el tamaño de la celda de un lado más que otro, además es bastante manual este método
Si no vas a usar fórmulas exclusivas de Excel no veo porque no usas Word en su lugar, una tabla en Word si permite colocar imágenes "En Línea con el Texto" y gracias a eso las puedes centrar vertical y horizontalmente, además es más cómodo de imprimir. Puede que la manipulación de celdas de las tablas de Word sean un poquito más molestosas si estas son complejas y que si son tablas muuuy grandes (como las que suele tener Excel) Word se hace muuuy lento
No revisé si LibreOffice o alguna otra alternativa a Excel como las OnLine haber si sí pueden hacerlo, pero yo me quedo con Word para esas cosas