Por defecto las imágenes se anclan usando como referencia la esquina superior izquierda, si colocas una imagen y haces que dicha esquina esté dentro de una celda, será esta celda la que sea "dueña" de la imagen, si la celda se mueve la imagen también lo hará.

El comportamiento por defecto es:

- Mover, pero no cambiar de tamaño con celdas.

Ah ya, pues creo que en Excel 2021 actualizado u office 365 agregaron una función IMAGE que si se puede centrar porque están muy ligadas a la celda, en versiones anteriores a lo mucho que se puede hacer es usar el autoajuste para estirar la imagen a los bordes de la celda y cambie con ella, el problema es que puedes deformar la imagen si varias el tamaño de la celda de un lado más que otro, además es bastante manual este método

Si no vas a usar fórmulas exclusivas de Excel no veo porque no usas Word en su lugar, una tabla en Word si permite colocar imágenes "En Línea con el Texto" y gracias a eso las puedes centrar vertical y horizontalmente, además es más cómodo de imprimir. Puede que la manipulación de celdas de las tablas de Word sean un poquito más molestosas si estas son complejas y que si son tablas muuuy grandes (como las que suele tener Excel) Word se hace muuuy lento

No revisé si LibreOffice o alguna otra alternativa a Excel como las OnLine haber si sí pueden hacerlo, pero yo me quedo con Word para esas cosas