PHP 7.4 terminará todo el soporte a finales de este año.
Para crear un Dockerfile con 8.x habría que también actualizar xdebug a la versión 3.x (la 2.x solo tiene soporte hasta 7.4).
Además de las extensiones que ya están, de las que la única algo problemática puede ser oci8.