Hola, tal vez no sea la manera de agregar los/el sitemap generados por yoast
personalmente he agregado los sitemap y sin problemas de esta manera:
https://www.tu_web.com/movies-sitemap1.xml
https://www.tu_web.com/movies-sitemap2.xml
https://www.tu_web.com/movies-sitemap3.xml
https://www.tu_web.com/movies-sitemap4.xml
estos aumentan con el contenido de tu sitio
para géneros y calidades seria
https://www.tu_web.com/genres-sitemap.xml
https://www.tu_web.com/dtquality-sitemap.xml
...
Entra a https://www.tu_web.com/sitemap_index.xml
veras la lista de cada sitemap y ver cual quieres enviarle a google, bing, yandex...
saludos y suerte!!!