
Для контейнера с phpMyAdmin нужно добавить переменную с абсолютным путем:
PMA_ABSOLUTE_URI: "https://artem.services/phpmyadmin"
Блок "location" для Nginx'а (поменяйте путь проксирования на свой):
    location  ~ \/phpmyadmin {
        rewrite ^/phpmyadmin(/.*)$ $1 break;
        proxy_set_header X-Real-IP  $remote_addr;
        proxy_set_header X-Forwarded-For $remote_addr;
        proxy_set_header Host $host;
        proxy_pass http://localhost:8080;
    }
Теперь phpMyAdmin будет доступен по пути:
https://artem.services/phpmyadmin/