Изначально проблема в том, что аддон по умолчанию работает на порту 10080, который при использовании Chrome считается небезопасным.
Если же поменять в настройках супервизора порт который будет прокидываться в контейнер - все ссылки все еще ведут на 10080

Решение:
поменять порт по умолчанию или
динамически из конфигурации вытягивать порт который проксируется в контейнер