В меню Настройки - Дополнительно есть пункт папки с конфигами
![6280a5d5e351c771808425.png](https://webcf.waybackmachine.org/web/20220704082406im_/https://habrastorage.org/webt/62/80/a5/6280a5d5e351c771808425.png)
В моем случае это C:\Users\alexv\OpenVPN\config
в этой папке лежат ovpn файлы конфига подключения, либо доп папки с сертификатами, ключами и конфигами. В этой папке удали папку с ненужным конфигом и файлами либо ненужный ovpn файл.