Можно, но я не пробовал:
Как вариант, можно поднять на самом роутере (если у роутера есть USB-порт, иначе сторонние пакеты на роутер установить не получится):
Если self-hosted Antizapret умеет принудительно перехватывать трафик по 53 порту, как это делает “взрослый” antizapret.prostovpn.org, то всё настраивается абсолютно точно так же, без отличий.
А если не умеет, тогда раздел “если используется VPN Antizapret” читать не нужно, а нужно после установки AGH в его настройках в качестве апстрима указать локальный IP-адрес вашего сервера (тот, который серверу присвоен в рамках VPN-подключения). И, если OpenVPN-подключение к вашему серверу происходит по доменному имени, возможно, придётся AGH научить резолвить ваш домен через какой-нибудь публичный DNS. Проще говоря, DNS-запросы должна бегать так: клиенты → роутер → AGH → ваш сервер