Домены и IP для habr.com (ruantiblock)

Использую свой список в ruantiblock:

ntc.party
4pda.to
habr.com

ntc + 4pda (недоступная часть) = всё ок
habr (недоступная часть) = НЕ ок

Если включить gSpotx2f/ruantiblock_blacklist - будет ок.
Насколько понимаю дело в IP’ах

Кто сможет подсказать, что нужно дополнительно прописать?

Подскажите, а чего вы хотите добиться в отношении хабра? Он же и не забанен.

Просмотр статей которые выдаются с 451 ошибкой для рф (пример)

Вам дурение DPI в этом не поможет. Habr смотрит на страну вашего айпишника. Используйте впн.

А при чём тут дурение? ruantiblock это решение для выборочной маршрутизации через VPN/Tor.

Нужно определить, какие домены внести в список, смотрите, например, через инструменты разработчика в браузере, к каким доменам обращается браузер и добавляйте их.

Действительно, не обратил внимание.

habrastorage.org

Кстати, сейчас ради интереса игрался с хабром и понял, что он на curl не выдает мне 451-ю. Думал, что дело в User-Agent, но нет. Если в запросе нет хэдера Accept-Encoding, то хабр выдает 200 вне зависимости от локации. Зачем так сделали - непонятно.

curl https://habr.com/ru/articles/799751/ -v -H "Accept-Encoding: gzip" 2>&1 | grep "< HTTP/2"
< HTTP/2 451
---
curl https://habr.com/ru/articles/799751/ -v -H "Accept-Encoding-Fake: gzip" 2>&1 | grep "< HTTP/2"
< HTTP/2 200

Спасибо, но почему-то не помогло…
451 Unavailable For Legal Reasons

Как будто, локацию оно считывает дополнительно или по каким-то кукам (проверял и под инкогнито и с другого браузера тоже)

image
странно но мне только habr.com помогает

Да, просто habr.com проксирую и всё нормально.

И тоже через ruantiblock?
По логике - да, всё должно работать, но почему-то нет…

Не думали, что хабр просто ошибочно определяет вас как ру пользователя?

Через собственный АнтиЗапрет, но какая разница…

Кстати, да, возможно IP-адрес VPN-сервера по базам просто бьётся как RU.

Если хостер H2NEXUS, то нужно проксировать через IPv6. Тогда точно будет немец.

На данный момент тестируется это через operaproxy (при этом с другими сайтами проблем нет, ну не считая notion.so - он высылает код и т.д. но при приеме окда выдает 500 и что-топ пошло не так, а в остальном все сайты - ок)

Этот косяк не обязательно должен встречаться у других. Просто у хабра может такая бд/методика, вот и всё.