Сведения о вопросе

CPdeveloper

12:12, 17th August, 2020

Теги

Хабр   RSS    

Почему хабрахабр блокирует запросы по RSS основываясь на user-agent информации?

Просмотров: 360   Ответов: 1

В качестве агрегатора RSS новостей использую akregator, но уже около полугода не удаётся получить ленту. Легко удостовериться, что во всём виноват User-Agent:

$ wget -U &quot;Akregator/1.6.5; syndication&quot; <a href="http://habrahabr.ru/rss/">habrahabr.ru/rss/</a><br/>
--2010-09-15 17:52:52-- <a href="http://habrahabr.ru/rss/">habrahabr.ru/rss/</a><br/>
Resolving habrahabr.ru... 212.158.166.234<br/>
Connecting to habrahabr.ru|212.158.166.234|:80... connected.<br/>
HTTP request sent, awaiting response... ^C<br/>
<br/>
$ wget <a href="http://habrahabr.ru/rss/">habrahabr.ru/rss/</a><br/>
--2010-09-15 17:53:06-- <a href="http://habrahabr.ru/rss/">habrahabr.ru/rss/</a><br/>
Resolving habrahabr.ru... 212.158.166.234<br/>
Connecting to habrahabr.ru|212.158.166.234|:80... connected.<br/>
HTTP request sent, awaiting response... 200 OK<br/>
Length: unspecified [text/xml]<br/>
Saving to: `index.html'<br/>
<br/>
[ &lt;=&gt; ] 38,878 71.1K/s in 0.5s <br/>
<br/>
2010-09-15 17:53:07 (71.1 KB/s) - `index.html' saved [38878]



PS в первом случае — таймаут



  Сведения об ответе

прога

11:11, 12th August, 2020

Видимо, кто-то активно флудил сайт с юзерагентом, содержащим слово akregator
И блокируются не только запросы к rss, а целиком все на сервер, видимо. Да и не блокируются, а просто тормозятся, видимо — у меня начало качаться со скоростью 5 байт в секунду :)


Ответить на вопрос

Чтобы ответить на вопрос вам нужно войти в систему или зарегистрироваться