ИИволюция 👾

Forwarded from Закиев Василь. (AI)ron manager (Vasil Zakiev)

Интернет агентов

Чем больше пользуюсь Deep Research, тем больше понимаю, что на сайты будет расти нагрузка от электронных болванов вместо обычных людей.
Я делаю один запрос, GPT пробегает по десятку сайтов. И так каждый раз. А если и запрос за меня будет делать агент? Рост нагрузки в десятки раз? Облегченные версии сайтов для ИИ?

Нагрузку добавляет и новое поколение краулеров, которые парсят интернет в автоматическом режиме.
Если раньше веб-страницу регулярно запрашивали только пара поисковиков, то сейчас это делают десятки компаний, которые набирают себе датасеты. И новички легко игнорируют robots.txt

www.tgoop.com/ai_volution/1019

3.8K viewsСергей Пахандрин, Mar 8 at 01:58

Интернет агентов

Чем больше пользуюсь Deep Research, тем больше понимаю, что на сайты будет расти нагрузка от электронных болванов вместо обычных людей.
Я делаю один запрос, GPT пробегает по десятку сайтов. И так каждый раз. А если и запрос за меня будет делать агент? Рост нагрузки в десятки раз? Облегченные версии сайтов для ИИ?

Нагрузку добавляет и новое поколение краулеров, которые парсят интернет в автоматическом режиме.
Если раньше веб-страницу регулярно запрашивали только пара поисковиков, то сейчас это делают десятки компаний, которые набирают себе датасеты. И новички легко игнорируют robots.txt

BY ИИволюция 👾