Доступ для AI на сайт - давать или нет

1. Чисто теоретически... Если ИИ знает про твой сайт, значит он может тебя цитировать и это хорошо. Это может дать тебе клиентов. Надо доступ разрешать.
2. Далее... Он может про тебя знать и БЕЗ доступа к сайту из внешних источников. Т.е. как бы можно не давать доступ)))
3. И еще появился очень прикольный и ЗНАЧИМЫЙ момент. На основе ИИ могут же создавать агентов, которые:
- Могут парсить твой сайт весьма агрессивно по товарам и контенту.
- Могут делать постоянный мониторинг цен, когда каждый час долбят и сверяют что-то.
- Могут банально парсить, что-то ТИПА что-то там анализируют (выбился в топ - получай повышенное внимание и долбежку).
4. И САМОЕ ЗАБАВНОЕ - ИИ эти все агенты идут под идентификатором легальной ИИ... Т.е. ХРЕН ЕГО ЗНАЕТ, чего этот робот ИИ пришел. Чисто узнать кто ты такой или конкретно к тебе присесть со зланомерными действиями.
5. И все это валит сайт по нагрузке... Вот вчера только видел, что для небольшого сайта бот OpenAI за неделю больше 150 Гб выкачал!! Больше, чем все месте взятые остальные. Это точно он сайт для себя изучает?))
6. Я тут пока вижу такие пути что делать, когда видно, что идет злоупотребление:
- Запрет основных разделов для ботов ИИ на уровне сервера. Т.е. на главную, о компании и контакты можно, дальше - нельзя.
- Полный запрет. Пусть читают официальную информацию с внешних источников)))

p.s.: Это еще ИИ-агенты не массовые... А представьте, что сразу 10 человекам понадобилось проанализировать ваш сайт и все 10 прислали к вам армию ботов... В Google хоть кеш есть, он оттуда дает данные. А ИИ сразу бота шлет и не переживает. И твой сервер и сайт большей частью будет работать чтобы обслуживать БЕСПОЛЕЗНЫЕ запросы. БОЛЬШЕ СЕРВЕРОВ!!! Чтобы конкурентам и вредителям за свой счет упростить доступ к своим данным))


Заказать SEO на США, Европу, СНГ - можно прямо у меня и можно прямо сейчас писать в личку