Новости Joomla

0 Пользователей и 1 Гость просматривают эту тему.
  • 2 Ответов
  • 708 Просмотров
*

denxio

  • Захожу иногда
  • 172
  • 4 / 0
Как бороться с парсингом?
« : 10.07.2025, 11:15:13 »
Столкнулся с тем, на одном из сайтов, которые я администрирую, возникла подозрительная активность. Похоже, что это парсинг. Кто-то с таким сталкивался? Как с этим бороться?
*

sergeytolkachyov

  • Захожу иногда
  • 209
  • 20 / 0
  • @sergeytolkachyov https://web-tolk.ru
Re: Как бороться с парсингом?
« Ответ #1 : 10.07.2025, 12:02:48 »
Да никак особо не бороться. Скорее всего это краулеры ИИ. Их сейчас много разных. Всем им нужен контент для обучения, так как чтобы обучить нейронку нужно огромное количество контента. Люди, знакомые с этой сферой поговаривали, что весь интернет нейронки уже "съели" ещё года 2-3 назад, а им нужно всё больше. Поэтому обучают либо на синтетических данных (сгенерированных другими нейросетями), либо начинают парсить сайты. На robots.txt им плевать. По user agent фильтровать  - такое себе решение. Он легко подделывается и вы можете отсеять немалую часть реальных посетителей. Поэтому просто забить и всё.
*

denxio

  • Захожу иногда
  • 172
  • 4 / 0
Re: Как бороться с парсингом?
« Ответ #2 : 11.07.2025, 06:55:13 »
Спасибо за ответ.
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Левые ссылки на сайте. Как бороться?!

Автор k.upak

Ответов: 28
Просмотров: 1791
Последний ответ 20.02.2017, 20:18:44
от flyingspook
Постоянный взлом Joomla! 2.5.2 как бороться?

Автор renataakhm

Ответов: 14
Просмотров: 3694
Последний ответ 04.10.2015, 17:33:51
от wishlight
Вирусы на сайтах и как с ними бороться!

Автор romanln

Ответов: 4
Просмотров: 3026
Последний ответ 22.01.2015, 21:05:54
от wishlight
Странный отбойник и как с этим бороться?

Автор stardel

Ответов: 3
Просмотров: 6829
Последний ответ 06.03.2013, 12:35:55
от WebDisaster
Trojan-Downloader.HTML.Agent.is Что делать и как бороться?

Автор Do_it

Ответов: 6
Просмотров: 4107
Последний ответ 01.08.2008, 12:02:00
от sh2sh