Или: Как в мире, где контент — король, а парсинг — охота, выжить без армии серверов и юристов 🏰 Пролог: Две истории одного контента В статье на Хабре описана эпопея: разработчики пытаются обойти защиту Avito, а Avito ставит всё новые барьеры. Это похоже на противостояние крепости и осадной армии. Причины такого подхода очевидны: пользовательский контент (объявления) — это основа бизнеса Avito, его «цифровое золото» . Они продают доступ к этому золоту через платные сервисы и не хотят, чтобы его
Подробнее
Хочу поделиться способом, как с помощью парсинга можно быстро находить интересные сайты на бирже ссылок. Я сделал скрипт для A-parser, который помогает автоматизировать этот процесс. В этом тексте расскажу, как использовать скрипт и покажу несколько примеров его использования. Читать далее
Подробнее
В SEO очень важно не стоять на месте и постоянно генерировать новые гипотезы и идеи. Но где их взять? Несколько месяцев назад я подумал, что мониторинг дорогих доменов — это хороший источник интересных проектов, кейсов и инсайтов. Ведь с высокой долей вероятности домены за несколько тысяч долларов покупаются опытными командами для конкурентных ниш. У меня получилось настроить мониторинг, и за несколько месяцев собралось больше пяти тысяч доменов со средней стоимостью $2173. Такого
Подробнее![[Перевод] CSS, JavaScript и блокировка парсинга веб-страниц](https://habrastorage.org/webt/ng/6c/1r/ng6c1rhlzaakngl-icf0iftyana.jpeg)
Недавно мне попался материал, посвящённый проблеме загрузки CSS-файлов, которая замедляет обработку материалов страниц. Я читал ту статью, стремясь научиться чему-то новому, но мне показалось, что то, о чём там говорилось, не вполне соответствует истине. Поэтому я провёл собственное исследование этой темы и поэкспериментировал с загрузкой CSS и JavaScript. Читать дальше →
Подробнее