Как получить все ссылки веб-сайта

lynx -dump http://www.domain.com | awk '/http/{print $2}'


Выполняет запрос к веб-сайту и извлекает все ссылки с этой страницы. Альтернативы: использование wget или curl для загрузки страницы, затем парсинг с помощью awk или других инструментов.

Ответить

Ваш адрес email не будет опубликован. Обязательные поля помечены *