чем можно спарсить все страницы сайта с выдачи гугл? и каким запросом? пробовал парсерами разными парсит или одну страницу на 10 линков или на 100, дальше идти не хочет...
спс за ответ, но имелось ввиду список выдачи урлов например есть сайт, если ввести в гугле site:*****.com выдаёт количество страниц в индексе. вот нужно как то спарсить все эти урл, которые есть в выдаче и записать в файл
все сайты из выдачи вы не спарсите, только первую тысячу, чтоб спарсить больше привязывайте домены зоны к примеру ru. com, by и так далее.