Используя некоторые базовые скребки сайта, я пытаюсь подготовить базу данных для сравнения цен, которая облегчит поиск пользователей. Теперь у меня есть несколько вопросов:
Должен ли я использовать file_get_contents() или curl чтобы получить содержимое требуемой веб-страницы?
$link = "http://xyz.com"; $res55 = curl_init($link); curl_setopt ($res55, CURLOPT_RETURNTRANSFER, 1); curl_setopt($res55, CURLOPT_FOLLOWLOCATION, true); $result = curl_exec($res55);
Кроме того, каждый раз, когда я просматриваю веб-страницу, я получаю много ссылок для посещения. Это может занять много времени (дни, если вы сканируете большие веб-сайты, такие как Ebay). В этом случае мой PHP-код будет тайм–аут. Каким должен быть автоматический способ сделать это? Есть ли способ предотвратить синхронизацию PHP с помощью внесения изменений на сервере или есть другое решение?