С Новым годом! Форум программистов, компьютерный форум, киберфорум
PHP: сети
Войти
Регистрация
Восстановить пароль
Карта форума Темы раздела Блоги Сообщество Поиск Заказать работу  
 
Рейтинг 4.57/526: Рейтинг темы: голосов - 526, средняя оценка - 4.57
129 / 50 / 8
Регистрация: 01.12.2013
Сообщений: 572
1

Curl через прокси

25.04.2014, 11:17. Показов 104134. Ответов 2
Метки нет (Все метки)

Author24 — интернет-сервис помощи студентам
В общем виде всё так:
PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
<?php
function get($url,$proxy) { 
        $ch = curl_init();   
        curl_setopt($ch, CURLOPT_PROXY, "$proxy"); 
        $ss=curl_exec($ch); 
        curl_close($ch); 
        return $ss; 
} 
 
      $prox = '62.159.143.172:80';
      $a=get('http://2ip.ru/',$prox); 
      echo $a;
 
?>
Что делать если одного прокси недостаточно и их надо менять либо через каждые 10 запросов, либо по времени через минуту допустим. Как в общем виде дать скрипту список прокси что бы он их перебирал сам?
0
IT_Exp
Эксперт
34794 / 4073 / 2104
Регистрация: 17.06.2006
Сообщений: 32,602
Блог
25.04.2014, 11:17
Ответы с готовыми решениями:

Curl через прокси
как зайти на сайт через прокси с помощью курла? в гугле много нашел примеров но там не указываются...

Curl через прокси
Добрый день. Возникло желание спарсить страницу с сайта в инете локальным скриптом. Да вот...

cURL не всегда работает прокси
Настройки такие curl_setopt ( $ch, CURLOPT_HEADER, 0 ); curl_setopt ( $ch,...

Использование прокси Curl
Здравствуйте. Использую libcurl: https://curl.haxx.se/libcurl/c/libcurl.html Зависает программа...

2
177 / 62 / 3
Регистрация: 17.11.2011
Сообщений: 318
23.09.2014, 07:52 2
Примерно так:
PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
    protected function getContent($url, $referer = null, $proxies = array(null))
    {
        $proxies = (array) $proxies;
        $steps = count($proxies);
        $step = 0;
        $try = true;
        while($try){
            // create curl resource
            $ch = curl_init();
            $proxy = isset($proxies[$step]) ? $proxies[$step] : null;
 
            curl_setopt($ch, CURLOPT_HEADER, 0);
            curl_setopt($ch, CURLOPT_REFERER, $referer);
            curl_setopt($ch, CURLOPT_USERAGENT, "Opera/9.80 (Windows NT 5.1; U; ru) Presto/2.9.168 Version/11.51");
            curl_setopt($ch, CURLOPT_URL, $url);
            curl_setopt($ch, CURLOPT_PROXY, $proxy);
            curl_setopt($ch, CURLOPT_TIMEOUT, 10);
            curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); //return the transfer as a string
            curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
 
            $output = curl_exec($ch); // get content
            $http_code = curl_getinfo($ch, CURLINFO_HTTP_CODE); // Получаем HTTP-код
 
            // close curl resource to free up system resources
            curl_close($ch);
 
            $step++;
            $try = (($step < $steps) && ($http_code != 200));
        }
        return $output;
    }
Опускаете туда третьим параметром массив прокси (вида array( '62.159.143.172:80' ) ) или просто строку с одним прокси.
И оно крутится до победы (пока не достучится хотя бы через один прокси или не закончится список)
Если не нужно использовать прокси (обращаемся на прямую), то просто пропустите последний параметр или укажите значение по умолчанию.

Ну, а выборку массивов "по времени" можно сделать в вызывающей функции.
1
0 / 0 / 1
Регистрация: 22.05.2016
Сообщений: 40
31.05.2016, 23:19 3
Дико извиняюсь за поднятие темы... Меня интересует 2 сообщение. Как это можно строить в мою функцию?
PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
$proxy = file('file/proxy.txt');
 
function sdf_url_content($_url)
{
$r=array();
$r['content']='';
$r['header']='';
$r['error']=0;
$options=curl_init();
curl_setopt($options,CURLOPT_URL,$_url);
curl_setopt($options, CURLOPT_PROXYTYPE, $proxycurl);
global $proxy;
curl_setopt($options, CURLOPT_PROXY, trim($proxy[array_rand($proxy)]));
global $curlopt_useragent;
curl_setopt($options,CURLOPT_USERAGENT,$curlopt_useragent);
curl_setopt($options, CURLOPT_COOKIE, $cookie);
curl_setopt($options, CURLOPT_COOKIEFILE, "file/cookie.txt");
curl_setopt($options, CURLOPT_COOKIEJAR, "file/cookie.txt");
curl_setopt($options,CURLOPT_TIMEOUT,60);
curl_setopt($options,CURLOPT_MAXCONNECTS,1);
curl_setopt($options,CURLOPT_AUTOREFERER,1);
curl_setopt($options,CURLOPT_SSL_VERIFYPEER,0);
curl_setopt($options,CURLOPT_SSL_VERIFYHOST,0);
$loops=1;
$loops_max=20;
curl_setopt($options,CURLOPT_HEADER,1);
curl_setopt($options,CURLOPT_RETURNTRANSFER,1);
while ($loops<$loops_max)
{ $data=@curl_exec($options);
  $header=@curl_getinfo($options);
  @list($location,$data)=@explode("\r\n\r\n",$data,2);
  if (($header['http_code']==301)||($header['http_code']==302))
  { preg_match('#(Location:)(.*)#i',$location,$url_);
    if (isset($url_[2])) { $url=trim($url_[2]); } else { $url=''; }
    if ($url=='')
    { $r['error']=1;
      break;
    }
    curl_setopt($options,CURLOPT_URL,$url);
    $loops++;
    continue;
  }
  if ($header['http_code']==200)
  { $r['content']=$data;
    $r['header']=$header;
    break;
  }
  else
  { $r['content']='';
    $r['header']=$header;
    break;
  }
}
return $r;
}
Добавлено через 9 часов 0 минут
Есть умельцы?
0
31.05.2016, 23:19
BasicMan
Эксперт
29316 / 5623 / 2384
Регистрация: 17.02.2009
Сообщений: 30,364
Блог
31.05.2016, 23:19
Помогаю со студенческими работами здесь

Curl + proxy: не работает рабочий прокси
Здравствуйте! Я пытаюсь сделать запрос на сайт через прокси. Вот мой код: CURL...

Как быстро скачивать через прокси с файлообменников или без использования прокси
Доброго времени суток, как вы возможно знаете, для загрузки с облака маил ру или ядаа пользователи...

При передаче post запроса через прокси сервер в ответ приходят ошибки с прокси сервера
При передаче post запроса через прокси сервер в ответ прилетают ошибки с прокси сервера:...

Написание прокси сервера на сокетах. Проброс сообщений основному серверу и возврат значений через прокси
Есть 3 приложения. 1. Клиент. 2. Прокси сервер. 3. Сервер. Что задумано: Запускается клиент...


Искать еще темы с ответами

Или воспользуйтесь поиском по форуму:
3
Ответ Создать тему
Новые блоги и статьи
Как написать микросервис на Go/Golang
InfoMaster 14.01.2025
Определение микросервиса, преимущества использования Go/ Golang Микросервис – это архитектурный подход к разработке программного обеспечения, при котором приложение состоит из небольших, независимо. . .
Как написать микросервис с нуля на C#
InfoMaster 14.01.2025
В современном мире разработки программного обеспечения микросервисная архитектура стала стандартом де-факто для создания масштабируемых и гибких приложений. Этот архитектурный подход предполагает. . .
Как создать интернет-магазин на PHP и JavaScript
InfoMaster 14.01.2025
В современном мире электронная коммерция стала неотъемлемой частью бизнеса. Создание собственного интернет-магазина открывает широкие возможности для предпринимателей, позволяя достичь большей. . .
Как написать Тетрис на Ассемблере
InfoMaster 14.01.2025
Тетрис – одна из самых узнаваемых и популярных компьютерных игр, созданная в 1984 году советским программистом Алексеем Пажитновым. За прошедшие десятилетия она завоевала симпатии миллионы людей по. . .
Как создать игру "Танчики" на Unity3d и C#
InfoMaster 14.01.2025
Разработка игр – это увлекательный процесс, сочетающий в себе творчество и технические навыки. В этой статье мы рассмотрим создание классической игры "Танчики" с использованием Unity3D и языка. . .
Организую платный онлайн микро-курс по доработке Android-клиента Telegram
_Ivana 14.01.2025
Официальная версия и распространенные форки не полностью устраивают? Сделай свою кастомную версию клиента! 4 занятия по 2 часа (2 недели пн, ср 19:00-21:00 по Москве). Первое вводное занятие. . .
Как создать приложение для фитнеса для iOS/iPhone на Kotlin
InfoMaster 14.01.2025
Создание собственного фитнес-приложения — это не только захватывающий, но и полезный процесс, ведь оно может стать вашим верным помощником на пути к здоровому и активному образу жизни. В современных. . .
Как создать приложение магазина для iOS/iPhone на Swift
InfoMaster 14.01.2025
Введение в разработку iOS-приложений Разработка приложений для iPhone и других устройств на базе iOS открывает огромные возможности для создания инновационных мобильных решений. В данной статье мы. . .
Это работает. Скорость асинхронной логики велика. Вопрос видимо останется в стабильности. Плата - огонь!
Hrethgir 13.01.2025
По прошлому проекту в Logisim Evolution https:/ / www. cyberforum. ru/ blogs/ 223907/ blog8781. html прилагаю файл архива проекта в Gowin Eda. Восьмибитный счётчик из сумматора+ генератор сигнала. . .
UserScript для подсветки кнопок языков программировани­­­­я в зависимости от текущего раздела
volvo 13.01.2025
В результате работы этого скрипта подсвечиваются нужные кнопки не только в форме быстрого ответа, но и при редактировании сообщения: / / ==UserScript== / / @name CF_DefaultLangSelect / / . . .
Введение в модели и алгоритмы машинного обучения
InfoMaster 12.01.2025
Машинное обучение представляет собой одну из наиболее динамично развивающихся областей искусственного интеллекта, которая фокусируется на разработке алгоритмов и методов, позволяющих компьютерам. . .
Как на Python создать нейросеть для решения задач
InfoMaster 12.01.2025
В контексте стремительного развития современных технологий особое внимание уделяется таким инструментам, как нейросети. Эти структуры, вдохновленные биологическими нейронными сетями, используются для. . .
КиберФорум - форум программистов, компьютерный форум, программирование
Powered by vBulletin
Copyright ©2000 - 2025, CyberForum.ru