Exemplo n.º 1
0
    $filename = preg_replace('/[^\\w\\.]/', '', $request->getUrl());
    file_put_contents(DOWNLOADS_DIR . DIRECTORY_SEPARATOR . $filename, $request->getContent());
}
function prepareDownloadsDir()
{
    $dirPath = DOWNLOADS_DIR;
    chmod($dirPath, 0777);
    $dirIterator = new RecursiveDirectoryIterator($dirPath);
    $recursiveIterator = new RecursiveIteratorIterator($dirIterator);
    foreach ($recursiveIterator as $path) {
        if ($path->isFile() && strpos($path->getFilename(), '.')) {
            unlink($path->getPathname());
        }
    }
}
prepareDownloadsDir(DOWNLOADS_DIR);
/***************************************************************
  MULTIREQUEST INIT
 **************************************************************/
$mrHandler = new MultiRequest_Handler();
$mrHandler->setConnectionsLimit(CONNECTIONS_LIMIT);
$mrHandler->onRequestComplete('debugRequestComplete');
$mrHandler->onRequestComplete('saveCompleteRequestToFile');
$headers = array();
$headers[] = 'Accept: text/xml,application/xml,application/xhtml+xml,text/html;q=0.9,text/plain;q=0.8,image/png,*/*;q=0.5';
$headers[] = 'Cache-Control: no-cache';
$headers[] = 'Connection: Keep-Alive';
$headers[] = 'Keep-Alive: 300';
$headers[] = 'Accept-Charset: UTF-8,Windows-1251,ISO-8859-1;q=0.7,*;q=0.7';
$headers[] = 'Accept-Language: ru,en-us,en;q=0.5';
$headers[] = 'Pragma:';
Exemplo n.º 2
0
    var_dump($request->getResponseHeaders());
    $filename = preg_replace('/[^\\w\\.]/', '', $request->getUrl());
    file_put_contents(getDownloadsDir() . DIRECTORY_SEPARATOR . $filename, $request->getContent());
}
function prepareDownloadsDir($dirPath)
{
    chmod($dirPath, 0777);
    $dirIterator = new \RecursiveDirectoryIterator($dirPath);
    $recursiveIterator = new \RecursiveIteratorIterator($dirIterator);
    foreach ($recursiveIterator as $path) {
        if ($path->isFile() && strpos($path->getFilename(), '.')) {
            unlink($path->getPathname());
        }
    }
}
prepareDownloadsDir(getDownloadsDir());
/***************************************************************
  MULTIREQUEST INIT
 **************************************************************/
$urls = array('http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/', 'http://www.yandex.ru/');
$headers = array('Accept: text/xml,application/xml,application/xhtml+xml,text/html;q=0.9,text/plain;q=0.8,image/png,*/*;q=0.5', 'Cache-Control: no-cache', 'Connection: Keep-Alive', 'Keep-Alive: 300', 'Accept-Charset: UTF-8,Windows-1251,ISO-8859-1;q=0.7,*;q=0.7', 'Accept-Language: ru,en-us,en;q=0.5', 'Pragma:');
$curlOptions = array(CURLOPT_USERAGENT => 'Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US; rv:1.9.2.12) Gecko/20101026 Firefox/3.6.12', CURLOPT_PROXY => '95.79.55.210:3128', CURLOPT_CONNECTTIMEOUT_MS => 5000);
$mrHandler = new Handler();
$mrHandler->setConnectionsLimit(1000);
$mrHandler->onRequestComplete('debugRequestComplete');
$mrHandler->onRequestComplete('saveCompleteRequestToFile');
$mrHandler->requestsDefaults()->addHeaders($headers);
$mrHandler->requestsDefaults()->addCurlOptions($curlOptions);
$Session = new \MultiRequest\Session($mrHandler, '/tmp');
$Session->start();
foreach ($urls as $url) {