Разбор сайта. GET&POST запросы

[kta87]

Для получения величины стоимости введенного домена отправляю Get запрос вида:

code:= IdHTTP1.Get('http://www.urlappraisal.net/search.php?textSearch='
   + domian + '&searchSubmit=Appraise');

В ответном коде ищу значения переменных: "url" и "stubVal" и собираю для Post запроса:

DataPost.Add('url=' + h1);
       DataPost.Add('stubVal=' + h2);

Где h1 & h2 значения вышеуказанных переменных соответственно. Далее отправляю Post запрос к файлам:
"http://www.urlappraisal.net/scripts/calculateDomainAge.php"
"http://www.urlappraisal.net/scripts/calculateGooglePageRank.php"
"http://www.urlappraisal.net/scripts/calculateCompete.php"
"http://www.urlappraisal.net/scripts/calculateAlexa.php"
"http://www.urlappraisal.net/scripts/calculateGoogleLinks.php"
"http://www.urlappraisal.net/scripts/calculateYahooLinks.php"
"http://www.urlappraisal.net/scripts/analyzeDomain.php"
http://www.urlappraisal.net/scripts/calculateEstimatedWorth.php"
В ответ приходят нужные мне данные, однако файл calculateGooglePageRank.php - всегда отвечает "0", а файл calculateEstimatedWorth.php - всегда отвечает "$40". Не могу понять в чем проблема....Вот часть js в котором я взял выше указанные файлы по url:

$("#domain-age").load( "http://www.urlappraisal.net/scripts/calculateDomainAge.php", {stubVal: stub, url: urlID}, function( ) {
		processesCompleted++;
		if( processesCompleted == processesTotal ) {
			calculateWorth( stub, urlID );
		}
	});
	
	$("#google-pagerank").load( "http://www.urlappraisal.net/scripts/calculateGooglePageRank.php", {stubVal: stub, url: urlID}, function( ) {
		processesCompleted++;
		if( processesCompleted == processesTotal ) {
			calculateWorth( stub, urlID );
		}
	});
	
	$("#compete-details").load( "http://www.urlappraisal.net/scripts/calculateCompete.php", {stubVal: stub, url: urlID}, function( ) {
		processesCompleted++;
		if( processesCompleted == processesTotal ) {
			calculateWorth( stub, urlID );
		}
	});
	
	$("#alexa-details").load( "http://www.urlappraisal.net/scripts/calculateAlexa.php", {stubVal: stub, url: urlID}, function( ) {
		processesCompleted++;
		if( processesCompleted == processesTotal ) {
			calculateWorth( stub, urlID );
		}
	});
	
	$("#google-links").load( "http://www.urlappraisal.net/scripts/calculateGoogleLinks.php", {stubVal: stub, url: urlID}, function( ) {
		processesCompleted++;
		if( processesCompleted == processesTotal ) {
			calculateWorth( stub, urlID );
		}
	});
	
	$("#yahoo-links").load( "http://www.urlappraisal.net/scripts/calculateYahooLinks.php", {stubVal: stub, url: urlID}, function( ) {
		processesCompleted++;
		if( processesCompleted == processesTotal ) {
			calculateWorth( stub, urlID );
		}
	});
	
	$("#domain-analysis").load( "http://www.urlappraisal.net/scripts/analyzeDomain.php", {stubVal: stub, url: urlID}, function( ) {
		processesCompleted++;
		if( processesCompleted == processesTotal ) {
			calculateWorth( stub, urlID );
		}
	});

});

function calculateWorth( stub, urlID ) {
	var count = 0;
	$(".estimated-worth").load( "http://www.urlappraisal.net/scripts/calculateEstimatedWorth.php", {stubVal: stub, url: urlID}, function( ) { 
		if( count >= 2 ) {
			var worth = $("#estimated-worth").html( );
			var urlID = $("#url").val( );
			$("#right-ads").load( "http://www.urlappraisal.net/scripts/generateAds.php", {estimatedWorth: worth, url: urlID} );																									 
		}
		count = count + 1;
	});
}

Вроде бы переменные все одинаковые... однако эти 2 запроса возвращаются никакие. Как исправить подскажите? Что не так?

[Кольша]

Может быть нужно заполнять поля Cookie and Referer в пост запросе к этим скриптам?

[kta87]

Кольша, возможно... хотя печенки я подключал к idHTTP.
Если как то можно заполнять эти поля вручную ... подскажите как это сделать на этом сайте.

[Кольша]

Смотрите сниффером какой передает сайт referer а дальше перед каждым запросом

IdHTTP1.Request.Referer:='http://ksware.ru/';