squid не отображает целиком определенный сайт

19.06.2012 10:43 #259846

Добрый день , squid не отображает целиком определенный сайт , если иду на сайт без прокси все работает отлично. Прописал в конфиге сквида , что бы его не кэшировал
acl ebuchisite url_regex ^site.ru$
no_cache deny ebuchisite

что еще можно предпринять ?

19.06.2012 10:47 #259848

Логирование вывернуть на максимум и посмотреть, что пишет в логи.

19.06.2012 10:52 #259849

вот такая строка есть в логах
1340088649.720 477 192.168.12.54 TCP_MISS/200 9908 GET http://www.gazprom.ru/tenders/json/ru/2012/06/? ЮЗЕР DIRECT/217.151.130.37 text/html

19.06.2012 11:17 #259853

"l_cho" написал:
http://www.gazprom.ru/tenders/json/ru/2012/06/?

Где-то баннится подстрока текущего url

19.06.2012 11:34 #259855

l_cho написал:
вот такая строка есть в логах
1340088649.720 477 192.168.12.54 TCP_MISS/200 9908 GET http://www.gazprom.ru/tenders/json/ru/2012/06/? ЮЗЕР DIRECT/217.151.130.37 text/html

это всего лишь значит, что обькта по запросу в кеше нет и он будет стянут напрямую с источника. ни о каких блокировках тут не говорится.
по сути: есть ли кактой то редиректор? squidguard, etc?

19.06.2012 11:39 #259857

редиректоров нет (

19.06.2012 12:09 #259863

тогда смотрим кусок лога по получению конкретной интересующей странички сайта
можно еще как вариант, открыть страницу в опере или огнелисе и драгонфлаем или firebug'ом соответственно просмотреть элементы которые не грузятся. потом найти упонимания этих элементов в логе и глянуть что да как.

19.06.2012 14:58 #259925

проверил во всех браузерах кроме netscape и safari.
acess.log

1340101813.509 237 192.168.2.209 TCP_CLIENT_REFRESH_MISS/304 246 GET http://www.gazprom.ru/tenders/2012/06/ user DIRECT/217.151.130.37 -
1340101923.820 254 192.168.2.153 TCP_REFRESH_HIT/304 247 GET http://www.gazprom.ru/tenders/2012/06/ user DIRECT/217.151.130.37 -
1340102031.944 749 192.168.2.153 TCP_REFRESH_MISS/200 34622 GET http://www.gazprom.ru/tenders/2012/06/ luser DIRECT/217.151.130.37 text/html
1340102056.542 774 192.168.2.153 TCP_REFRESH_MISS/200 34623 GET http://www.gazprom.ru/tenders/2012/06/ luser DIRECT/217.151.130.37 text/html
1340102593.237 239 192.168.2.209 TCP_CLIENT_REFRESH_MISS/304 247 GET http://www.gazprom.ru/tenders/2012/06/ user DIRECT/217.151.130.37 -
1340103075.995 771 192.168.2.153 TCP_REFRESH_MISS/200 34622 GET http://www.gazprom.ru/tenders/2012/06/ luser DIRECT/217.151.130.37 text/html

19.06.2012 15:11 #259926

до сих пор не понятно КАКИЕ именно элементы страницы не грузятся
из лога видно что все ок.

19.06.2012 15:31 #259930

не грузится элемент с документами , там пару pdf

19.06.2012 18:45 #259974

т.е не грузится документ pdf? или фрейм с документом? или целая страница? или ячейка таблицы в которой отображается pdf?
сделайте cat /<путь к логам>/access.log|grep pdf

20.06.2012 08:09 #260054

на этом сайте есть перечень документов , вот он и не отображается . Выглядит это как обычный список.
http://www.gazprom.ru/tenders/2012/06/#137040

20.06.2012 09:17 #260064

"KRUTO" написал:
Где-то баннится подстрока текущего url

Исходный код страницы открывай и смотри, что у тебя squid-ом режится, может файлы: .js, url-ы типа "mc.yandex.ru", "facebook", которые есть на этой странице и т.д.

20.06.2012 10:15 · отредактировано #260072

Открыл два вида исходного кода страницы , один с прямого доступа другой с прокси . Полностью идентичны. Уже все волосы на теле вырвал от злости. Господа подкиньте идей

Вот кусок кода которого не видно , но в исходном коде он есть ????? как такое может быть
</div>
</div>
<h3>
Предмет закупок</h3>
<div class="clear">
</div>
<p id="item4">
</p>
<div class="hidden" id="item9">
<h3>
Результаты</h3>
<div id="item11">
</div>
<div id="item13">
</div>
</div>
</div>
<p>
</p>
<p>
</p>
<p>
</p>

20.06.2012 10:24 #260084

[img][/img]

20.06.2012 10:52 #260092

Скачал оба варианта сайта , нашел отличие .

Вот вариант в котором не грузится
async="" src="./Закупка_files/hubclient.js"></script><script type="text/javascript" src="./Закупка_files/widgets.js"></script><link rel="stylesheet" type="text/css" href="./Закупка_files/widget084.css" media="all"><script src="./Закупка_files/cb=gapi.loaded_0" async=""></script><meta content="Закупка" property="og:description"><title>Закупка </title><meta content="IE=EmulateIE7, IE=9" http-equiv="X-UA-Compatible"><link type="image/x-icon" href="http://www.gazprom.ru/favicon.ico" rel="icon"><script type="text/javascript" async="" src="./Закупка_files/plusone.js" gapi_processed="true"></script><script type="text/javascript" async="" src="./Закупка_files/ga.js"></script><script type="text/javascript">document.documentElement.className+=' js';</script><meta content="text_page" name="metacontent"><link type="text/css" rel="stylesheet" media="all" href="./Закупка_files/html.css"><link type="text/css" rel="stylesheet" media="screen,print" href="./Закупка_files/main-pack.css"><link type="text/css" rel="stylesheet" media="print" href="./Закупка_files/print.css"><link type="text/css" rel="stylesheet" media="screen,print" href="./Закупка_files/page_analyst.css"><link type="text/css" rel="stylesheet" media="all" href="./Закупка_files/tenders.css"><link type="text/css" rel="stylesheet" media="screen" href="./Закупка_files/contrast.css"><script type="text/javascript" src="./Закупка_files/main-pack.js"> </script><script type="text/javascript" src="./Закупка_files/tendersItem.js"> </script><link href="http://www.gazprom.ru/rss/" title="ОАО «Газпром»" type="application/rss+xml" rel="alternate"><meta name="crumbs" content="Закупки / "><link href="http://www.gazprom.ru/" rel="start"><link href="http://www.gazprom.ru/tenders/" rel="up"><div style="visibility: hidden; height: 1px; width: 1px; position: absolute; z-index: 100000; " id="_atssh"><iframe id="_atssh39" title="AddThis utility frame" style="height: 1px; width: 1px; position: absolute; z-index: 100000; border-top-width: 0px; border-right-width: 0px; border-bottom-width: 0px; border-left-width: 0px; border-style: initial; border-color: initial; left: 0px; top: 0px; " src="./Закупка_files/sh089.html"></iframe></div><script type="text/javascript" src="./Закупка_files/core016.js"></script></head><body class="ru" data-twttr-rendered="true"><iframe id="twttrHubFrameSecure" allowtransparency="true" frameborder="0" scrolling="no" tabindex="0" name="twttrHubFrameSecure" style="position: absolute; top: -9999em; width: 10px; height: 10px; " src="./Закупка_files/hub(1).html"></iframe><iframe id="twttrHubFrame" allowtransparency="true" frameborder="0" scrolling="no" tabindex="0" name="twttrHubFrame" style="position: absolute; top: -9999em; width: 10px; height: 10px; " src="./Закупка_files/hub.html"></iframe><div id="measurer"> </div><div id="popup_cont"><div id="shader"> </div><a href="http://www.gazprom.ru/" id="closer"><ins class="icon_24"><ins class="a"> </ins></ins></a><div class="gall_item center_window"> </div><div class="gall_item left_window"> </div><div class="gall_item right_window"> </div></div><div id="outer"><div class="background js_enable" style="visibility: visible; "><div id="background_left"> </div><div id="background_right"> </div><div class="background_bottom"><div class="background_bottom_left"> </div><div class="background_bottom_right"> </div></div></div><div id="page"><div id="header"><div id="main_switcher"><noindex>

А тут все грузится
async="" src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/hubclient.js"></script><script src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/cb=gapi.loaded_0" async=""></script><script type="text/javascript" src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/widgets.js"></script><link rel="stylesheet" type="text/css" href="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/widget084.css" media="all"><meta content="Закупка" property="og:description"><title>Закупка № 113/ТГСПб/12-2-2744/09.06.12/З</title><meta content="IE=EmulateIE7, IE=9" http-equiv="X-UA-Compatible"><link type="image/x-icon" href="http://www.gazprom.ru/favicon.ico" rel="icon"><script type="text/javascript" async="" src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/plusone.js" gapi_processed="true"></script><script type="text/javascript" async="" src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/ga.js"></script><script type="text/javascript">document.documentElement.className+=' js';</script><meta content="text_page" name="metacontent"><link type="text/css" rel="stylesheet" media="all" href="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/html.css"><link type="text/css" rel="stylesheet" media="screen,print" href="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/main-pack.css"><link type="text/css" rel="stylesheet" media="print" href="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/print.css"><link type="text/css" rel="stylesheet" media="screen,print" href="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/page_analyst.css"><link type="text/css" rel="stylesheet" media="all" href="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/tenders.css"><link type="text/css" rel="stylesheet" media="screen" href="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/contrast.css"><script type="text/javascript" src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/main-pack.js"> </script><script type="text/javascript" src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/tendersItem.js"> </script><link href="http://www.gazprom.ru/rss/" title="ОАО «Газпром»" type="application/rss+xml" rel="alternate"><meta name="crumbs" content="Закупки / "><link href="http://www.gazprom.ru/" rel="start"><link href="http://www.gazprom.ru/tenders/" rel="up"><div style="visibility: hidden; height: 1px; width: 1px; position: absolute; z-index: 100000; " id="_atssh"><iframe id="_atssh709" title="AddThis utility frame" style="height: 1px; width: 1px; position: absolute; z-index: 100000; border-top-width: 0px; border-right-width: 0px; border-bottom-width: 0px; border-left-width: 0px; border-style: initial; border-color: initial; left: 0px; top: 0px; " src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/sh089.html"></iframe></div><script type="text/javascript" src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/core016.js"></script></head><body class="ru" data-twttr-rendered="true"><iframe id="twttrHubFrameSecure" allowtransparency="true" frameborder="0" scrolling="no" tabindex="0" name="twttrHubFrameSecure" style="position: absolute; top: -9999em; width: 10px; height: 10px; " src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/hub(1).html"></iframe><iframe id="twttrHubFrame" allowtransparency="true" frameborder="0" scrolling="no" tabindex="0" name="twttrHubFrame" style="position: absolute; top: -9999em; width: 10px; height: 10px; " src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/hub.html"></iframe><div id="measurer"> </div><div id="popup_cont"><div id="shader"> </div><a href="http://www.gazprom.ru/" id="closer"><ins class="icon_24"><ins class="a"> </ins></ins></a><div class="gall_item center_window"> </div><div class="gall_item left_window"> </div><div class="gall_item right_window"> </div></div><div id="outer"><div class="background js_enable" style="visibility: visible; "><div id="background_left"> </div><div id="background_right"> </div><div class="background_bottom"><div class="background_bottom_left"> </div><div class="background_bottom_right"> </div></div></div><div id="page"><div id="header"><div id="main_switcher"><noindex>

20.06.2012 11:27 #260100

правильно ли я понял что вся разница в

"l_cho" написал:
№ 113 ТГСПб 12-2-2744 09.06.12 З

(из первой строки) ну и тому подобные далее по коду?

20.06.2012 11:33 · отредактировано #260101

Нарыл еще вот такой кусок . Подскажите пожалуйста , тут вроде в код html java не загружается ?

Вот он тоже не загружается

Предмет закупок</h3>
<div class="clear">
 </div>
<p id="item4">Выполнение работ по осуществлению технического надзора за строительством объекта: «Реконструкция сетей водоснабжения и канализования площадки Северного ЛПУМГ»</p><div class="file ZIP "><div class="icon"><ins class="a ZIP"> </ins></div><p><a href="http://www.gazprom.ru/f/posts/18/410820/113_tgspb.zip" target="_blank">Материалы к запросу предложений</a><span> (ZIP, 438 КБ)</span></p></div>
<div class="hidden" id="item9">
<h3>
Результаты</h3>
<div id="item11">
 </div>
<div id="item13">
 </div>
</div>
</div>
<p>
 </p>
<p>
 </p>
<p>
 </p>
</div><div class="clear"> </div><div class="social_container"><div class="social_item social_fb_cont"><a class="addthis_button_facebook_like" id="addthis_button_facebook_like" fb:like:locale="en_US" fb:like:width="80" title="Send to Facebook_like" href="http://www.gazprom.ru/tenders/2012/06/#"> <iframe style="overflow-x: hidden; overflow-y: hidden; border-top-style: none; border-right-style: none; border-bottom-style: none; border-left-style: none; border-width: initial; border-color: initial; border-top-width: 0px; border-right-width: 0px; border-bottom-width: 0px; border-left-width: 0px; width: 80px; height: 25px; " src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/like.html"></iframe></a></div><div class="social_item social_vk_cont"><script src="./Закупка № 113 ТГСПб 12-2-2744 09.06.12 З_files/openapi.js" type="text/javascript"> </script><script type="text/javascript">

20.06.2012 11:34 #260103

osorkon написал:
правильно ли я понял что вся разница в [quote="l_cho"]№ 113 ТГСПб 12-2-2744 09.06.12 З

(из первой строки) ну и тому подобные далее по коду?[/quote]
Так же все подобное

20.06.2012 11:40 #260107

[l_cho],
мы же не знаем, что у тебя режется сквидом... конфиги свои смотри...