LinuxForum.Fans
Тема

squid не отображает целиком определенный сайт

Автор: l_cho 47 сообщений 15007 просмотров
20.06.2012 12:01 #260117

давай конфиг сквида

20.06.2012 12:10 #260120

точно, конфиги в студию...))))

20.06.2012 13:01 · отредактировано #260128

На ваш СУД )
http_port 192.168.2.3:3128
hierarchy_stoplist cgi-bin ?
acl QUERY urlpath_regex cgi-bin \?
cache_mem 220 MB
no_cache deny QUERY
cache_dir ufs /usr/local/spool/squid 220 16 256
debug_options ALL, 5
#/////////////////////////////////////////////////Authentification///////////////////////////////////////////////////////
auth_param basic program /usr/local/libexec/squid/squid_ldap_auth -R -D test@or.local -W /usr/local/etc/squid/adpw.txt -b "dc=or,dc=local" -f "sAMAccountName=%s" 192.168.2.9
auth_param basic children 100
auth_param basic credentialsttl 3 hours
external_acl_type ldap_users %LOGIN /usr/local/libexec/squid/squid_ldap_group -R -b "dc=or,dc=local" -f "(&(sAMAccountName=%v)(memberOf=cn=%a,cn=Users,dc=or,dc=local))" -D test@eor.local -w test -h 192.168.2.9

refresh_pattern ^ftp: 1440 20% 10080
refresh_pattern ^gopher: 1440 0% 1440
refresh_pattern . 0 20% 4320


#/////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////

acl localhost src 127.0.0.1/32
acl to_localhost dst 127.0.0.0/8
acl SSL_ports port 443 2083 563 6669 6668 6667 9091 993
acl Safe_ports port 80 # http
acl Safe_ports port 8080 # 8080
acl Safe_ports port 21 20 17 58 65 # ftp


squid.conf [B---] 0 L:[ 54+17 71/142] *(3623/5708b) 10 0x00A
acl Safe_ports port 8080 # 8080
acl Safe_ports port 21 20 17 58 65 # ftp
acl Safe_ports port 2121 # froxserver
acl Safe_ports port 443 563 # https, snews
acl Safe_ports port 70 # gopher
acl Safe_ports port 210 # wais
acl Safe_ports port 1025-65535 # unregistered ports
acl Safe_ports port 280 # http-mgmt
acl Safe_ports port 488 # gss-http
acl Safe_ports port 591 # filemaker
acl Safe_ports port 777 # multiling http
acl Safe_ports port 5222 # jabber
acl Safe_ports port 5300 # qui
acl Safe_ports port 119 # news
acl Safe_ports port 5190 # icq
acl irc port 6667-6669 #irc
acl CONNECT method CONNECT

acl eor_internet external ldap_users internet
acl eor_itc external ldap_users itc
acl local_eor dstdom_regex eor eor.samara.ru
acl all src 0.0.0.0/0.0.0.0

acl windowsupdate dstdomain -i "/usr/local/etc/squid/windowsupdate"
no_cache deny windowsupdate
http_access allow windowsupdate

acl micro_act dstdom_regex microsoft\.com$
http_access allow micro_act

acl contakt dstdomain -i "/usr/local/etc/squid/contakt"
no_cache deny contakt

http_access allow eor_internet

delay_pools 3
delay_class 1 2
delay_class 2 2
delay_class 3 1
delay_access 3 allow eor_internet
delay_access 3 deny all
delay_parameters 1 -1/-1 1000/500000
delay_parameters 2 -1/-1 10000/1000000
delay_parameters 3 -1/-1 100000/10000000
delay_access 1 deny all
delay_access 2 deny all
delay_access 3 deny all
error_directory /usr/local/etc/squid/errors/ru
#/////////////////////////////LOG///////////////////////////////////////////////
coredump_dir /var/log/squid
access_log /var/log/squid/access.log

20.06.2012 15:10 #260158
"l_cho" написал:
Прописал в конфиге сквида , что бы его не кэшировалacl ebuchisite url_regex ^site.ru$no_cache deny ebuchisite

не увидел

20.06.2012 15:39 #260163
"osorkon" написал:
Прописал в конфиге сквида , что бы его не кэшировалacl ebuchisite url_regex ^site.ru$no_cache deny ebuchisite
не увидел

Удалил эту строку так как она была бесполезна

20.06.2012 16:46 #260174

как то странно. вывод лога при загрузке страницы у меня отличается от вашего

text
# tail -f /var/log/squid/access.log |grep gazprom.ru
1340195203.413    173 192.168.0.98 TCP_MISS/304 283 GET http://www.gazprom.ru/f/1/global/css-min/print.css? - DIRECT/217.151.130.37 -
1340195203.413    173 192.168.0.98 TCP_MISS/304 283 GET http://www.gazprom.ru/f/1/global/css-min/tenders.css? - DIRECT/217.151.130.37 -
1340195203.416    178 192.168.0.98 TCP_MISS/304 285 GET http://www.gazprom.ru/f/1/global/css-min/main-pack.css? - DIRECT/217.151.130.37 -
1340195203.416    178 192.168.0.98 TCP_MISS/304 284 GET http://www.gazprom.ru/f/1/global/css-min/html.css? - DIRECT/217.151.130.37 -
1340195203.418    178 192.168.0.98 TCP_MISS/304 284 GET http://www.gazprom.ru/f/1/global/css-min/contrast.css? - DIRECT/217.151.130.37 -
1340195203.418    178 192.168.0.98 TCP_MISS/304 283 GET http://www.gazprom.ru/f/1/global/css-min/page_analyst.css? - DIRECT/217.151.130.37 -
1340195203.422    178 192.168.0.98 TCP_MISS/304 285 GET http://www.gazprom.ru/f/1/global/js-min/main-pack.js? - DIRECT/217.151.130.37 -
1340195203.509    265 192.168.0.98 TCP_MISS/200 4000 GET http://www.gazprom.ru/f/1/global/js-min/tendersItem.js - DIRECT/217.151.130.37 application/x-javascript
1340195203.822    179 192.168.0.98 TCP_MISS/200 1687 GET http://www.gazprom.ru/f/1/global/i/page_background.png - DIRECT/217.151.130.37 image/png
1340195204.081   1076 192.168.0.98 TCP_MISS/200 34660 GET http://www.gazprom.ru/tenders/2012/06/ - DIRECT/217.151.130.37 text/html
1340195204.088    176 192.168.0.98 TCP_MISS/304 284 GET http://www.gazprom.ru/f/1/global/i/gazprom_logo_140.png - DIRECT/217.151.130.37 -
1340195204.090    177 192.168.0.98 TCP_MISS/304 283 GET http://www.gazprom.ru/f/1/global/i/gazprom_logo_140_w.png - DIRECT/217.151.130.37 -
1340195204.214    174 192.168.0.98 TCP_MISS/304 284 GET http://www.gazprom.ru/f/1/global/i/icons_24.png - DIRECT/217.151.130.37 -
1340195204.271    627 192.168.0.98 TCP_MISS/200 10885 GET http://www.gazprom.ru/f/1/global/i/page_background_footer.png - DIRECT/217.151.130.37 image/png
1340195204.391    478 192.168.0.98 TCP_MISS/200 6095 GET http://www.gazprom.ru/f/1/global/i/gazprom_logo_print.png - DIRECT/217.151.130.37 image/png
1340195204.948   1303 192.168.0.98 TCP_MISS/200 10457 GET http://www.gazprom.ru/f/1/global/i/icons_8.png - DIRECT/217.151.130.37 image/png
1340195205.025    479 192.168.0.98 TCP_MISS/200 10725 GET http://www.gazprom.ru/tenders/json/ru/2012/06/? - DIRECT/217.151.130.37 text/html
1340195205.511    314 192.168.0.98 TCP_MISS/200 731 GET http://ds.addthis.com/red/psi/sites/www.gazprom.ru/p.json? - DIRECT/95.100.220.20 text/javascript

это раз
два: я так понимаю что к вас есть авторизация пользователей? можно ли ее отключить и попробовать загрузить страничку для "анонимного" пользователя.
три: для отлова ошибки попробуйте телнет на порт сквида и GET <spage_url> HTTP/1.1
ENTER 2 раза
вывод сохраните в файл и посмотрите есть ли ваши потеряные элементы

20.06.2012 16:46 · отредактировано #260175

[l_cho],
Интересный конфиг, так у тебя ничего не режется???
Попробуй добавить сюда:

text
hierarchy_stoplist cgi-bin ?

вот это:

text
hierarchy_stoplist js swf jsp asp cgi-bin ?

И еще -- чистим кэш squid-а

20.06.2012 17:07 #260176

Кстати, может в браузере отключена ява??? Судя по логам -- возможно...

21.06.2012 07:18 #260250

Пересоздал КЭШ , в нес строку hierarchy_stoplist js swf jsp asp cgi-bin ?. Все тоже самое . Это проклятье какое-то )

proxy# tail -f /var/log/squid/access.log | grep gazprom.ru
1340248596.028 185 192.168.2.254 TCP_MISS/304 247 GET http://www.gazprom.ru/f/1/global/css-min/main-pack.css? lukashkin DIRECT/217.151.130.37 -
1340248596.040 198 192.168.2.254 TCP_MISS/304 245 GET http://www.gazprom.ru/f/1/global/css-min/page_analyst.css? lukashkin DIRECT/217.151.130.37 -
1340248596.113 271 192.168.2.254 TCP_MISS/200 3069 GET http://www.gazprom.ru/f/1/global/css-min/print.css? lukashkin DIRECT/217.151.130.37 text/css
1340248596.141 298 192.168.2.254 TCP_MISS/200 4436 GET http://www.gazprom.ru/f/1/global/css-min/tenders.css? lukashkin DIRECT/217.151.130.37 text/css
1340248596.213 370 192.168.2.254 TCP_MISS/200 6144 GET http://www.gazprom.ru/f/1/global/css-min/html.css? lukashkin DIRECT/217.151.130.37 text/css
1340248596.352 844 192.168.2.254 TCP_REFRESH_MISS/200 34623 GET http://www.gazprom.ru/tenders/2012/06/ lukashkin DIRECT/217.151.130.37 text/html
1340248596.433 319 192.168.2.254 TCP_REFRESH_MISS/200 3962 GET http://www.gazprom.ru/f/1/global/js-min/tendersItem.js lukashkin DIRECT/217.151.130.37 application/x-javascript
1340248596.493 463 192.168.2.254 TCP_MISS/200 17712 GET http://www.gazprom.ru/f/1/global/css-min/contrast.css? lukashkin DIRECT/217.151.130.37 text/css
1340248597.920 1878 192.168.2.254 TCP_MISS/200 137142 GET http://www.gazprom.ru/f/1/global/js-min/main-pack.js? lukashkin DIRECT/217.151.130.37 application/x-javascript
1340248598.169 193 192.168.2.254 TCP_REFRESH_MISS/200 1649 GET http://www.gazprom.ru/f/1/global/i/page_background.png lukashkin DIRECT/217.151.130.37 image/png
1340248598.173 197 192.168.2.254 TCP_REFRESH_HIT/304 246 GET http://www.gazprom.ru/f/1/global/i/gazprom_logo_140.png lukashkin DIRECT/217.151.130.37 -
1340248598.174 198 192.168.2.254 TCP_REFRESH_HIT/304 246 GET http://www.gazprom.ru/f/1/global/i/page_background_footer.png lukashkin DIRECT/217.151.130.37 -
1340248598.178 201 192.168.2.254 TCP_MISS/304 245 GET http://www.gazprom.ru/f/1/global/i/gazprom_logo_140_w.png lukashkin DIRECT/217.151.130.37 -
1340248598.356 379 192.168.2.254 TCP_REFRESH_MISS/200 6057 GET http://www.gazprom.ru/f/1/global/i/gazprom_logo_print.png lukashkin DIRECT/217.151.130.37 image/png
1340248598.363 193 192.168.2.254 TCP_REFRESH_HIT/304 246 GET http://www.gazprom.ru/f/1/global/i/icons_24.png lukashkin DIRECT/217.151.130.37 -
1340248598.460 483 192.168.2.254 TCP_REFRESH_MISS/200 10419 GET http://www.gazprom.ru/f/1/global/i/icons_8.png lukashkin DIRECT/217.151.130.37 image/png
1340248598.838 388 192.168.2.254 TCP_MISS/200 9908 GET http://www.gazprom.ru/tenders/json/ru/2012/06/? lukashkin DIRECT/217.151.130.37 text/html

21.06.2012 10:22 · отредактировано #260270
"l_cho" написал:
acl QUERY urlpath_regex cgi-bin \?
"KRUTO" написал:
Попробуй добавить сюда:hierarchy_stoplist cgi-bin ?вот это:hierarchy_stoplist js swf jsp asp cgi-bin ?

а надо ли?
может лучше вообше скрипты кешем не обслушивать?

acl QUERY urlpath_regex cgi-bin js swf jsp asp \?
no_cache deny QUERY
21.06.2012 10:46 #260274

Вчера создал виртуальную машину со SQUD правил кроме как на порты не писал , вообщем пустой. А страничка не грузится. Отключил КЭШИРОВАНИЕ скриптов. И снова теже рога. А у вас отображается документ pdf на страничке сайта ?

21.06.2012 11:24 #260281
"osorkon" написал:
а надо ли?может лучше вообше скрипты кешем не обслушивать?

hierarchy_stoplist -- так это и означает: не брать из кеша

"l_cho" написал:
А у вас отображается документ pdf на страничке сайта ?

Там pdf есть??? Там же zip какой-то, который вообще не открывается...

21.06.2012 11:38 #260282
"KRUTO" написал:
hierarchy_stoplist -- так это и означает: не брать из кеша

это означает приостановить обработку обьекта в иерархии кешей и вытянуть его из локального.

21.06.2012 11:53 #260284
"osorkon" написал:
acl QUERY urlpath_regex cgi-bin  js swf jsp asp \?no_cache deny QUERY

Тогда лучше так!

21.06.2012 14:24 #260314

Вообщем все безнадежно (((

21.06.2012 16:25 #260362

проблема в неподдержке прокси-сервером протокола
> HTTP 1.1:
нужен SQUID 3.1

Войдите или зарегистрируйтесь, чтобы ответить.