Proxy freeze

Société Locate

Re: Proxy freeze

New postby ypatel » Thu Mar 08, 2012 6:36 am

Suite aux passage de la version version: 1.6.030122 la semaine derniere
je constate que le proxy a ralentit.

d'habitude a 10h00 du matin, je n'arrive jamais a Load average: 0.84
Et vers 12h00 - 14h00 je passe meme a 1.10 - 1.30 voir 1.50

alors que je n'avais pas cela les semaines d'avant

Interface artica un peu plus lente d’affichage (lorsque je vais voir les services, ca prend 10-15 seconde contre 5 sec auparavant
A 0.70, je ne peux plus surfer, tous les users sont bloqués.
J'ai mis a jour squid 3.2.0.15-20120306-r11529 ca n'a rien changé.
C'est surtout que les freeze et time out qu'il y avait auparavant semble etre revenue sur la derniere MAJ d'artica, j'ai ensuite mis squi a jour, mais rien changé.
Peut etre une config à faire


je dois relancer le proxy

chose bizarre, dans le squid
Squid cache proxy: running
process ID: 18639
Memory: 20.25 MB
Virtual Memory: 1.63 GB <= normalement il doit etre a 4Go environ, apres relance du service, il revient a 4Go, mais l'interface reste aussi lente
processes: 2
version: 3.2.0....
since: 6h 6mn 51s




SquidGuard HTTP service: running
process ID: 4216
Memory: 9.39 MB
Virtual Memory: 46.14 MB
processes: 2
version: 1.4.26
since: 15h 40mn 3s


UfdbGuard Web Filter: running
process ID: 4709
Memory: 8.34 MB
Virtual Memory: 31 MB
processes: 1
version: 1.29
ypatel
 
Posts: 79
Joined: Fri Aug 22, 2008 1:05 am

Re: Proxy freeze

New postby admin » Thu Mar 08, 2012 12:15 pm

Ton problème à été découvert

Mon post ici :
http://www.mail-archive.com/squid-users ... 83720.html

Solution ici :
viewtopic.php?f=39&t=5288&start=20#p24357

Je pense pas que le passage à 10.000.000 d'entrées dans les base de filtrage ralenti la machine... :D
User avatar
admin
Site Admin
 
Posts: 11954
Joined: Wed Oct 17, 2007 7:59 am
Location: France

Re: Proxy freeze

New postby ypatel » Thu Mar 08, 2012 1:11 pm

EDIT : je viens de voir le spost dan sla reponse, je passe les commandes, content de voir qu ej'etais pas le seul

Merci, je te tiens informé


Ouip
si j'ai bien compris c'est un probleme de core qui ne serait pas activé ?
je en vois pas bien la solution, un tuc du genre : ulimit -c unlimited fait l'affaire ou pas ?
tu peux etre plus precis stp

Merci


ps : je ne pense pas aussi que l'augmentation du nbre de filtage ralentisse la machine, mais le bug venait a chaque Update je pense
ypatel
 
Posts: 79
Joined: Fri Aug 22, 2008 1:05 am

Re: Proxy freeze

New postby ypatel » Thu Mar 08, 2012 4:13 pm

J'ai fais la MAJ vers squid 3.2.16
je n'ai pas vu d'amélioration significative qu'en dehors que la charge CPU est passé a 75% (3.6) alors que je depassais rarement les 15%
d'autant plus que les bureaux sont fermé depuis 2H.
Attachments
SQUID-32016.jpg
SQUID-32016.jpg (54.96 KiB) Viewed 7094 times
ypatel
 
Posts: 79
Joined: Fri Aug 22, 2008 1:05 am

Re: Proxy freeze

New postby admin » Thu Mar 08, 2012 10:50 pm

C'est normal, il ya un temps de reconstruction des caches
User avatar
admin
Site Admin
 
Posts: 11954
Joined: Wed Oct 17, 2007 7:59 am
Location: France

Re: Proxy freeze

New postby ypatel » Fri Mar 09, 2012 4:21 am

Mouips

Ca a rien changé : sur l'interface web, j'ai que des time out, comme je te dit c'est devenu super lent
An error has occurred making the request: timeout

Ce matin, le cache de squid etait anormalement bas (1Go) et pas d'internet j'ai relancé le service pour que ca reparte

load average : 1.7 / mem : 25%

la ca a empiré les choses.
Comme on est vendredi, je pense qu'on sera pas trop embêté avec les lecteur d'internet du au proxy et peut etre qu'une update de squid sortira entre temps.

je te poste quelques lignes de log :

2012-03-09 08:03:34 Fatal: unable to import data file /tmp/artica-php91p1e8
exec.update.blacklist.instant.php - Execute() line:137
update
2012-03-09 08:03:29 Fatal: /tmp/artica-phpgTTDaS not an array.
27: -> Execute()...
62: Execute()...
88: -> CleanDB()...
91: -> fishTank()...
256: Fatal: Fatal: Need 120mn currently 60Mn
119: Checks INDEX_DAYS
132: downloading http://www.artica.fr/instant-blks/1325724348.dat
135: downloading http://www.artica.fr/instant-blks/1325724348.dat done, took less than a minute
136: Injecting /tmp/artica-php4xJmZ5 2238349 bytes...
165: inject(/tmp/artica-php4xJmZ5)
132: downloading http://www.artica.fr/instant-blks/1328806842.dat
135: downloading http://www.artica.fr/instant-blks/1328806842.dat done, took less than a minute
136: Injecting /tmp/artica-phpn8ZJnx 2259365 bytes...
165: inject(/tmp/artica-phpn8ZJnx)
132: downloading http://www.artica.fr/instant-blks/1328828428.dat
135: downloading http://www.artica.fr/instant-blks/1328828428.dat done, took less than a minute
136: Injecting /tmp/artica-phpgTTDaS 2159802 bytes...
165: inject(/tmp/artica-phpgTTDaS)
exec.update.blacklist.instant.php - inject() line:170
update
2012-03-09 08:03:29 Fatal: unable to import data file /tmp/artica-phpgTTDaS
exec.update.blacklist.instant.php - Execute() line:137
update
2012-03-09 08:02:43 Fatal: /tmp/artica-phpyqImKC not an array.
27: -> Execute()...
62: Execute()...
88: -> CleanDB()...
91: -> fishTank()...
256: Fatal: Fatal: Need 120mn currently 60Mn
119: Checks INDEX_DAYS
132: downloading http://www.artica.fr/instant-blks/1325724348.dat
135: downloading http://www.artica.fr/instant-blks/1325724348.dat done, took less than a minute
136: Injecting /tmp/artica-phpkOnrIZ 1936049 bytes...
165: inject(/tmp/artica-phpkOnrIZ)
132: downloading http://www.artica.fr/instant-blks/1328806842.dat
135: downloading http://www.artica.fr/instant-blks/1328806842.dat done, took less than a minute
136: Injecting /tmp/artica-phpyqImKC 2233533 bytes...
165: inject(/tmp/artica-phpyqImKC)
exec.update.blacklist.instant.php - inject() line:170
update
2012-03-09 08:02:43 Fatal: unable to import data file /tmp/artica-phpyqImKC
exec.update.blacklist.instant.php - Execute() line:137
update
2012-03-09 08:02:38 Fatal: /tmp/artica-phpn8ZJnx not an array.
27: -> Execute()...
62: Execute()...
88: -> CleanDB()...
91: -> fishTank()...
256: Fatal: Fatal: Need 120mn currently 60Mn
119: Checks INDEX_DAYS
132: downloading http://www.artica.fr/instant-blks/1325724348.dat
135: downloading http://www.artica.fr/instant-blks/1325724348.dat done, took less than a minute
136: Injecting /tmp/artica-php4xJmZ5 2238349 bytes...
165: inject(/tmp/artica-php4xJmZ5)
132: downloading http://www.artica.fr/instant-blks/1328806842.dat
135: downloading http://www.artica.fr/instant-blks/1328806842.dat done, took less than a minute
136: Injecting /tmp/artica-phpn8ZJnx 2259365 bytes...
165: inject(/tmp/artica-phpn8ZJnx)
exec.update.blacklist.instant.php - inject() line:170
ypatel
 
Posts: 79
Joined: Fri Aug 22, 2008 1:05 am

Re: Proxy freeze

New postby ypatel » Fri Mar 09, 2012 4:46 am

Alors la ca bug grave
le disque vient de perdre 300 Go en moins de 10 minutes

je vais reconstruire les caches pour voir si c'est mieux, mais des que tu peux jette un oeil,

Merci
EDIT
bon en verfiant en ligne de commande, l'espace disk semble oK.
j'ai pus l'impression qu'il calcule 391Go sur 452 soit 91% occupé, un peu a l'envers

Par contre, il faut reconstruire les caches car le squid2-3 etait ace 200Go / 5Go, j'ai mis a 4Go la reconstruction est en cours, mais comme les gens utilisent le proxy en meme temps, c'est un peu galere, il faudra le vérifier et refaire la manip entre 12-14h (09-11h france) je serai absent pendant cette période

Sys. de fichiers Tail. Occ. Disp. %Occ. Monté sur
/dev/sda1 452G 391G 39G 91% /
none 2,0G 200K 2,0G 1% /dev
none 2,0G 1,8M 2,0G 1% /dev/shm
none 2,0G 1,1M 2,0G 1% /var/run
none 2,0G 0 2,0G 0% /var/lock
none 2,0G 0 2,0G 0% /lib/init/rw
tmpfs 512M 8,0M 505M 2% /var/lib/php5
Attachments
FATAL.png
FATAL.png (131.68 KiB) Viewed 7090 times
2012-03-09 08-41-08.jpg
2012-03-09 08-41-08.jpg (204.05 KiB) Viewed 7090 times
ypatel
 
Posts: 79
Joined: Fri Aug 22, 2008 1:05 am

Re: Proxy freeze

New postby admin » Fri Mar 09, 2012 11:35 am

je t'ai envoyé un email...
Je te tiens au courant sur le post que j'ai fais dans la liste squid.
User avatar
admin
Site Admin
 
Posts: 11954
Joined: Wed Oct 17, 2007 7:59 am
Location: France

Re: Proxy freeze

New postby ypatel » Sun Mar 11, 2012 10:48 am

Ok mai spour lundi matin, si tu peux faire en sorte ou m'nevoyer par mail les dossier/fichiers que je peux supprimer car a l'instant, j'ai 490Go /492 go sur le disque qui est a nouveau plein a 100% alors que proxy pas utilisé samedi + dimanche au bureau
ypatel
 
Posts: 79
Joined: Fri Aug 22, 2008 1:05 am

Re: Proxy freeze

New postby ypatel » Mon Mar 12, 2012 4:24 am

Merci , il est 08h20 tout fonctionne normalement, pas de saturation de disque depuis la derniere upgrade d'artica.
Je vous tiens informé si je vois une anomalie.
Merci encore David.
ypatel
 
Posts: 79
Joined: Fri Aug 22, 2008 1:05 am

Previous

Return to LOCATE

Who is online

Users browsing this forum: No registered users and 1 guest

cron