Squid3 - Nova interface grafica com proxy normal, reverso e Sync via XMLRPC

marcelloc

Pessoal,

Terminei a nova versão do pacote squid3.

Juntei o squid-reverse e o squid3 em um único pacote separando as funções de proxy normal e proxy reverso em menus distintos.

Esta nova versão inclui também a aba para sincronia das configurações com outro squid3 no pfsense.

att,
Marcello Coutinho

mantunespb

Marcelo,

Para testar, tem que tirar os outros squid+squidguard ??

marcelloc

@mantunespb:

Marcelo,

Para testar, tem que tirar os outros squid+squidguard ??

Em um ambiente de testes você faz o seguinte:

Instala o pacote squidguard + squid-reverse.

vai na console e remove o squid 3.1.9, squid 2.7.x e o squid guard.

roda o pkg_add para colocar o squid3 e o squidguard do link acima.

transfere e extrai os arquivos da gui na pasta /usr/local/pkg

att,
Marcello Coutinho

marcelloc

Atualizei o pacote, quem quiser testar agora, basta instalar o squid3 a partir da lista de pacotes no pfsense.

Não esqueçam o feedback ;)

ccesario

@marcelloc:

Atualizei o pacote, quem quiser testar agora, basta instalar o squid3 a partir da lista de pacotes no pfsense.

Não esqueçam o feedback ;)

Marcello, como ficou a questão do squidGuard?

Ao tentar instalá-lo, o squid-2.7.9_1 é instalado junto, bagunçando o squid3

att,

marcelloc

@ccesario:

Marcello, como ficou a questão do squidGuard?

O squidguard é mantido pelo coreteam, portanto não vou alterá-lo.

Para rodar o squidguard com o squid3, siga esta sequencia de instalação:

Instala o squidguard via system-> packages
vai na console e delete o squid e o squidguard com o pkg_delete
instala o squid3 via system-> packages
Volta na console e adiciona o squidguard do meu repositório.

gst.freitas

Instala o squidguard via system-> packages

vai na console e delete o squid e o squidguard com o pkg_delete

instala o squid3 via system-> packages

Volta na console e adiciona o squidguard do meu repositório.

Marcelo,

Estou querendo testar, mas poderia ser mais experifico com relação ao pkg_delete e adicionar via console via o seu repositório o squidguard..

marcelloc

@gst.freitas:

Estou querendo testar, mas poderia ser mais experifico com relação ao pkg_delete e adicionar via console via o seu repositório o squidguard..

Remover o squidguard:
pkg_delete squidGuard-1.4_4
pkg_delete squid-2.7.9_1

Instalar o squidguard sem a dependência do squid2:

i386
pkg_add -r http://e-sac.siteseguro.ws/packages/8/All/squidGuard-1.4_4.tbz

amd64
pkg_add -r http://e-sac.siteseguro.ws/packages/amd64/8/All/squidGuard-1.4_4.tbz

ccesario

Marcello,

Hoje eu instalei outra máquina e testei constantemente o squid-2.7.9 e tudo pareceu OK.

Então instalei o pacote do squid3 e está sendo apresentado muitos erros (o tcp miss/503 que comentei contigo). Será algum problema com essa versão de squid ?

Alguém mais pode testar e reportar por favor?!

Voce esta tendo esse tipo de problema ?

att,

marcelloc

@ccesario:

Voce esta tendo esse tipo de problema ?

Não percebi este erro, pra mim esta navegando ok. Consegui até testar o proxy reverso com ssl e funcionou 100%

Procura por erros no /var/squid/logs/cache.log

ccesario

@marcelloc:

Procura por erros no /var/squid/logs/cache.log

Ja procurei, nada de erros…

Isso ocorre principalmente em posts de formulários.

Detalhe: Estou usando o modo transparente.

att,

marcelloc

@ccesario:

Detalhe: Estou usando o modo transparente.

Não estou usando modo transparente.

Consegue testar ele em modo normal?

ccesario

@marcelloc:

@ccesario:

Detalhe: Estou usando o modo transparente.

Não estou usando modo transparente.

Consegue testar ele em modo normal?

Em modo normal não ocorre o problema. Testei ontem e hoje novamente.

marcelloc

Vou tentar simular este erro aqui.

ccesario

@marcelloc:

Vou tentar simular este erro aqui.

Conseguiu simular algo ?

marcelloc

Ainda não, aqui em casa eu so tenho o virtualbox pra testar.

Vou subir duas vms a noite para testar isso.

ccesario

@marcelloc:

Ainda não, aqui em casa eu so tenho o virtualbox pra testar.

Vou subir duas vms a noite para testar isso.

Tranquilo!

Acho que vou pedir pro gringos, quem sabe alguém também pode testar.
Vou questionar no seu post. http://forum.pfsense.org/index.php/topic,48347.msg255176.html#msg255176

Ok!?

marcelloc

Claro, aumentando a quantidade de testes fica mais fácil saber se é bug do squid 3 ou algo específico com seu setup.

ccesario

Marcello,

Apenas para informação:
Copiei as configs do squid do Pfsense para o squid (versão Squid Cache: Version 3.1.14) que tenho em uma máquina linux x64, o problema não ocorreu :-\

marcelloc

Consegue fazer um diff dos arquivos?

ccesario

@marcelloc:

Consegue fazer um diff dos arquivos?

d
Diff? Copiei as mesmas configs do Pfsense para o Linux. Mudei apenas os paths.

marcelloc

So mudando os paths com a versão 3.1.14 nao deu problema…

Estou ficando sem ideias. Se o cache.log tivesse alguma informação relevante,ficaria mais fácil diagnosticar.
consegue testar com a versão 3. 1.9 disponível no files.pfsense.org?

ccesario

@marcelloc:

consegue testar com a versão 3. 1.9 disponível no files.pfsense.org?

ja testei tambem, mesmo problema.
Voce chegou a testar?

marcelloc

Ainda não, o virtualbox não ajuda nestes casos.

Vou tentar com um pfsense e um Ubuntu ~~antes de ir dormir.~~ amanhã.

marcelloc

Pessoal,

Depois de ler um pouco a wiki do squid, achei interessante incluir na versão 2.0.3 as opções de cache de conteúdo dinamico sugeridas pelo site/desenvolvedores do squid.

Isto deve melhorar o cache hit do seu squid.

att,
Marcello Coutinho

ccesario

@marcelloc:

Ainda não, o virtualbox não ajuda nestes casos.

Vou tentar com um pfsense e um Ubuntu ~~antes de ir dormir.~~ amanhã.

Sem problema, só me deixe saber do seu teste.

Pedi a outra pessoa para testar e me relatou a mesma coisa.

marcelloc

ccesario,

Compilei o squid3 com os parametros selecionados na imagem.

Instala o squid3 do meu repositorio e testa para ver se resolve o problema.

amd64
http://e-sac.siteseguro.ws/packages/amd64/8/All/squid-3.1.19.tbz

i386
http://e-sac.siteseguro.ws/packages/8/All/squid-3.1.19.tbz

mantunespb

Marcelo,

que discriminação é essa com IPFW !!!

;D ;D ;D ;D ;D ;D

marcelloc

@mantunespb:

que discriminação é essa com IPFW !!!

Pelo contrario mantunespb :), a compilação original tem o ipfw para resolver a questão do captiveportal + proxy não transparente.

Porem contudo todavia, como o ccesario esta tendo problemas com o proxy transparente, removi algumas opções de compilação para ver se resolve.

att,
Marcello Coutinho

ccesario

@marcelloc:

ccesario,

Instala o squid3 do meu repositorio e testa para ver se resolve o problema.

amd64

Marcello, após instalar o pacote http://e-sac.siteseguro.ws/packages/amd64/8/All/squid-3.1.19.tbz o problema desapareceu.
O_o

Estarei realizando mais testes aqui e log mais posto os resultados.

Obrigado

att,

marcelloc

@ccesario:

Marcello, após instalar o pacote http://e-sac.siteseguro.ws/packages/amd64/8/All/squid-3.1.19.tbz o problema desapareceu.
O_o

Excelente! :)

ccesario

Voce pode postar no forum gringo, quem sabe o Nachtfalke também não testa!

Ativei o squidGuard também e até o momento está normal.

ps. Você viu os arquivos que lhe enviei!?

att,

marcelloc

@ccesario:

Voce pode postar no forum gringo, quem sabe o Nachtfalke também não testa!

Ativei o squidGuard também e até o momento está normal.

ótimo

@ccesario:

ps. Você viu os arquivos que lhe enviei!?

Ainda não, dia cheio.

marcelloc

Publicada a versão 2.0.4 com:

Correções de bugs e erros de digitação
Aba upstream renomeada para remote cache e com opção para cadastrar vários caches remotos no modo peer ou sibling
Novo binário com correções no transparent proxy e no cache de conteúdo dinamico

Agradecimento especial ao ccesario pelos testes e feedbacks.

Um ponto interessante é que agora o squid3 tem mais opções de configuração na interface gráfica que a versão 2 :)

babingthon

esse squid3 é uma pacote melhorado do squid ou fazer coisa destintas?

ccesario

@marcelloc:

Publicada a versão 2.0.4 com:

Correções de bugs e erros de digitação

Aba upstream renomeada para remote cache e com opção para cadastrar vários caches remotos no modo peer ou sibling

Novo binário com correções no transparent proxy e no cache de conteúdo dinamico

Agradecimento especial ao ccesario pelos testes e feedbacks.

Um ponto interessante é que agora o squid3 tem mais opções de configuração na interface gráfica que a versão 2 :)

Marcello,

Obrigado pelo agradecimento, pode contar quando precisar :)

Seguinte, existe algo de estranho no novo pacote.

Um gringo ja mencionou
http://forum.pfsense.org/index.php/topic,48347.msg256799.html#msg256799

Eu também testei aqui no modo transparente e normal.

O modo transparente apresenta esse mesmo problema descrito.

O modo normal apresenta várias mensagens no system.log

Apr 20 08:32:27 fw (squid): The dnsserver helpers are crashing too rapidly, need help!
Apr 20 08:32:27 fw kernel: pid 20716 (dnsserver), uid 62: exited on signal 11
Apr 20 08:32:27 fw kernel: pid 20888 (dnsserver), uid 62: exited on signal 11
Apr 20 08:32:27 fw kernel: pid 21101 (dnsserver), uid 62: exited on signal 11
Apr 20 08:32:31 fw kernel: pid 22444 (dnsserver), uid 62: exited on signal 11
Apr 20 08:37:38 fw kernel: pid 58827 (dnsserver), uid 62: exited on signal 11
Apr 20 08:37:38 fw kernel: pid 58934 (dnsserver), uid 62: exited on signal 11
Apr 20 08:37:41 fw kernel: pid 59170 (dnsserver), uid 62: exited on signal 11
Apr 20 08:38:50 fw kernel: pid 42322 (dnsserver), uid 62: exited on signal 11
Apr 20 08:39:06 fw kernel: pid 42462 (dnsserver), uid 62: exited on signal 11
Apr 20 08:40:08 fw kernel: pid 32763 (dnsserver), uid 62: exited on signal 11
Apr 20 08:40:09 fw kernel: pid 33102 (dnsserver), uid 62: exited on signal 11
Apr 20 08:41:19 fw kernel: pid 33194 (dnsserver), uid 62: exited on signal 11
Apr 20 08:41:19 fw kernel: pid 33349 (dnsserver), uid 62: exited on signal 11
Apr 20 08:42:13 fw kernel: pid 33657 (dnsserver), uid 62: exited on signal 11
Apr 20 08:43:13 fw kernel: pid 47682 (dnsserver), uid 62: exited on signal 11
Apr 20 08:43:19 fw kernel: pid 47879 (dnsserver), uid 62: exited on signal 11