Netgate Discussion Forum
    • Categories
    • Recent
    • Tags
    • Popular
    • Users
    • Search
    • Register
    • Login

    INSTALANDO LUSCA EN PFSENSE (Caché youtube y contenidos dinámicos)

    Scheduled Pinned Locked Moved Español
    50 Posts 13 Posters 44.6k Views
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • E
      eduardcaballero
      last edited by

      Tocara esperar que los expertos en esto adapten el código porque quede  :-\ ??? :o

      1 Reply Last reply Reply Quote 0
      • H
        Himeki
        last edited by

        @amnarl:

        Buenas amigos!! Saludos desde venezuela barquisimeto, estuve revisando este hilo y me parecio interesante ya que desarrollo varias redes de un pequeño WISP en produccion con algunos clientes conectado y como todos saben en venezuela el ahorro de ancho de banda es necesario. Note que al hacer lo que cesar y kalelsito estaban explicando de sus avances en el uso de lusca-cache en pfsense version 2.01 y 2.02 el service squid se detiene al usar ese archivo storeurl.pl que indican en el link probado en la version 2.01. Razon por la cual me toco investigar algo para encontrar un desarrollo mas actualizado del estoreurl.pl y que realmente funcione ya lo he puesto en marcha 2 dias funcionando y haciendo full cache. Si alguien necesita algo sobre este tema estoy totalmente a la orden.
        Agradecido a los autores principales de este Hilo (Cesar y kalelsito)

        Buenas amigo seria bueno que publicases donde conseguiste el desarrollo mas actualizado del estoreurl.pl y pues que compartieses tus experiencias con este

        1 Reply Last reply Reply Quote 0
        • A
          amnarl
          last edited by

          Saludos Cordiales !! Mi estimados un poco perdido de aca les puedo seguir compartiendo que hasta ahora el server sigue haciendo cache a ya mas de un mes funcionando del contenido consultado por usuarios clientes del server un 30 % son hit enviados por lusca. Al amigo Himeki que posteo de ultimo aca le indico que he compartido en la parte de arriba de este hilo mi experiencia inclusive el archivo storeurl usado al momento de la instalacion del servidor y una pequeña imagen de muestra de hits enviados por el mismo. Sigo a su ordenes

          Configuracion y puesta en marcha de servers incluyendo pfsense en areas de produccion, para administrar y proveer servicios . Servicio tecnico presencial y online. Reparacion y mantenimiento de computadores. Instalacion y actualizacion de sistemas (Linux, Windows,Os/2) Conectividad a internet en zonas del Estado Lara donde no hay red cableada.
          http://www.linkedin.com/pub/amnarlyei-goitia/66/b2/722

          1 Reply Last reply Reply Quote 0
          • H
            Himeki
            last edited by

            Gracias y pido disculpas no me había percatado que lo habías posteado, saludos

            1 Reply Last reply Reply Quote 0
            • A
              amnarl
              last edited by

              Saludos mis estimados cuenten como les ha ido con el cacheo de contenidos dinamicos ???? De mi parte les cuento que el servidor que les habia comentado en el cual se esta implementando esto. esta funcionando super bien ya varios meses de uso y nuevos clientes conectados y ha llegado hasta 30 % de ahorro con el cache de contenidos dinamicos. Son clientes que mas que nada usan mucho paginas como youtube, facebook, entre otras ….. Saludos desde barquisimeto venezuela

              Configuracion y puesta en marcha de servers incluyendo pfsense en areas de produccion, para administrar y proveer servicios . Servicio tecnico presencial y online. Reparacion y mantenimiento de computadores. Instalacion y actualizacion de sistemas (Linux, Windows,Os/2) Conectividad a internet en zonas del Estado Lara donde no hay red cableada.
              http://www.linkedin.com/pub/amnarlyei-goitia/66/b2/722

              1 Reply Last reply Reply Quote 0
              • V
                vatlab
                last edited by

                Buenas amigos. He instalado en la ultima version de pFsense el servicio Lusca cache y, si bien al dar inicio al programa veo que informa que se ha cargado el mismo, cuando miro en los status de servicios que corren, el Lusca aparece STOPEADO.

                Al darle  click en Services–>Proxy server me tira un error "Warning: dir(/usr/local/etc/squid/errors/): failed to open dir: No such file or directory in /etc/inc/pfsense-utils.inc on line 417 Fatal error: Call to a member function read() on a non-object in /etc/inc/pfsense-utils.inc on line 418 "

                No obstante el error, si cargo manualmente para que aparezcan las demas opciones de Proxy Server, por ejemplo: http://192.168.xx.xxx/pkg_edit.php?xml=squid_cache.xml&id=0 aparecen sin inconvenientes, pero nunca el primero o sea la pestaña General

                Como en esa pestaña esta la opciòn de activacion, no puedo hacerlo correr. Si alguno de ustedes me pudiera indicar que puede estar pasando se los agradeceria.

                A proposito, los enlaces que refrencian a archivos de configuracion en el post no funcionan.

                Muchas gracias. Victorino

                1 Reply Last reply Reply Quote 0
                • V
                  vatlab
                  last edited by

                  Ese tema se ha solucionado, le faltaba crear un directorio llamado "errors" y debido a ello no cargaba el squid.xml correspondiente a la pestaña "General".
                  No obstante ello, aun no puedo hacerlo funcionar porque sigue STOPPED en los Status de Servicios.

                  He estado mirando y aparentemente faltan o hay que modificar algunos archivos "incluidos" en alguno de los directorios ….. seguire investigando ...

                  Victorino

                  1 Reply Last reply Reply Quote 0
                  • A
                    amnarl
                    last edited by

                    Saludos mi estimados colegas!!! Le informo que esta semana algunos clientes administrados con el pfsense en producción haciendo cacheo de contenidos con lusca empezaron a presentar una falla común que al final terminamos pensando es lusca quien la genera. Hablo de la carga de videos de youtube que se paran y dan este gran conocido error como se muestra "acá" redsoporte.com.ve/lusca/error_youtube.jpg fijense en la imagen se navega con mozilla firefox el cual al momento no tiene los plugins como " adobe flash player" actualizados ni activos y genera el dichoso error a diferencia de el navegador google chrome que al momento tiene los plugins actualizado al menos de "adobe flash player" y se ve el vídeo sin problemas como se muestra aca redsoporte.com.ve/lusca/video_normal. En conclusión a nivel informático en general una falla puede ser ocasionada por muchas causales solo habría que investigar y revisar a fondo cual de todas esas puede estar ocasionado nuestra falla en especifico. Seguimos a la orden por este medio

                    Configuracion y puesta en marcha de servers incluyendo pfsense en areas de produccion, para administrar y proveer servicios . Servicio tecnico presencial y online. Reparacion y mantenimiento de computadores. Instalacion y actualizacion de sistemas (Linux, Windows,Os/2) Conectividad a internet en zonas del Estado Lara donde no hay red cableada.
                    http://www.linkedin.com/pub/amnarlyei-goitia/66/b2/722

                    1 Reply Last reply Reply Quote 0
                    • L
                      lem13631363
                      last edited by

                      hola buenas un gusto saludarlos queria agradecer ante mano a todos por sus aportes, queria compartir mi experiencia
                      hice todos los pases indicados , al querer ejecutar el  tail -f access.log | grep TCP_HIT

                      al parecer funciona pero  cuando eligo un video y luego quiero ver el mismo video de otra pc simplemente no carga o pareciera q carga pero se pone oscura y sale un error que vuelva a intentarlo mas tarde . alguien le paso lo mismo?

                      1 Reply Last reply Reply Quote 0
                      • A
                        amnarl
                        last edited by

                        Saludos mi estimado!! tiempo sin postearles por aca las experiencias. Les comento que estoy probando actualmente el uso de "Haarpcache" sobre squid3 y va super bien hasta ahora. Obviamente este cambio fue dado en miras de tomar en cuenta lo que el compañero bellera y otros han comentado anteriormente que el rendimiento es mejor usando squid fuera de pfsense. Ademas luego de usar el squid en pfsense y hacer cache dinamico note que los usuarios consumian mas ancho de banda en los siguientes renglones (Youtube, videos pornos y facebook)En mi caso como les habia comentado el pfsense lo tengo virtualizado en virtualbox y por razones de recursos el rendimiento y crecimento de la red en produccion ya estaban afectando el cacheo en la red!!! O mejor dicho la velocidad de navegacion.  Seguimos igual a la orden para cualquier duda sobre esto. Por cierto al compañero "lem13631363" si puede cuelgue una imagen del error que le da para colaborarle

                        Configuracion y puesta en marcha de servers incluyendo pfsense en areas de produccion, para administrar y proveer servicios . Servicio tecnico presencial y online. Reparacion y mantenimiento de computadores. Instalacion y actualizacion de sistemas (Linux, Windows,Os/2) Conectividad a internet en zonas del Estado Lara donde no hay red cableada.
                        http://www.linkedin.com/pub/amnarlyei-goitia/66/b2/722

                        1 Reply Last reply Reply Quote 0
                        • L
                          lem13631363
                          last edited by

                          http://redsoporte.com.ve/lusca/error_youtube.jpg  me pasa exactamente lo mismo, explico cargo un video de youtube  y genial cargo otro y genial pero cuando quiero volver a ver el anterior video sale ese mensaje  q vuelva a intentarlo mas tarde , tb uso virtualbox … y abro otro virtual y quiero abrir esos video que ya abri anterior mente y me carga pero sale ese mensaje de error. antemano muchas gracias por tu pronta respuesta .

                          1 Reply Last reply Reply Quote 0
                          • belleraB
                            bellera
                            last edited by

                            Es como si Google tuviera intereses en llenar el ancho de banda de los usuarios. Siempre anda trasteando con la forma de servir los vídeos.

                            Pronto hará 2 años:
                            http://forum.pfsense.org/index.php/topic,45558.msg238336.html#msg238336

                            1 Reply Last reply Reply Quote 0
                            • belleraB
                              bellera
                              last edited by

                              Casualidad. Acabo de recibir esto:

                              Videocache 2.3.1 is available now
                              We hope you are having a great time caching videos with Videocache. There has been a migration by Youtube and now the videos are served from googlevideo servers instead of Youtube servers. We have patched videocache to accommodate the changes. You can claim your free upgrade by replying to this email stating the email address used for purchasing Videocache. In case you have any queries, feel free to contact us using email or via our website.

                              Es decir, antes los vídeos se servían desde el dominio youtube.com y ahora se sirven desde el dominio googlevideo.com

                              El 17-diciembre-2013 tuve que ajustar precisamente una estructura de proxys+filtros para dicho cambio.

                              1 Reply Last reply Reply Quote 0
                              • A
                                amnarl
                                last edited by

                                Saludos a todos!! y a usted en especial maestro bellera que nos has brindado su apoyo y experiencia no solo con Pfsense sino con estructuras optimizadas de redes… Es correcto hoy en dia existen este tipo de situaciones para aquellos que deseamos prestar servicios optimos y mas con una poblacion de clientes que hoy en dia el mayor consumo de ancho de banda se basa en dos importantes webs youtube y facebook. Actualmente les ratifico que obedeciendo primeramente a aquellos grandes maestro des estos menesteres (bellera, periko, keikurono, entre otros) y a mis clientes con son los numeros 1 en consumo de ancho de banda basicamente con los servicios que ofrecen las webs antes mencionada me he visto en la obligacion y ademas he estado alentado en estudiar-poner en practica la implementacion de los servicios: Squid, apache y dns, en servidor fuera de pfsense. Creando por protocolos de seguridad una  dmz donde estan ubicados los servidores y la red lan de servicios a clientes locales . Hasta ahora me ha ido de maravillas trabajando de esta forma lo recomiendo ampliamente. Lo unico nuevo que antes ya creo haber mencionado es que estoy trabajando con un programa llamado "Haarpcache" sobre debian junto a squid3 obviamente como lo dice su nombre para hacer cacheo y sobre todo de contenido de las webs que me llevaba de cabeza con el consumo de ancho de banda. Ademas uso squid no transparente para controlar completamente la prestacion de los servicios teniendo el control de ellos y restrigiendo lo que se deba para optimizar la conexion y el uso de la misma. Si desea echarle un vistazo a Haarpcache y probarlo aca les comparto el link http://perufw.wordpress.com/2013/02/11/instalando-haarpcache-v1-1-un-cache-inteligente/ vale pena probarlo sobre el sistema operativo de su preferencia ademas su creador el amigo "Keikurono" ha trabajado duro en el mismo y lo ha optimizado para ser usado por todos aquellos que somos WISP o por que no para una red empresarial donde algun compañero se desarrolle y quizas el cacheo de contenido le sumaria unos grandes puntos en la optimizacion de servicios. Igualmente sigo a la orden con todo aque que necesite ayuda en cuanto a esto Saludos desde venezuela

                                Configuracion y puesta en marcha de servers incluyendo pfsense en areas de produccion, para administrar y proveer servicios . Servicio tecnico presencial y online. Reparacion y mantenimiento de computadores. Instalacion y actualizacion de sistemas (Linux, Windows,Os/2) Conectividad a internet en zonas del Estado Lara donde no hay red cableada.
                                http://www.linkedin.com/pub/amnarlyei-goitia/66/b2/722

                                1 Reply Last reply Reply Quote 0
                                • C
                                  Cab
                                  last edited by

                                  Estimado, probé todo como dices tu pero en el pfs 2.1 reléase no funciona. Si puedes leé el post que publiqué con los problemas que se me ocasionan. Gracias.

                                  1 Reply Last reply Reply Quote 0
                                  • belleraB
                                    bellera
                                    last edited by

                                    @bellera:

                                    César y Kelelsito,

                                    ¡Felicidades por compartir vuestra experiencia con Lusca!

                                    Cito fuentes que encontré:

                                    http://www.lusca.org/
                                    http://code.google.com/p/deeza-cacheboy/wiki/pfsense_lusca
                                    http://code.google.com/p/pfsense-cacheboy/wiki/Pfsense_Lusca

                                    Tengo la impresión que Lusca no tiene continuidad…

                                    1 Reply Last reply Reply Quote 0
                                    • pttP
                                      ptt Rebel Alliance
                                      last edited by

                                      He visto/leido posts de Chris (cmb) y Jim (jimp) recomendando no utilizar lusca ???

                                      https://forum.pfsense.org/index.php/topic,70491.msg384744.html#msg384744

                                      https://forum.pfsense.org/index.php/topic,66822.msg394911.html#msg394911

                                      1 Reply Last reply Reply Quote 0
                                      • belleraB
                                        bellera
                                        last edited by

                                        Ok, dicen que el paquete cambia el repositorio de paquetes de pfSense y apunta a uno que no es el oficial que, además, no está actualizado.

                                        Mirando http://ubuntuserverguide.com/2012/12/how-to-install-and-configure-lusca-as-proxy-server-in-ubuntu-server-12-04.html veo que al fin y al cabo Lusca es sólo una configuración especial de squid y un redireccionador escrito en perl, store.pl

                                        De todas maneras, como ya he dicho en anteriores posts, el cacheo de portales de vídeo está supeditado a los cambios que realizan estos portales.

                                        O sea que si no se utiliza una solución que tenga soporte continuado, mal asunto.

                                        1 Reply Last reply Reply Quote 0
                                        • A
                                          amnarl
                                          last edited by

                                          Esto es asi maestro bellera youtube por ejemplo ha hecho cambios en la forma de entrega de contenidos y lusca muy poca actualizacion ha recibido en cuanto a los plugins que usa por tanto cada vez es menos el contenido dinamico del cual realiza cache. Como ya les comente en este hilo actualmente estoy usando Haarpcache sobre squid3 y va de maravilla tiene mucha utilidad y constantemente lo estan actualizando

                                          Configuracion y puesta en marcha de servers incluyendo pfsense en areas de produccion, para administrar y proveer servicios . Servicio tecnico presencial y online. Reparacion y mantenimiento de computadores. Instalacion y actualizacion de sistemas (Linux, Windows,Os/2) Conectividad a internet en zonas del Estado Lara donde no hay red cableada.
                                          http://www.linkedin.com/pub/amnarlyei-goitia/66/b2/722

                                          1 Reply Last reply Reply Quote 0
                                          • belleraB
                                            bellera
                                            last edited by

                                            Veo que https://github.com/keikurono/haarpcache soporta DASH, http://en.wikipedia.org/wiki/Dynamic_Adaptive_Streaming_over_HTTP

                                            Interesante…

                                            Más sobre DASH:

                                            http://www.youtube.com/watch?v=xhEgdXdOGBg

                                            http://lifehacker.com/preload-entire-youtube-videos-by-disabling-dash-playbac-1186454034

                                            1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post
                                            Copyright 2025 Rubicon Communications LLC (Netgate). All rights reserved.