HandyCache: Transformar URL

Publicado por JVProducciones, Diciembre 29, 2014, 10:56:46 PM

Tema anterior - Siguiente tema

JVProducciones

La lista "Transformar URL" se utiliza para escribir la URL en la caché descartando las partes "innecesarias" de una de URL o para cambiar la carpeta en la que serán los archivos almacenados.
Algunos sitios complementan la URL dinámicamente o partes variables (este puede ser el número de sesión o algunos parámetros internos). Normalmene estos archivos serán descargados repetidas veces sin que se consigan la salida desde cache.En lugar de ahorro será mayor el consumo, el tráfico y espacio en disco!
La lista "Transformar URL" nos libera de este problema! El componente variable de la URL se corta y la URL se obtiene en forma pura (este tipo de archivos se almacenan en la memoria caché y cuando sea requerido, se tomará de la misma.)
La lista de "Transformar URL" trabaja con el mismo principio que la lista de "Redireccionar", pero a diferencia de él, la dirección URL modificada sólo se utiliza unicamente dentro del Cache de HandyCache.

Un ejemplo sin las reglas aplicadas los servidores se guardan en carpetas separadas (bd1.badoo.com,bd2.badoo.com, bd3.badoo.com) conteniendo muchas veces el mismo contenido,  aplicando las reglas guardará en una única carpeta llamada badoo.com. esto hará a handycache mas eficiente a la hora de guardar el cache.

Para agregar el contenido se debe de copiar cada reglón y en Tranformar URL click derecho en cualquier regla ya creada y poner "insertar regla del portapapeles"

Extensiones: algunas veces handy fallaba al momento de identificar contenido (especialmente videos) poniendo una carpeta (videosdescargado.flv^) y dentro de ella el video pero con nomenclaturas erróneas e inservibles, esto se solucionó simplemente agregando estas reglas.
#5#~#True#~#(\.(mp4|flv|3gp))\?.*#~#\1#~#False#~#True
#5#~#True#~#(\.(css|js|gif|jpe?g|png|swf))\?.*#~#\1#~#False#~#True
#5#~#True#~#(\.(unity3d))\?.*#~#\1#~#False#~#True
#5#~#True#~#(\.(ts))\?.*#~#\1#~#False#~#True


Re ordenamiento Servidores Dinámicos Facebook
#5#~#True#~#^http(.*)(akamaihd|fbcdn).net/(h(\w+)-.*\.(jpg|jpeg|png|gif|swf|mp4))(\?(.*)|$)#~#facebook.com/\4/\3#~#False#~#True
#5#~#True#~#^http(.*)fbstatic(.*)(akamaihd).net/rsrc.php/(.*/.*/(.*).(js|css))(\?(.*)|$)#~#facebook.com/static/\4#~#False#~#True
#5#~#True#~#^.*((akamaihd|fbcdn).*?)/.*(/.*?\.(flv|mp4|3gp)).*#~#\1\3#~#False#~#True


Re ordenamiento Servidores Dinámicos Comunes
#5#~#True#~#^.*((my.mail.ru|video.mail.ru).*?)/.*(/.*?\.(flv|mp4|3gp)).*#~#\1\3#~#False#~#True
#5#~#True#~#^.*((deviantart|olx-st|windowsupdate|filesor|spilcloud|t26|justjaredjr|mlstatic|rackcdn|sonicomusica|vkcache|vk)\..*?/.*)#~#\1#~#False#~#True
#5#~#True#~#^.*((gstatic|spilcloud|yimg|ytimg|4shared|bp\.blogspot|rackcdn|googleusercontent|imagebam|instagram|photobucket|badoo|ggpht|blackmart)\..*?/.*)#~#\1#~#False#~#True
#5#~#True#~#^.*((4shared|zippyshare)\..*?/.*)#~#\1#~#False#~#True
#5#~#True#~#^[^/].*?(media.tumblr.com)([^&]+)/*.*#~#\1\2#~#False#~#True
#5#~#True#~#^[^/]*?([^&]+)\/(speedtest/)([^\/\?\&]*).*#~#\2\3#~#False#~#True
#5#~#True#~#^.*((instagram).*?)/.*(/.*?\.(flv|mp4|3gp|mkv)).*#~#\1\3#~#False#~#True
#5#~#True#~#^.*((phobos\.apple)\..*?/.*)#~#\1#~#False#~#True
#5#~#True#~#^.*((winrar).*?)/.*(/.*?\.(exe|msi)).*#~#\1\3#~#True#~#True
#5#~#True#~#^[^/].*?(avast.com)([^&]+)/*.*#~#\1\2#~#False#~#True
#5#~#True#~#^[^/].*?(windowsupdate)([^&]+)/(exe|psf|msi|msp|cab).*#~#\1\2#~#False#~#True
#5#~#True#~#^.*(google\.com/market/).*?GetBinary/(com\..*?)/.*#~#\1\2#~#False#~#True


Re ordenamiento Servidores Dinámicos Juegos
#5#~#True#~#^.*((oasgames|softnyx|axeso5|juegosjuegos)\..*?/.*)#~#\1#~#False#~#True
#5#~#True#~#^.*((gamib|trrsf)\..*?/.*)#~#\1#~#False#~#True
#5#~#True#~#^[^/].*?(gamepilot)([^&]+)/*.*#~#\1\2#~#False#~#True


Re ordenamiento Servidores Dinámicos XXX
#5#~#True#~#^.*((sexgangsters|pbwstatic|redtubefiles|porntubevidz|petardas|petardashd|phncdn|bestbigmovs|videoszoofilia|videosz|slutload-media|xxxsun|nudevista|cdnbm|bravotube|serviporno)\..*?/.*)#~#\1#~#False#~#True
#5#~#True#~#^.*((phncdn|pornhub|youjizz|tube8|xhammster|redtubefiles|slutload-media|realgfporn|xvideos|mxn|lubetube|xshare|bravotube|sleazyneasy|eprncdn).*?)/.*(/.*?\.(flv|mp4|wmv|3gp|mkv)).*#~#\1\3#~#False#~#True
#5#~#True#~#^.*((petardashd|cerdas|xtube|tnaflix|cdn13|rncdn3|monclotube).*?)/.*(/.*?\.(flv|mp4|webm|3gp|mkv)).*#~#\1\3#~#False#~#True
#5#~#True#~#^.*((88\.208|209\.8|154\.46|46\.229|88\.208|213\.174|206\.161|98\.158|38\.107).*?)/.*(/.*?\.(flv|mp4|3gp)).*#~#xhamster.com/\3#~#False#~#True
#5#~#True#~#^.*((xvideos).*?)/.*(/.*?\.(jpg|png|gif|swf)).*#~#xvideos.img/\1\3#~#True#~#True


Seguiré Actualizando (29/12/2014)

Enrrike87

Muy Weno Amigoooo excelente aportee!!!!

tonyvzla

Gracias por el aporte, seria bueno que los amigos moderadores y no tan pero que si lo son le den un vistazo a ver que tal, saludos
En ayuda de los mas desprotegidos

JVProducciones

Cita de: tonyvzla en Diciembre 30, 2014, 09:42:55 PM
Gracias por el aporte, seria bueno que los amigos moderadores y no tan pero que si lo son le den un vistazo a ver que tal, saludos
Seria Excelente, por ahora con el poko conocimiento que tengo he podido juntar squid con handycache así como trabaja Raptorcache y squid y veo que en realidad le quita una tremenda carga a handy ahorrando cantidad de conexiones y solo dejando pasar solo el contenido dinámico (o el que queramos) para que handy haga lo suyo, pero no logro que squid responda con rapidez como lo hace handy, pero se que es cuestión de configurar squid, por ahora recién estoy aprendiendo un poko de squid, pero me vendría bien una ayuda.. saludos

esleyter2010


firecold

Cita de: JVProducciones en Diciembre 30, 2014, 10:29:41 PM
Seria Excelente, por ahora con el poko conocimiento que tengo he podido juntar squid con handycache así como trabaja Raptorcache y squid y veo que en realidad le quita una tremenda carga a handy ahorrando cantidad de conexiones y solo dejando pasar solo el contenido dinámico (o el que queramos) para que handy haga lo suyo, pero no logro que squid responda con rapidez como lo hace handy, pero se que es cuestión de configurar squid, por ahora recién estoy aprendiendo un poko de squid, pero me vendría bien una ayuda.. saludos

Es sumamente complicado que Handy  trabaje con squid como raptor, ya que Handy en si funciona como un proxy y Raptor funciona con Squid de un modo diferente, no digo que no se pueda, de plano a de haber alguna forma, seria de experimentar e investigar y eso te digo amigo es lo complicado, Saludos

JVProducciones

Cita de: firecold en Enero 03, 2015, 10:03:26 PM
Es sumamente complicado que Handy  trabaje con squid como raptor, ya que Handy en si funciona como un proxy y Raptor funciona con Squid de un modo diferente, no digo que no se pueda, de plano a de haber alguna forma, seria de experimentar e investigar y eso te digo amigo es lo complicado, Saludos
Amigo firecold, yo ya tengo trabajando squid y handy del mismo modo como trabaja squid con raptor en mi maquina personal

firecold

Cita de: JVProducciones en Enero 03, 2015, 10:15:13 PM
Amigo firecold, yo ya tengo trabajando squid y handy del mismo modo como trabaja squid con raptor en mi maquina personal

Segun parece confundi el termino, usted lo que quiere es que squid trabaje a la misma velocidad de Handy, eso esta mejor dificil, ya que squid descompone lo cacheado en varios archivos y en el caso de Raptor, Handy, etc, etc, no lo hace, ahi estaria el maximo problema, Saludos

JVProducciones

Cita de: firecold en Enero 03, 2015, 10:18:35 PM
Segun parece confundi el termino, usted lo que quiere es que squid trabaje a la misma velocidad de Handy, eso esta mejor dificil, ya que squid descompone lo cacheado en varios archivos y en el caso de Raptor, Handy, etc, etc, no lo hace, ahi estaria el maximo problema, Saludos
Firecold, es por eso que squid demora en las respuestas en la entrega de cache ejemplo, handy demora 2 a 50 ms y squid demora de 120 a 300 ms igual que como estaría sin proxy la navegación??

JVProducciones

Listo HandyCache dio un pequeño paso adelante
Manteniendo Http en Youtube
http://www.alterserv.com/foros/index.php?topic=1701

JVProducciones


tonyvzla

Saludos JV has visto lo ultimo que publico @reges

Has probado esto?:

http://www.youtube.com/watch?v=j3NgBU1ZW8Y
https://reges007.wordpress.com/2015/03/24/hc-extension-cache-control-by-last-modified/

y uno de facebook que me resulto curioso o algo excelente hacer cache a facebook claro no publica la regla como la anterior.

http://www.youtube.com/watch?v=Bj3Ncjzb0kE

Saludos
En ayuda de los mas desprotegidos

JVProducciones

Cita de: tonyvzla en Abril 04, 2015, 08:36:37 PM
Saludos JV has visto lo ultimo que publico @reges

Has probado esto?:

http://www.youtube.com/watch?v=j3NgBU1ZW8Y
https://reges007.wordpress.com/2015/03/24/hc-extension-cache-control-by-last-modified/

y uno de facebook que me resulto curioso o algo excelente hacer cache a facebook claro no publica la regla como la anterior.

http://www.youtube.com/watch?v=Bj3Ncjzb0kE

Saludos
lo he probado ahora gracias a ti... jejeje... lo de control-by-last-modified pues es una regla interesante lo modifique para probarlo con un juego en especial que actualizan constantemente, lo malo es que genera un archivo con la fecha de creación del archivo cacheado, esa parte no me agrada mucho....

tonyvzla

La primera extension va activada normal sin ninguna otra o normal solo activar y ya?

el de faceboobk que tal te funciona?
En ayuda de los mas desprotegidos

JVProducciones

Cita de: tonyvzla en Abril 10, 2015, 09:19:45 PM
La primera extension va activada normal sin ninguna otra o normal solo activar y ya?

el de faceboobk que tal te funciona?
lo que vi es que es una regla general..... almacena todo.... pero supongamos si empezó a guardar un video y el cliente se desconecta, el video desaparece, pero queda el archivo que se creo a su lado (archivo.txt) por eso es que lo use para un dominio especifico......

tonyvzla

En ayuda de los mas desprotegidos

JVProducciones

No..... Pero, la extensión seguramente usa "solamente de cache" para dar esa súper velocidad ya que no hará consulta sobre si existe o no el archivo en el internet a 0ms.... jejeje.  te imaginas?.... Saldrá fuego del cable de red...jajajaja

tonyvzla

Cita de: JVProducciones en Abril 10, 2015, 10:07:34 PM
No..... Pero, la extensión seguramente usa "solamente de cache" para dar esa súper velocidad ya que no hará consulta sobre si existe o no el archivo en el internet a 0ms.... jejeje.  te imaginas?.... Saldrá fuego del cable de red...jajajaja

Pues si  ???
En ayuda de los mas desprotegidos


tonyvzla

En ayuda de los mas desprotegidos