Cita de: debian en Noviembre 12, 2015, 09:59:29 AM
Hola amigos de antemano agradecerles por este aporte maravilloso, tengo un problema en notado que mi raptor no esta entregando el cache almacenado en mi servidor y cuando observo en mi navegador me sales https: y creo que el correcto deberia ser http: porque cuando visualizo en log de webpanel sale puro http:, espero me ayuden a solucionar por favor, gracias buen dia.

Puedes implementar las siguientes reglas que están descritas en el siguiente tema.
http://www.alterserv.com/foros/index.php?topic=2097.0

Si tienen problema con la visualización de la página de YouTube en HTTPS aun estén poniendo al dirección en HTTP, pueden emplear las siguientes reglas que están descritas en el siguiente tema.

http://www.alterserv.com/foros/index.php?topic=2097.0

No olvidar limpiar los cookies del navegador.

Cita de: jjan_arte@hotmail.com en Noviembre 12, 2015, 11:11:59 AM
Buenos dias integrantes del foro, soy nuevo en el tema de raptor cache, y me gustaria preguntas que lines hay que adaptar para que funcione en la version de mikritik 5.20
agradezco de antemano su ayuda, gracias

En el tutorial de instalación de Raptor 2, están incluidas las reglas para Mikrotik v5.x
http://www.alterserv.com/foros/index.php?topic=2065.0

El protocolo QUIC fue creado por Google e implementado en algunos de sus servicios, es un protocolo basado en UDP. Con este protocolo se pretende mejorar la velocidad de navegación, pero en el caso usar servidores caché este protocolo no es soportado, por lo que procederemos a bloquearlo y obligar a usar el protocolo por convencional.

En este caso emplearemos el protocolo layer7 de Mikrotik, y agregamos las siguientes reglas, si se tiene más reglas en el firewall filter, revisar que no haya reglas que interfieran.

/ip firewall layer7-protocol
add name=YouTube regexp="^.*(\\.youtube\\.com|\\.googlevideo\\.com).*\$"
/ip firewall filter
add action=drop chain=forward comment="Bloqueo QUIC" disabled=no dst-port=80,443 layer7-protocol=YouTube protocol=udp

También configuramos el firewall del Raptor, para eso agregamos la siguientes reglas, estas tienen que estar arriba de las regla de redirección.

iptables -A FORWARD -i eth0 -p udp -m udp --dport 80 -j REJECT --reject-with icmp-port-unreachable
iptables -A FORWARD -i eth0 -p udp -m udp --dport 443 -j REJECT --reject-with icmp-port-unreachable
iptables -A FORWARD -p tcp -m tcp --dport 80 -m state --state RELATED,ESTABLISHED -j DROP
iptables -A FORWARD -p tcp -m tcp --dport 443 -m state --state RELATED,ESTABLISHED -j DROP



Luego reiniciar el firewal

Cita de: pacas en Noviembre 11, 2015, 10:13:49 PM
le estoy instalado nuevamente haber q pasa te comento...  ???
me salio esto en el proceso de instalacion nose por que .. antes creo no haber visto eso..

Ahí es para configurar la contraseña de la base de datos y tienes que poner raptor.

Cita de: ovijunio7 en Noviembre 11, 2015, 09:19:01 PM
acabo de verificar algo sobre las imagenes que no cargan completas al hacer click en ver imagen completa en el buscador de imagenes de google... que cuando reincio el raptor y el squid la navegacion se torna rapida pero despues de unos minutos se vuelve lenta.. a que se debe ese problema ,.... puede ser por el limite de threads?

Envíame un MP para revisar tu configuración remotamente y ver con más detalle.

Cita de: pacas en Noviembre 11, 2015, 09:52:46 PM
tenia instalado raptor la version nueva me funcion 2 meses muy bien.. tube problemas de lentitud decidi instar nuevamente .. pero me tope con este problema que pongo en la soguiente imagen espero me puedan ayudar muchas gracias.

Envíame un MP para revisar tu configuración remotámente.

Cita de: ovijunio7 en Noviembre 11, 2015, 07:00:26 PM
es algo raro joemg siendo una pagina estatica no hace HIT el raptorcache sale miss le doy F5 a la pagina y sigue saliendo miss y es si con algunas paginas estaticas

Remote Address:167.114.116.162:80
Request URL:http://www.grupopastelpan.com/pasopan/images/stories/virtuemart/product/pan-mantequilla.jpg
Request Method:GET
Status Code:304 Not Modified
Response Headers
view source
Connection:close
Date:Wed, 11 Nov 2015 23:58:38 GMT
ETag:"3300b17-17016-4f8af1c715fc0"
Server:Apache/2.2.29 (Unix) mod_ssl/2.2.29 OpenSSL/1.0.1e-fips mod_bwlimited/1.4
Via:1.0 raptor.os (squid/3.1.20)
X-Cache:MISS from raptor.os
X-Cache-Lookup:MISS from raptor.os:3128

Cuando el Status Code es igual a 304 Not Modified quiere decir que está en el caché del navegador web, entonces no pasará por el Raptor, ya que solo se entrega desde el caché del navegador; en cuanto a hacer caché de ciertas imágenes, algunas no están bien declarados el tipo que son en el header de petición, y algunas de estas imágenes crean conflicto al hacer caché; el sistema automáticamente no hace caché de esas imágenes, si uno quiere forzar a que pasen por Raptor teniendo en cuenta que no tiene un tipo definido, lo pueden hacer incluyendo su dominio en el archivo "/etc/raptor/host.lst", en este caso sería ingresar la siguiente línea
.*\.grupopastelpan\.com 
Reiniciar posteriormente
service raptor restart && service squid3 restart
Para que tenga efecto, tienes que limpiar el caché del navegador.

Cita de: ovijunio7 en Noviembre 11, 2015, 05:18:33 PM
Luistec las paginas que abren son en HTTP y es en jpg ,  y es una pagina estatica y por lo que he leido el raptorcache 2 hace cache de las paginas estaticas entonces estaria haciendo cache de esa pagina, como dije al activar el raptorcache 2 solo carga el 10% de la imagen y se queda ahi como si la imagen fuera completa y al momento de darle click derecho a la imagen y darle guarda , descarga el 10% de lo previsualizado un ejemplo de la pagina es esta

http://www.grupopastelpan.com/pasopan/images/stories/virtuemart/product/pan-mantequilla.jpg

Ejecuta el siguiente comando e intenta nuevamente.
cleandomain grupopastelpan.com -1

En el caso que tengan configurado como Hotspot o PPPoE, pueden adicionar un script para que mantenga la regla de queues en primer lugar.

/system script
add name=RaptorCache policy=ftp,reboot,read,write,policy,test,winbox,password,sniff,sensitive,api source=\
    "/queue simple move [find name=\"RaptorCache\"] [:pick [find] 0]"

Y luego a cuanto tiempo se ejecutará el script, en la regla pondremos que se ejecute a cada 10 segundos

/system scheduler
add disabled=no interval=10s name=RaptorCache on-event="/system script run RaptorCache" policy=\
    ftp,reboot,read,write,policy,test,winbox,password,sniff,sensitive,api start-date=oct/11/2013 start-time=08:00:00

Para revolver eso tienes que instalar nuevamente el cleaner, ejecuta por terminal los siguientes comandos

wget https://dl.dropboxusercontent.com/u/74360564/raptor2/clean.tar.gz
mv clean.tar.gz /tmp
tar -xzvf /tmp/clean.tar.gz -C /

Cita de: severino.euclides en Noviembre 09, 2015, 10:45:04 AM
Si los dominios son hay alrededor de 1 para 3,480 entradas, calamares con esta configuración es que el bien o que mejorar algo más !! ??

Es una línea adicional que verifica que estén pasando esas extensiones, también por otra parte el sistema hace el reconocimiento mediante un algoritmo a distintas extensiones de los distintos sitios Web.

Cita de: severino.euclides en Noviembre 09, 2015, 10:29:14 AM
Sin embargo, otra cosa, hay mangle calamar regla deja de funcionar cuando hay activos a registro de la rapaz se muestran limit_max_threds = 80_usage = 100 y aumenta la caché funciona incluso sin esta regla activa !!!

Código (cpp) [Seleccionar] Expandir

/ip firewall mangle
add action=mark-routing chain=prerouting comment="Raptor - Mangle ====================>" disabled=no dst-port=80 in-interface=LAN new-routing-mark=raptor_route passthrough=no protocol=tcp

Mi versión de Mikrotik y 6.32.3

ips mi red

DHCP con punto de acceso = 192.168.3.0/24

2 ips rangos para PPPoE

192.168.11.0/24
172.16.0.0/12

Raptor Cache

192.168.12.0/30

La regla de Squid en el Mikrotik ahora ya no se utiliza, si te sale el mensaje de limit_max_threds es porque se llego al límite en ese momento y hasta que se desocupen threads no hará caché.
Tienes que ingresar una regla por cada interface que tengas en la regla de action=mark-routing, también tienes que ingresar sus segmentos de red en el firewall del Raptor.

Cita de: severino.euclides en Noviembre 09, 2015, 10:12:49 AM
Amigo joeMG6 Raptor estaba activo, más por el calamar no funciona a pesar de ser activo en la web panel, lo que hice, modifiguei el archivo Squid.conf de la siguiente manera a trabajar haciendo el caché !!

Código (cpp) [Seleccionar] Expandir

#=====================================================================#
#                           Squid 3.x Conf                            #
#=====================================================================#
http_port 3128 intercept
visible_hostname raptor.os
icp_port 0
#----------------------------------------------------------------------
acl google url_regex -i (googlevideo.com|www.youtube.com)
acl mobile browser -i regexp (iPhone|iPad|Windows.*Phone|BlackBerry|PlayBook|Trident|IEMobile)
request_header_access User-Agent deny google !mobile
request_header_replace User-Agent Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
#----------------------------------------------------------------------
#error_directory /usr/share/squid3/errors/Spanish/
#----------------------------------------------------------------------
acl blacklist url_regex -i "/etc/squid3/blacklist.lst"
#----------------------------------------------------------------------
# Servidor DNS y Politica de Cambios
#----------------------------------------------------------------------
dns_nameservers 8.8.8.8 8.8.4.4
dns_retransmit_interval 5 seconds
dns_timeout 2 minutes
#----------------------------------------------------------------------
acl manager proto cache_object
acl localhost src 127.0.0.1/32 ::1
acl to_localhost dst 127.0.0.0/8 0.0.0.0/32 ::1

acl localnet src 10.0.0.0/8     # RFC 1918 possible internal network
acl localnet src 172.16.0.0/12  # RFC 1918 possible internal network
acl localnet src 192.168.0.0/16 # RFC 1918 possible internal network
acl localnet src fc00::/7       # RFC 4193 local private network range
acl localnet src fe80::/10      # RFC 4291 link-local (directly plugged) machines

acl CONNECT method CONNECT

acl Safe_ports port 80          # http
acl Safe_ports port 443         # https
acl SSL_ports port 443          # https

http_access deny blacklist
http_access allow manager localhost
http_access deny manager all
http_access deny !Safe_ports
http_access deny CONNECT !SSL_ports
http_access allow localhost
http_access allow localnet
#----------------------------------------------------------------------
coredump_dir /var/spool/squid3
#----------------------------------------------------------------------
# Log de acessos
#----------------------------------------------------------------------
logfile_rotate 7
access_log /var/log/squid3/access.log
cache_store_log none
#----------------------------------------------------------------------
# Otras configuraciones
#----------------------------------------------------------------------
cache_mgr raptor.os
shutdown_lifetime 2 seconds
half_closed_clients off
server_persistent_connections off
client_persistent_connections off
log_fqdn off
quick_abort_min 0 KB
quick_abort_max 0 KB
quick_abort_pct 95
max_filedescriptors 65536
#----------------------------------------------------------------------
#cache deny all
#----------------------------------------------------------------------
acl sys_lst url_regex -i "/etc/raptor/sys.lst"
acl raptor_lst url_regex -i "/etc/raptor/raptor.lst"
acl wth_lst url_regex -i "/etc/raptor/whitelist.lst"
acl host_lst req_header Host -i "/etc/raptor/host.lst"
acl exts url_regex -i \.(cab|exe|msi|msu|zip|deb|rpm|bz|bz2|gz|tgz|rar|bin|7z|mp3|mp4|flv)$
acl head_html req_header Accept -i text/html.+
cache deny raptor_lst
cache_peer 192.168.12.2 parent 8080 0 proxy-only no-digest
dead_peer_timeout 2 seconds
cache_peer_access 192.168.12.2 allow exts
cache_peer_access 192.168.12.2 deny head_html
cache_peer_access 192.168.12.2 deny wth_lst
cache_peer_access 192.168.12.2 allow raptor_lst
cache_peer_access 192.168.12.2 allow sys_lst
cache_peer_access 192.168.12.2 deny all
#----------------------------------------------------------------------
cache deny all
#----------------------------------------------------------------------
cache_effective_user proxy
cache_effective_group proxy

Ahora Squid no hace caché solo intercepta el tráfico, Raptor se encarga de hacer todo el trabajo del caché de contendido, puedes verificar el contenido de los sitios Web almacenados en el WebPanel, en Estadísticas -> Dominios.

Cita de: venezu en Noviembre 08, 2015, 06:21:41 PM
tengo la version 2.0.1 pero el archivo a editar esta vacio estoy abriendolo asi:   nano /etc/raptor/host.lst  y esta vacio

En el caso que no tengas el archivo host.lst, has la siguiente configuración.

Primero, editas el archivo squid.conf y que quede de la siguiente manera las lineas finales (si el servidor tiene otro IP reemplazarlo por el que se esté usando)

#----------------------------------------------------------------------
#cache deny all
#----------------------------------------------------------------------
acl sys_lst url_regex -i "/etc/raptor/sys.lst"
acl raptor_lst url_regex -i "/etc/raptor/raptor.lst"
acl wth_lst url_regex -i "/etc/raptor/whitelist.lst"
acl host_lst req_header Host -i "/etc/raptor/host.lst"
acl exts url_regex -i \.(cab|exe|msi|msu|zip|deb|rpm|bz|bz2|gz|tgz|rar|bin|7z|mp3|mp4|flv)$
acl head_html req_header Accept -i text/html.+
cache deny raptor_lst
cache_peer 192.168.10.2 parent 8080 0 proxy-only no-digest
dead_peer_timeout 2 seconds
cache_peer_access 192.168.10.2 allow host_lst
cache_peer_access 192.168.10.2 allow exts
cache_peer_access 192.168.10.2 deny head_html
cache_peer_access 192.168.10.2 deny wth_lst
cache_peer_access 192.168.10.2 allow raptor_lst
cache_peer_access 192.168.10.2 allow sys_lst
cache_peer_access 192.168.10.2 deny all
cache deny all
#----------------------------------------------------------------------

Luego creas el archivo "/etc/raptor/host.lst" e ingresas el siguiente contenido

.*-.*\.googlevideo\.com
\.youtube\.com
\.ytimg.com
\.steampowered\.com
l3cdn\.riotgames\.com
\.funo\.com
\.gamib\.com
Le das permisos de ejecución y reinicias squid y raptor

chmod 777 /etc/raptor/host.lst
service raptor restart && service squid3 restart

Si tienen problema con la base de datos, enviarme un MP para revisarlo.

Cita de: venezu en Noviembre 08, 2015, 05:05:30 PM
amigo joemg tengouna consulta los juegos friv.com no me estan haciendo cache podrias ver que esta pasando, aqui en mi red hay muchos niños y abren esa pagina a diario, estuve haciendo pruebas y nada de cachevoy a revisar otras paginas de juegos de este tipo a verificar si es en esa sola

Cita de: ZonawifiSDP en Noviembre 08, 2015, 05:09:18 PM
Igual yo  ???

Es un detalle con mozilla, para que resuelvan este impace, si tienen instalado recientemente Raptor editen el archivo "/etc/raptor/host.lst"
y agreguen los servidores

\.funo\.com
\.gamib\.com


Cita de: venezu en Noviembre 08, 2015, 05:24:33 PM
correcto pero con la version anterior y con squid solo en paralelo al MK si hacian cache a millon, gracias por verificar que puede ser en otras paginas ya verifique y pasa igual,

El tráfico que manejaba Squid era muy poco, contenido estático es muy poco a comparación del dinámico, Raptor también hace caché a contenido estático, pero igual se verificará esos detalles con algunas páginas.

Cita de: venezu en Noviembre 08, 2015, 05:05:30 PM
amigo joemg tengouna consulta los juegos friv.com no me estan haciendo cache podrias ver que esta pasando, aqui en mi red hay muchos niños y abren esa pagina a diario, estuve haciendo pruebas y nada de cachevoy a revisar otras paginas de juegos de este tipo a verificar si es en esa sola

Cita de: ZonawifiSDP en Noviembre 08, 2015, 05:09:18 PM
Igual yo  ???

Los juegos de friv salen de distintos servidores, pero lo estaremos revisado.

Cita de: jaikel gutierrez en Noviembre 08, 2015, 05:03:15 PM
Saludos, existe alguna manera de salvar toda la información cachada....es decir supongamos que mi disco duro presente falla o que ya este full.... Monto un nuevo disco duro de mayor capacidad he instalado todo desde cero..... ¿cómo hago para sacar toda la información cachada del disco duro viejo y pasarlo al nuevo disco duro y que éste funcione bien ya una vez estando el raptor en funcionamiento.???????? Existe alguna manera de hacerlo por el programa winSCP.????????

En esos casos se recomienda usar dos discos duros, uno para sistema y otro para caché; si el disco duro de sistema se dañase solo se haría un backup de la base de datos y luego se repondría al nuevo disco junto con el disco del caché, si el daño es de hardware lo recomendable sería no hacer un backup ya que puede ser que los archivos ya se hayan corrompido lo no daría un buen funcionamiento.