El protocolo QUIC fue creado por Google e implementado en algunos de sus servicios, es un protocolo basado en UDP. Con este protocolo se pretende mejorar la velocidad de navegación, pero en el caso usar servidores caché este protocolo no es soportado, por lo que procederemos a bloquearlo y obligar a usar el protocolo por convencional.

En este caso emplearemos el protocolo layer7 de Mikrotik, y agregamos las siguientes reglas, si se tiene más reglas en el firewall filter, revisar que no haya reglas que interfieran.

/ip firewall layer7-protocol
add name=YouTube regexp="^.*(\\.youtube\\.com|\\.googlevideo\\.com).*\$"
/ip firewall filter
add action=drop chain=forward comment="Bloqueo QUIC" disabled=no dst-port=80,443 layer7-protocol=YouTube protocol=udp

También configuramos el firewall del Raptor, para eso agregamos la siguientes reglas, estas tienen que estar arriba de las regla de redirección.

iptables -A FORWARD -i eth0 -p udp -m udp --dport 80 -j REJECT --reject-with icmp-port-unreachable
iptables -A FORWARD -i eth0 -p udp -m udp --dport 443 -j REJECT --reject-with icmp-port-unreachable
iptables -A FORWARD -p tcp -m tcp --dport 80 -m state --state RELATED,ESTABLISHED -j DROP
iptables -A FORWARD -p tcp -m tcp --dport 443 -m state --state RELATED,ESTABLISHED -j DROP



Luego reiniciar el firewal

ChangeLog
- Fixed YouTube video player 240p - 360p


wget https://dl.dropboxusercontent.com/u/74360564/raptor2/update/raptor2.0.1_update.tar.gz
mv raptor2.0.1_update.tar.gz /tmp
tar -xzvf /tmp/raptor2.0.1_update.tar.gz -C /
service raptor restart && service squid3 restart

Para usar esta opción agregar la siguiente directiva en "/etc/raptor/raptor.conf"
QUALITY_YT 240
Y reiniciar
service raptor restart && service squid3 restart

Changelog
- Dinamic plugin
- Html5 support update
- Multicache Dir
- Redirection content
- Update WebPanel 1.2

Instalación en Debian 8
https://cdimage.debian.org/mirror/cdimage/archive/8.11.0/amd64/iso-cd/debian-8.11.0-amd64-netinst.iso



Para usar Putty con el usuario root en Debian 8
Despues de instalar el ssh en el servidor("apt-get install ssh") se necesita configurar el ssh para el accesso al usuario "root" que por defecto está deshabilitado en Debian 8.
Editar por terminal el archivo de configuración del ssh, para eso efectuamos los siguientes comandos

nano /etc/ssh/sshd_config

Dentro del editor buscar la línea "PermitRootLogin Without-Password" y cambiarlo a "PermitRootLogin yes" guardar con Ctrl + o y salir Ctrl + x , luego reiniciar el ssh
/etc/init.d/ssh restart
y con eso se tendría acceso a Putty con el usuario root.


wget http://www.raptor.alterserv.com/install_raptor2_d8.sh
chmod 777 install_raptor2_d8.sh
bash install_raptor2_d8.sh



Configurar las reglas de firewall en el servidor Raptor
Por ej. si "192.168.1.0/24" es el segmento de red de los usuarios y "eth0" es el nombre de la interface del servidor Raptor(de tener segmento distinto cambiar por el que corresponda a su red)


En el caso se tenga varios segmentos de red de usuarios


Luego Reiniciar el Firewall

Redirección y priorización de tráfico Mikrotik por Mangle
(modificar "in-interface" por el nombre de su interface en la regla mark-routing)


/ip route
add check-gateway=ping disabled=no distance=1 dst-address=0.0.0.0/0 gateway=192.168.10.2 routing-mark=raptor_route scope=30 target-scope=10
/ip firewall mangle
add action=mark-routing chain=prerouting comment="Raptor - Mangle ====================>" disabled=no dst-port=80 in-interface=LAN new-routing-mark=raptor_route passthrough=no protocol=tcp
add action=mark-connection chain=forward comment="== RAPTORCACHE ==" content="X-Cache-Raptor: HIT from Raptor" disabled=no new-connection-mark=raptor-connection passthrough=yes
add action=mark-packet chain=forward connection-mark=raptor-connection disabled=no new-packet-mark=raptor-packs passthrough=no

Para la versión de Mikrotik 6.x
/queue simple
add max-limit=30M/30M name=RaptorCache packet-marks=raptor-packs queue=pcq-upload-default/pcq-download-default target="" total-queue=default

Para la versión de Mikrotik 5.x
/queue tree
add burst-limit=0 burst-threshold=0 burst-time=0s disabled=no limit-at=0 max-limit=4M name="RaptorCache" packet-mark=raptor-packs parent=global-out priority=4 queue=default

También pueden usar el generador de reglas
http://www.raptorcache.org/generador

Esta versión no es compatible con la versión anterior 1.0.6b, lo recomendable es instalar nuevamente.
Esta versión tiene un límite de 80 threads libres.

Si uno quiere que ciertas páginas no pasen por RaptorCache pueden configurarlo en el whitelist.

En este ejemplo usaremos la dirección del windowsupdate, donde ingresaremos una regla Regexp que identifique todo el contenido, que sería de la siguiente manera
http.*(windowsupdate|\.windowsupdate)\.com.*

Luego ingresamos una nueva regla con sus datos respectivos, que serían como la siguiente imagen


Después de guardar quedaría


Para finalizar solo requeriría reiniciar
/etc/init.d/raptor restart && /etc/init.d/squid3 restart

Con eso se evitaría que el contenido que provenga de la dirección de windowsupdate no pase por Raptor, si se quiere hacer este proceso con otra dirección solo remplazar el nombre del dominio.

Vamos a usar el siguiente esquema para identificar la red Lan de acuerdo a su segmento de red por su clase (CIDR), entonces sería 192.168.1.0/24 si se usa como Máscara de subred 255.255.255.0

Entonces solo remplazamos el segmento que viene por defecto por el que estemos usando y también vefificamos el nombre de nuestra interface de red del servidor Raptor, en este caso es eth0(se puede verificar con el comando "ifconfig"), y nos quedaría como la siguiente imagen


En el caso que tengamos más de un segmento de red, solo agregamos reglas adicionales agregando los segmentos restantes, por ej.


Si se quiere editar manualmente pueden hacerlo en el archivo "etc/raptor/fw.sh"
y quedaría de la siguiente manera

#!/bin/bash
echo ";;;;;;;;;;;;;;;;;;;;;;;"
echo ";     RaptorCache     ;"
echo ";;;;;;;;;;;;;;;;;;;;;;;"

echo 1 > /proc/sys/net/ipv4/ip_forward

iptables -F
iptables -X
iptables -Z
iptables -t nat -F

iptables -P INPUT ACCEPT
iptables -P OUTPUT ACCEPT
iptables -P FORWARD ACCEPT
iptables -t nat -P PREROUTING ACCEPT
iptables -t nat -P POSTROUTING ACCEPT


iptables -A INPUT -i lo -j ACCEPT #comment#Localhost

# -----------------------------| Redireccion por mangle |----------------------------------
iptables -A INPUT -s 192.168.1.0/24 -j ACCEPT #comment#Input LAN 
iptables  -t nat -A PREROUTING -i eth0 -p tcp --dport 80 -j REDIRECT --to-port 3128 #comment#Redirect 3128
iptables -A FORWARD -i eth0 -p udp -m udp --dport 80 -j REJECT --reject-with icmp-port-unreachable #comment#Block QUIC
# -----------------------------------------------------------------------------------------



Es recomendable que se use estas reglas aún si se está usando la redirección por NAT.

Si se quiere implementar las reglas de bloqueo QUIC, pueden revisar en el siguiente tema
http://www.alterserv.com/foros/index.php?topic=2097.0

Si es el primer Disco Duro que se va a montar, remueva las carpetas de directorio "/usr/local/raptor/"
rm -rf /usr/local/raptor/*


wget http://www.alterserv.com/raptor/multicachedir.sh
chmod 777 multicachedir.sh
bash multicachedir.sh

Luego solo seguir el proceso




Si se quiere editar las particiones montadas uno lo puede realizar modificando el archivo "/etc/fstab"


Para verificar el UUID del disco duro pueden ingresar el siguiente comando por terminal
blkid

En este tema trataremos de dar solución a los que tengan el inconveniente de lentitud en red después de la instalación. Traten de detallar el comportamiento, configuración y también las características del Hardware que están usando, para que se les pueda dar una respuesta y configuración más acertada.

En Construcción

Changelog
- Dinamic plugin
- Html5 support update
- Multicache Dir
- Redirection content
- Update WebPanel 1.2


Instalación solo en Debian 7
http://cdimage.debian.org/mirror/cdimage/archive/7.9.0/amd64/iso-cd/debian-7.9.0-amd64-netinst.iso



wget http://www.alterserv.com/raptor/install_raptor2.sh
chmod 777 install_raptor2.sh
bash install_raptor2.sh

Redirección y priorización de tráfico Mikrotik por NAT.

/ip firewall filter
add action=accept chain=forward comment="Acepta RaptorCache" disabled=no src-address=192.168.10.0/30
/ip firewall nat
add action=dst-nat chain=dstnat comment="Redirect Raptorcache" disabled=no dst-port=80 protocol=tcp src-address=!192.168.10.2 to-addresses=192.168.10.2 to-ports=3128
/ip firewall mangle
add action=mark-connection chain=postrouting comment="== RAPTORCACHE ==" content="X-Cache-Raptor: HIT from Raptor" disabled=no new-connection-mark=raptor-connection passthrough=yes src-address=192.168.10.2 protocol=tcp
add action=mark-packet chain=postrouting connection-mark=raptor-connection disabled=no new-packet-mark=raptor-packs passthrough=yes
/queue tree
add burst-limit=0 burst-threshold=0 burst-time=0s disabled=no limit-at=0 max-limit=4M name="RaptorCache" packet-mark=raptor-packs parent=global-out priority=4 queue=default

Redirección y priorización de tráfico Mikrotik por Mangle (modificar "in-interface" por el nombre de su interface en la regla mark-routing)
Activar reglas de firewall en el servidor Raptor

/ip route
add check-gateway=ping disabled=no distance=1 dst-address=0.0.0.0/0 gateway=192.168.10.2 routing-mark=raptor_route scope=30 target-scope=10
/ip firewall mangle
add action=mark-routing chain=prerouting comment="Raptor - Mangle ====================>" disabled=no dst-port=80 in-interface=LAN new-routing-mark=raptor_route passthrough=no protocol=tcp
add action=mark-connection chain=forward comment="== RAPTORCACHE ==" content="X-Cache-Raptor: HIT from Raptor" disabled=no new-connection-mark=raptor-connection passthrough=yes
add action=mark-packet chain=forward connection-mark=raptor-connection disabled=no new-packet-mark=raptor-packs passthrough=no
/queue tree
add burst-limit=0 burst-threshold=0 burst-time=0s disabled=no limit-at=0 max-limit=4M name="RaptorCache" packet-mark=raptor-packs parent=global-out priority=4 queue=default

Update 21-10-2015
(solo archivos binarios)

wget https://www.dropbox.com/s/1j5v3enh6ul92ug/raptor2_update.tar.gz
mv raptor2_update.tar.gz /tmp
tar -xzvf /tmp/raptor2_update.tar.gz -C /
service raptor restart && service squid3 restart

Esta versión no es compatible con la versión anterior 1.0.6b, lo recomendable es instalar nuevamente.
Esta versión tiene un límite de uso de 50 threads

Changelog
- Dinamic plugin
- Html5 support update
- Multicache Dir
- Redirection content
- Update WebPanel 1.2


Instalación solo en Debian 7
http://cdimage.debian.org/mirror/cdimage/archive/7.9.0/amd64/iso-cd/debian-7.9.0-amd64-netinst.iso



wget http://www.alterserv.com/raptor/install_raptor2.sh
chmod 777 install_raptor2.sh
bash install_raptor2.sh


Redirección y priorización de tráfico Mikrotik por NAT.

/ip firewall filter
add action=accept chain=forward comment="Acepta RaptorCache" disabled=no src-address=192.168.10.0/30
/ip firewall nat
add action=dst-nat chain=dstnat comment="Redirect Raptorcache" disabled=no dst-port=80 protocol=tcp src-address=!192.168.10.2 to-addresses=192.168.10.2 to-ports=3128
/ip firewall mangle
add action=mark-connection chain=postrouting comment="== RAPTORCACHE ==" content="X-Cache-Raptor: HIT from Raptor" disabled=no new-connection-mark=raptor-connection passthrough=yes src-address=192.168.10.2 protocol=tcp
add action=mark-packet chain=postrouting connection-mark=raptor-connection disabled=no new-packet-mark=raptor-packs passthrough=yes
/queue tree
add burst-limit=0 burst-threshold=0 burst-time=0s disabled=no limit-at=0 max-limit=4M name="RaptorCache" packet-mark=raptor-packs parent=global-out priority=4 queue=default

Redirección y priorización de tráfico Mikrotik por Mangle (modificar "in-interface" por el nombre de su interface en la regla mark-routing)
Activar reglas de firewall en el servidor Raptor

/ip route
add check-gateway=ping disabled=no distance=1 dst-address=0.0.0.0/0 gateway=192.168.10.2 routing-mark=raptor_route scope=30 target-scope=10
/ip firewall mangle
add action=mark-routing chain=prerouting comment="Raptor - Mangle ====================>" disabled=no dst-port=80 in-interface=LAN new-routing-mark=raptor_route passthrough=no protocol=tcp
add action=mark-connection chain=forward comment="== RAPTORCACHE ==" content="X-Cache-Raptor: HIT from Raptor" disabled=no new-connection-mark=raptor-connection passthrough=yes
add action=mark-packet chain=forward connection-mark=raptor-connection disabled=no new-packet-mark=raptor-packs passthrough=no
/queue tree
add burst-limit=0 burst-threshold=0 burst-time=0s disabled=no limit-at=0 max-limit=4M name="RaptorCache" packet-mark=raptor-packs parent=global-out priority=4 queue=default

Esta versión no es compatible con la versión anterior 1.0.6b, lo recomendable es instalar nuevamente.

Como ya saben, Google cambio el modo de acceso a sus páginas forzando a utilizar el protocolo HTTPS, pero esto puede ser evitado en algunas páginas como Youtube y el buscador de Google. Esto se puede realizar al modificar el Header User-Agent que trae por defecto y reemplazarlo por el rastreador principal de Google (Googlebot), con lo cual ya no nos redireccionaría directamente al protocolo HTTPS. Pero esto no implica que ya no se pueda usar dicho protocolo, para usarlo solo se tendría que digitar la dirección con el tipo de protocolo, por ej. https://www.google.com.
Para realizar esta modificación se puede hacer de distintas maneras; en este caso emplearemos una de las más sencillas con tan solo insertar dos directivas en "/etc/squid3/squid.conf" y son las siguientes:

acl google url_regex -i (googlevideo.com|youtube.com)
request_header_access User-Agent deny google
request_header_replace User-Agent Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)


Estas directivas insertarlas despues de las siguientes líneas preferentemente

http_port 3128 intercept
visible_hostname proxy.os.com
icp_port 0


Luego reiniciar squid y Raptor procederá a hacer caché de YouTube.

Si en caso se tenga problemas para ingresar al foro, reportarlo en este tema. Al presentarse ataques al Hosting como medida de seguridad se agregan a una lista negra los IPs sospechosos y se mantiene esta lista por un determinado tiempo por motivos de prevención, para resolver este imprevisto reiniciar su router si se usa IP dinámico, si tuviesen IP estático enviarme su IP por mensaje privado.
También pueden reportar cualquier inconveniente del foro en la pagina de Facebook
https://www.facebook.com/pages/AlterServ/814673931929539

Plugin Steam -Dota 2 (03/12/2014)

#include <iostream>
#include <cstring>
#include <string>
#include <vector>
#include "../utils.cpp"

using namespace std;

// use this line to compile
// g++ -I. -fPIC -shared -g -o steampowered.com.so steampowered.com.cpp  
// Regex
// http.*(media[0-9]\.steampowered|\.steampowered)\.com.*(\.zip|/?)

extern "C" resposta getmatch(const string url) {
   resposta r;

   vector<string> resultado;
   string tmp;

   if ((url.find(".steampowered.com/") != string::npos) and (url.find(".zip") != string::npos)) {
       r.match = true;
       r.domain = "steam";
       resultado.clear();
if (url.find(".") != string::npos) {
stringexplode(url, ".", &resultado);
stringexplode(resultado.at(resultado.size()-2), "/", &resultado);
r.file = resultado.at(resultado.size()-4)+"."+resultado.at(resultado.size()-3)+"."+resultado.at(resultado.size()-2)+"."+resultado.at(resultado.size()-1);
}
   } else if ( (url.find(".steampowered.com/") != string::npos) and (url.find("?") != string::npos)) {
       r.match = true;
       r.domain = "steam";
       resultado.clear();
if (url.find("?") != string::npos) {
stringexplode(url, "?", &resultado);
stringexplode(resultado.at(resultado.size()-2), "/", &resultado);
r.file = resultado.at(resultado.size()-2)+"_"+resultado.at(resultado.size()-1);
}
   } else if (url.find(".steampowered.com/") != string::npos) {
       r.match = true;
       r.domain = "steam";
       resultado.clear();
stringexplode(url, "/", &resultado);
r.file = resultado.at(resultado.size()-1);
   } else {
           r.match = false;
       }
       return r;
}

RaptorCache 1.0.6b
Para actualizar a esta versión es necesario borrar el caché anterior

Changelog
- Mejora en la identificación de contenido (problemas con los plugins de actualizaciones por ej. Windows Update, GoogleUpdate, etc.)
- Corrección al registrar contenido temporal con tamaño 0.
- Corrección en la identificación de archivos parciales.

Debian 7 - 64 bits

wget http://www.raptorcache.com/install/update/bin64/raptor_106b_64_d7.tar.gz
rm -rf /usr/sbin/raptor
mv raptor_106b_64_d7.tar.gz /tmp
tar -xzvf /tmp/raptor_106b_64_d7.tar.gz -C /
chmod a+x /usr/sbin/raptor
/etc/init.d/raptor restart && /etc/init.d/squid3 restart

RaptorWebPanel v. 1.1
Changelog
- Multilenguaje (español, ingles, portugues)
- Realtime info system
- Gráficas de Ahorro y almacenamiento


wget https://www.dropbox.com/s/ccrndusi9odpn0e/raptorwebpanel.tar.gz
mv /var/raptor/ /var/raptor_old/
tar -xzvf raptorwebpanel.tar.gz
mv raptorwebpanel /var/
mv /var/raptorwebpanel/ /var/raptor/
rm -f raptorwebpanel.tar.gz
clear
chmod 777 /var/raptor/*
chmod 777 /var/raptor/rpconf/*
chmod 777 /etc/raptor/raptor.lst
chmod 777 /etc/squid3/squid.conf
chmod 777 /etc/raptor/raptor.conf
chmod 777 /etc/squid3/denegados.lst
chmod 777 /etc/network/interfaces
chmod 777 /etc/resolv.conf
touch /etc/apache2/sites-available/raptor.conf
echo "Listen 82
<VirtualHost *:82>
DocumentRoot /var/raptor
ServerName www.raptorcache.com
ErrorLog /var/log/virtual82-error_log
CustomLog /var/log/virtual82-access_log common
</VirtualHost>
Listen 84
<VirtualHost *:84>
DocumentRoot /var/www/sarg
ServerName www.raptorcache.com
</VirtualHost>

<Directory /var/raptor/rpconf>
   AuthUserFile /var/raptor/rpconf/.htpasswd
   AuthName \"Authorization Required\"
   AuthType Basic
   require valid-user
</Directory>" > /etc/apache2/sites-available/raptor.conf
a2ensite raptor.conf


service apache2 restart


apt-get install ifstat

RaptorCache 1.0.5b

- Actualización para los nuevos request de YouTube
- Adicion de URL_LOG

Debian 7 - 64 bits

wget http://www.raptorcache.com/install/update/bin64/raptor_105b_64_d7.tar.gz
rm -rf /usr/sbin/raptor
mv raptor_105b_64_d7.tar.gz /tmp
tar -xzvf /tmp/raptor_105b_64_d7.tar.gz -C /
chmod a+x /usr/sbin/raptor
/etc/init.d/raptor restart && /etc/init.d/squid3 restart

Si se quiere activar el URL_LOG, se tiene que adicionar en el raptor.conf la siguiente directiva
URL_LOG 1
El uso de esta directiva tiene como mayor propósito obtener las url de los videos de YouTube, ya que el access.log del squid como del raptor no muestra la dirección completa. En el caso de tener un problema con los videos se activa la directiva y se tendrá los logs con las direcciones completas de los videos y esto ayudará a tener un mejor reporte.

LVM (Logical Volume Management) es una manera muy eficiente de gestionar los discos duros permitiendo agrupar los discos duros. Para implementar LVM en nuestro sistema tenemos que seguir los siguientes pasos, voy a resumir algunos detalles para hacerlo más específico.

Primero identificamos el nombre de la partición que almacenara el cache.


Luego procedemos a crear la partición en LVM, para eso ingresamos
fdisk /dev/sda


Luego seguimos los pasos, eligiendo las opciones como se muestra en la imagen.


Con eso ya habremos creado la partición en LVM, Ahora definiremos los grupos y volúmenes que formarán nuestro sistema LVM, para eso ingresamos los siguientes comandos.
pvcreate /dev/sda
vgcreate /dev/vg0 /dev/sda

Para asociar el tamaño del grupo lógico primero nos fijamos el tamaño, para eso visualizamos con el comando
vgdisplay
Nos mostrará como en la imagen


Luego ingresamos el siguiente comando
lvcreate -L 931.51GB -n lv0 /dev/vg0
Y luego creamos el sistema de archivos ext4, para eso ejecutamos
mke2fs -t ext4 /dev/vg0/lv0
Y por último montamos la partición a la carpeta /raptorcache/, para eso editamos el archivo
/etc/fstab
y agregamos.
/dev/mapper/vg0-lv0   /raptorcache    ext4    noatime,async,nosuid   0      0
Reiniciamos y con eso ya tendríamos montado nuestro sistema en LVM.

Para agregar más discos duros pueden seguir el siguiente tema
http://www.alterserv.com/foros/index.php?topic=347.0

Plugin vk.com vk.me
(raptor 104b)

(RaptorCache 105b)
Como algunos se habrán podido fijar hay videos de Youtube que han migrado al servidor de Googlevideo por lo tanto necesita actualizarse.

Plugin 64 bits

wget http://www.raptorcache.com/install/update/plugins/64/googlevideo_youtube.tar.gz
mv googlevideo_youtube.tar.gz /tmp
tar -xzvf /tmp/googlevideo_youtube.tar.gz -C /
chmod 777 /etc/raptor/plugins/youtube.com.so && chmod 777 /etc/raptor/plugins/googlevideo.com.so
/etc/init.d/raptor restart && /etc/init.d/squid3 restart

Regex Googlevideo
http.*\.googlevideo\.com.*videoplayback

Estimados amigos de la comunidad Alterserv, ya ha pasado un año que se comenzó con este proyecto, me da mucho gusto que se haya desarrollado positivamente y este cumpliendo con el objetivo principal que es de ayudar, compartir e intercambiar conocimiento. Se puede ver que la comunidad va creciendo lo que indica que necesitamos moderadores, con el propósito de mantener el foro ordenado, por lo que he designado a los miembros firecold y luistec para que sean moderadores del foro, ya que son miembros que están en continua participación en el foro, les agradezco por haber aceptado este cargo, lo que seguro ayudará a que el foro sea de mejor ayuda para todos, un saludo y agradecimiento también a todo los miembros que participan en la comunidad.

Update Plugin YouTube - 21/08/2013
(RaptorCache 103b)
64 bits
http://www.raptorcache.com/install/update/plugins/64/youtube.com.so
32 bits
http://www.raptorcache.com/install/update/plugins/32/youtube.com.so

Por Terminal
64 bits

wget http://www.raptorcache.com/install/update/plugins/64/youtube64.tar.gz
mv youtube64.tar.gz /tmp
tar -xzvf /tmp/youtube64.tar.gz -C /
32 bits

wget http://www.raptorcache.com/install/update/plugins/32/youtube32.tar.gz
mv youtube32.tar.gz /tmp
tar -xzvf /tmp/youtube32.tar.gz -C /
Reiniciar Raptor & Squid3