[Old]Instalación RaptorCache 2 - final test

Publicado por joemg6, Septiembre 10, 2015, 09:39:13 AM

Tema anterior - Siguiente tema

angel

hola probando esa nueva actualizacion hay cosas que cambio
1.- cuando se lanzo esta version al usar la pc la cpu solo usaba 4% con la actualizacion usa 17%
2.- la version sin actualizar, la memoria no pasaba del 40%, con la actualizacion usa mas del 60%
3.- lo que comenta el amigo toor es cierto, ejemplo una pestaña del navegador que abra youtube para ver un video usa 3 a 5 o tal ves mas threads, suponiendo que un usuario habra 3 videos entoces ya casi serian 20 threads  por lo que en teoria una pc usaria todos los thread de limite que tiene el raptor, (pdt: si hay usuarios que lo hacen), y  como dijeron que hay personas que quieren vender este programa sin dar soporte, bueno mi sugerencia seria que haya otro modo de control sobre ese problema gracias

luistec

Cita de: angel en Septiembre 25, 2015, 10:48:16 PM
hola probando esa nueva actualizacion hay cosas que cambio
1.- cuando se lanzo esta version al usar la pc la cpu solo usaba 4% con la actualizacion usa 17%
2.- la version sin actualizar, la memoria no pasaba del 40%, con la actualizacion usa mas del 60%
3.- lo que comenta el amigo toor es cierto, ejemplo una pestaña del navegador que abra youtube para ver un video usa 3 a 5 o tal ves mas threads, suponiendo que un usuario habra 3 videos entoces ya casi serian 20 threads  por lo que en teoria una pc usaria todos los thread de limite que tiene el raptor, (pdt: si hay usuarios que lo hacen), y  como dijeron que hay personas que quieren vender este programa sin dar soporte, bueno mi sugerencia seria que haya otro modo de control sobre ese problema gracias

Raptor
1. -falso, es lo mismo
2 .-quien ha dicho eso
3 .-  el amigo

matheusluis


angel

Cita de: luistec en Septiembre 26, 2015, 06:47:01 AM
Raptor
1. -falso, es lo mismo
2 .-quien ha dicho eso
3 .-  el amigo
bueno no  para que se molesten tanto, en mi caso sucede asi, entonces tal ves hice algo mal entonces revisare de nuevo, pero en los threads en mi caso las veces que  abria alguna pagina en el navegador subia claro no mucho pero mi imagino que cuando se tiene mas clientes debe ser molestoso, gracias

davidmilfont

Qual seriam as regras do mangle para a versão 6.X do Mikrotik?
Eu teria que adicionar também a regra do SQUID para que o CacheFull funcionasse?

"add action=mark-connection chain=forward comment="==SQUID-TOS 12==" disabled=no dscp=12 new-connection-mark=squid-connection passthrough=yes"

Agradeço

matheusluis

Cita de: davidmilfont en Septiembre 26, 2015, 10:46:49 AM
Qual seriam as regras do mangle para a versão 6.X do Mikrotik?
Eu teria que adicionar também a regra do SQUID para que o CacheFull funcionasse?

"add action=mark-connection chain=forward comment="==SQUID-TOS 12==" disabled=no dscp=12 new-connection-mark=squid-connection passthrough=yes"

Agradeço

el marcado de squid ya no se usa en esta nueva version

luistec

Cita de: angel en Septiembre 26, 2015, 07:48:30 AM
bueno no  para que se molesten tanto, en mi caso sucede asi, entonces tal ves hice algo mal entonces revisare de nuevo, pero en los threads en mi caso las veces que  abria alguna pagina en el navegador subia claro no mucho pero mi imagino que cuando se tiene mas clientes debe ser molestoso, gracias
Estamos para apoyarte en cuanto se puede amigo, pero tienes que tener en cuenta  que la antigua version manejaba menos contenido y por consecuencia esta versión hace que todo el tráfico que pase, haga caché tiene un consumo adicional, pero así no llega como era en la antigua version de caché con squid-raptor  que consumía más RAM.

Saludos

matheusluis

el  error del limite se refiere en a la conexion a la base de datos y no a la cantidad de procesos que genera el cache, osea solo permite 50 conexiones simultaneas, cuando sobrepasas no saca del cache si no que lo saca de la web digamos que se ahorra entre un 10 a 20% en esta version, algo es algo

davidmilfont

Após instalação o Squid ficou offline.
Alguém ajuda?
Posso comentar a linha 82?
Citar
root@debian:~# squid3 -k parse
2015/09/26 14:35:33| Processing Configuration File: /etc/squid3/squid.conf (depth 0)
2015/09/26 14:35:33| Processing: http_port 3128 intercept
2015/09/26 14:35:33| Starting Authentication on port [::]:3128
2015/09/26 14:35:33| Disabling Authentication on port [::]:3128 (interception enabled)
2015/09/26 14:35:33| Disabling IPv6 on port [::]:3128 (interception enabled)
2015/09/26 14:35:33| Processing: visible_hostname raptor.os
2015/09/26 14:35:33| Processing: icp_port 0
2015/09/26 14:35:33| Processing: acl google url_regex -i (googlevideo.com|www.youtube.com)
2015/09/26 14:35:33| Processing: acl mobile browser -i regexp (iPhone|iPad|Windows.*Phone|BlackBerry|PlayBook|Trident|IEMobile)
2015/09/26 14:35:33| Processing: request_header_access User-Agent deny google !mobile
2015/09/26 14:35:33| Processing: request_header_replace User-Agent Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
2015/09/26 14:35:33| Processing: acl blacklist url_regex -i "/etc/squid3/blacklist.lst"
2015/09/26 14:35:33| Processing: dns_nameservers 8.8.8.8 8.8.4.4
2015/09/26 14:35:33| Processing: dns_retransmit_interval 5 seconds
2015/09/26 14:35:33| Processing: dns_timeout 2 minutes
2015/09/26 14:35:33| Processing: acl manager proto cache_object
2015/09/26 14:35:33| Processing: acl localhost src 127.0.0.1/32 ::1
2015/09/26 14:35:33| Processing: acl to_localhost dst 127.0.0.0/8 0.0.0.0/32 ::1
2015/09/26 14:35:33| Processing: acl localnet src 10.0.0.0/8     # RFC 1918 possible internal network
2015/09/26 14:35:33| Processing: acl localnet src 172.16.0.0/12  # RFC 1918 possible internal network
2015/09/26 14:35:33| Processing: acl localnet src 192.168.0.0/16 # RFC 1918 possible internal network
2015/09/26 14:35:33| Processing: acl localnet src fc00::/7       # RFC 4193 local private network range
2015/09/26 14:35:33| Processing: acl localnet src fe80::/10      # RFC 4291 link-local (directly plugged) machines
2015/09/26 14:35:33| Processing: acl CONNECT method CONNECT
2015/09/26 14:35:33| Processing: acl Safe_ports port 80          # http
2015/09/26 14:35:33| Processing: acl Safe_ports port 443         # https
2015/09/26 14:35:33| Processing: acl SSL_ports port 443          # https
2015/09/26 14:35:33| Processing: http_access deny blacklist
2015/09/26 14:35:33| Processing: http_access allow manager localhost
2015/09/26 14:35:33| Processing: http_access deny manager all
2015/09/26 14:35:33| Processing: http_access deny !Safe_ports
2015/09/26 14:35:33| Processing: http_access deny CONNECT !SSL_ports
2015/09/26 14:35:33| Processing: http_access allow localhost
2015/09/26 14:35:33| Processing: http_access allow localnet
2015/09/26 14:35:33| Processing: coredump_dir /var/spool/squid3
2015/09/26 14:35:33| Processing: logfile_rotate 7
2015/09/26 14:35:33| Processing: access_log /var/log/squid3/access.log
2015/09/26 14:35:33| Processing: access_log /var/log/squid3/error.log
2015/09/26 14:35:33| Processing: cache_store_log none
2015/09/26 14:35:33| Processing: cache_mgr raptor.os
2015/09/26 14:35:33| Processing: shutdown_lifetime 2 seconds
2015/09/26 14:35:33| Processing: half_closed_clients off
2015/09/26 14:35:33| Processing: server_persistent_connections off
2015/09/26 14:35:33| Processing: client_persistent_connections off
2015/09/26 14:35:33| Processing: log_fqdn off
2015/09/26 14:35:33| Processing: quick_abort_min 0 KB
2015/09/26 14:35:33| Processing: quick_abort_max 0 KB
2015/09/26 14:35:33| Processing: quick_abort_pct 95
2015/09/26 14:35:33| Processing: max_filedescriptors 65536
2015/09/26 14:35:33| Processing: acl sys_lst url_regex -i "/etc/raptor/sys.lst"
2015/09/26 14:35:33| Processing: acl raptor_lst url_regex -i "/etc/raptor/raptor.lst"
2015/09/26 14:35:33| Processing: acl wth_lst url_regex -i "/etc/raptor/whitelist.lst"
2015/09/26 14:35:33| Processing: acl host_googlevideo req_header Host -i (.*-.*\.googlevideo\.com|\.youtube\.com|\.ytimg.com)
2015/09/26 14:35:33| Processing: acl exts url_regex -i \.(cab|exe|msi|msu|zip|deb|rpm|bz|bz2|gz|tgz|rar|bin|7z|mp3|mp4|flv)$
2015/09/26 14:35:33| Processing: acl head_html req_header Accept -i text/html.+
2015/09/26 14:35:33| Processing: cache deny raptor_lst
2015/09/26 14:35:33| Processing: cache_peer 192.168.10.2 parent 8080 0 proxy-only no-digest
2015/09/26 14:35:33| Processing: dead_peer_timeout 2 seconds
2015/09/26 14:35:33| Processing: cache_peer_access 192.168.10.2 allow host_googlevideo
2015/09/26 14:35:33| Processing: cache_peer_access 192.168.10.2 allow ext
2015/09/26 14:35:33| aclParseAclList: ACL name 'ext' not found.
FATAL: Bungled squid.conf line 82: cache_peer_access 192.168.10.2 allow ext
Squid Cache (Version 3.1.20): Terminated abnormally.
CPU Usage: 0.008 seconds = 0.008 user + 0.000 sys
Maximum Resident Size: 18464 KB
Page faults with physical i/o: 0
root@debian:~# /etc/squid3/squid.conf

luistec

Cita de: davidmilfont en Septiembre 26, 2015, 12:44:52 PM
Após instalação o Squid ficou offline.
Alguém ajuda?
Revisa el Ip de server con la configuracion de squid.conf en las útimas lineas.

#----------------------------------------------------------------------
#cache deny all
#----------------------------------------------------------------------
acl sys_lst url_regex -i "/etc/raptor/sys.lst"
acl raptor_lst url_regex -i "/etc/raptor/raptor.lst"
acl wth_lst url_regex -i "/etc/raptor/whitelist.lst"
acl host_googlevideo req_header Host -i (.*-.*\.googlevideo\.com|\.youtube\.com|\.ytimg.com)
acl exts url_regex -i \.(cab|exe|msi|msu|zip|deb|rpm|bz|bz2|gz|tgz|rar|bin|7z|mp3|mp4|flv)$
acl head_html req_header Accept -i text/html.+
cache deny raptor_lst
cache_peer 192.168.10.2 parent 8080 0 proxy-only no-digest
dead_peer_timeout 2 seconds
cache_peer_access 192.168.10.2 allow host_googlevideo
cache_peer_access 192.168.10.2 allow exts
cache_peer_access 192.168.10.2 deny head_html
cache_peer_access 192.168.10.2 deny wth_lst
cache_peer_access 192.168.10.2 allow raptor_lst
cache_peer_access 192.168.10.2 allow sys_lst
cache_peer_access 192.168.10.2 deny all
cache deny all
#----------------------------------------------------------------------


Saludos.

ServiNet

Cita de: luistec en Septiembre 25, 2015, 06:44:59 PM
Squid ya no hace caché en la versión 2, por lo tanto ya se usa su marcado, Raptor se encarga de todo el contenido.

Saludos.

Que tal,

Ya que esta nueva version el squid no va hacer cache y por lo tanto ya no se podra usar el marcado TOS con squid, entonces se va a implementar un marcado TOS en raptor 2 como se hacia con squid?.

Tambien les comento que con la actualizacion me esta funcionando bien el raptor 2 con un consumo del 18% tanto en memoria como en procesador con 300 clientes.

Saludos

davidmilfont

Cita de: luistec en Septiembre 26, 2015, 12:47:46 PM
Revisa el Ip de server con la configuracion de squid.conf en las útimas lineas.


Se eu comentar a linha 82,o Squid fica normal.

davidmilfont

Se eu comentar a linha 82,o Squid fica normal.
Perdão por duplicar a mensagem.

ruso17

Cita de: davidmilfont en Septiembre 26, 2015, 12:44:52 PM
Após instalação o Squid ficou offline.
Alguém ajuda?
Posso comentar a linha 82?

FATAL: Bungled squid.conf line 82: cache_peer_access 192.168.10.2 allow ext

Revisaste que este escrito exts ? atento a eso...

davidmilfont

Falta de atenção minha... :-X
Obrigado amigos!

NIGROMANTE

Cita de: ServiNet en Septiembre 26, 2015, 12:51:20 PM
Que tal,

Ya que esta nueva version el squid no va hacer cache y por lo tanto ya no se podra usar el marcado TOS con squid, entonces se va a implementar un marcado TOS en raptor 2 como se hacia con squid?.

Tambien les comento que con la actualizacion me esta funcionando bien el raptor 2 con un consumo del 18% tanto en memoria como en procesador con 300 clientes.

Saludos

Buenas amigo , queria preguntarte como haces cuando sobrepase los 50 threads, o no te a pasado ya que comentas que tienes 300 clientes, alguna idea para no generar muchos threads, saludos.

ruso17

Cita de: angel en Septiembre 25, 2015, 10:48:16 PM
hola probando esa nueva actualizacion hay cosas que cambio
1.- cuando se lanzo esta version al usar la pc la cpu solo usaba 4% con la actualizacion usa 17%
2.- la version sin actualizar, la memoria no pasaba del 40%, con la actualizacion usa mas del 60%

Pensalo de esta manera, para que queres memoria libre?
Si tengo 8 gb y pretendo tener el 50% libre, por que no uso solo 4?
En linux, memoria libre = memoria desperdiciada

En este momento de los 8 gb tengo libres 8%, con eso se que se aprovecha al maximo, se disminuye el uso de swap y es un mejor rendimiento del sistema

TooR

Cita de: matheusluis en Septiembre 26, 2015, 11:58:42 AM
el  error del limite se refiere en a la conexion a la base de datos y no a la cantidad de procesos que genera el cache, osea solo permite 50 conexiones simultaneas, cuando sobrepasas no saca del cache si no que lo saca de la web digamos que se ahorra entre un 10 a 20% en esta version, algo es algo

No es correcto.. La segunda casilla al lado de conexiones muestra la cantidad de procesos activos de "raptor".. Cuando esa casilla supera los 50 empieza a salir el "MIT_MAX_THREADS=50__USAGE=51"... El "FIX" del THREADS fue aumentar de 40 a 50, que no pase a Offline, y que cuando este en 50 todo lo pase por MISS por tanto perdemos HITs.


(OJO el raptor de esa imagen no es mía)

Si aun cree que no es asi, haga esta prueba desde una terminal.. Coloque este comando:

ps -A |grep raptor

Ese le muestra la cantidad de procesos activos de raptor, cuéntelos y compare con la segunda casilla al lado de conexiones..

Pero para mas facilidad coloque este otro comando:

ps -A |grep raptor|wc -l

Ese se los cuenta uno a uno  :-*

Lo comento solo para evitar malos entendidos.  :-*

Cita de: NIGROMANTE en Septiembre 26, 2015, 01:58:36 PM
Buenas amigo , queria preguntarte como haces cuando sobrepase los 50 threads, o no te a pasado ya que comentas que tienes 300 clientes, alguna idea para no generar muchos threads, saludos.

Ya no habrá problema si supera los 50 threads, solo que perderás HITs pues mientras este en 50 TODO sera MISS..

NIGROMANTE

pues es mejor perder hits por ahora, a que tus clientes te empiezen a reventar tu celular porque el internet esta lento o que no sirve abrir X pagina, como me paso cuando se lanzo el raptorcache, por ahora ya lo tengo actualizado y veo que en mi caso no eh tenido problemas con la navegacion, y lo mejor ahora ya nadie me llama :D hahaha

ServiNet

Cita de: NIGROMANTE en Septiembre 26, 2015, 01:58:36 PM
Buenas amigo , queria preguntarte como haces cuando sobrepase los 50 threads, o no te a pasado ya que comentas que tienes 300 clientes, alguna idea para no generar muchos threads, saludos.

Que tal amigo,

Te comento que cuando recién instale el raptor 2 tenia muchos problemas con lo del limite de threads ya que en menos de 2 min los sobrepasaba e inmediatamente me dejaba sin internet, ya que puse la nueva actualización sorpresivamente no he pasado de 35 threads y rara ves a llegado a esa cantidad normalmente a estado entre 10 y 25, pero voy a seguir observando a ver que tal se comporta.

Saludos