Portada
mis comunidades
otras secciones
#10:
Joder, es muy interesante (al menos para mí que estudio informática). Traduzco:
Hace un rato la interface web de Gmail ha sufrido un amplio apagón que ha durado unos cien minutos. Sabemos que mucha gente depende de gmail para comunicarse personal y profesionalmente, y cuando hay un problema con el servicio nos lo tomamos muy en serio. Así que, me gustaría disculparme con todos vosotros - el apagón de hoy ha sido un problema SERIO, y lo estamos tratando como tal. Ya hemos investigado exhaustivamente lo que ha sucedido, y estamos confeccionando una lista de cosas que pretendemos arreglar o mejorar como resultado de esta investigación.
Esto es lo que ha pasado: esta mañana (hora del pacífico) hemos retirado de servicio una serie de servidores para efectuar actualizaciones de rutina. Esto no constituye un problema en sí mismo - lo hacemos a todas horas, y la interface web de Gmail funciona en diferentes lugares y simplemente envía el tráfico a otros servidores cuando uno de ellos está caído.
Sin embargo, como ahora ya sabemos, habíamos infraestimado la carga
que algunos cambios recientes (diseñados, irónicamente, para mejorar la disponibilidad del servicio) depositaban en los routers de petición - los servidores que dirigen las peticiones web al servidor gmail apropiado. Sobre las 12:30 pm hora del pacífico algunos de los routers de petición se sobrecargaron y consecuentemente le dijeron al resto del sistema "¡dejad de enviarnos tráfico, que vamos muy despacio!". Esto transfirió la carga a algunos de los otros routers de petición que quedaban, causando que algunos de ellos se sobrecargaran también, y en cuestión de minutos prácticamente todos estaban sobrecargados. A consecuencia de esto, la gente no pudo acceder a la interface web de gmail porque sus peticiones no podían ser reenviadas a un servidor de gmail. El acceso IMAP/POP y el procesado de mail siguió funcionando normalmente porque estas peticiones no usan los mismos routers.
El equipo ingeniero de gmail fue alertado en cuestión de segundos (nos tomamos la monitorización muy en serio). Después de establecer que el problema fundamental era la falta de capacidad, el equipo levantó un MONTON de routers de petición (la capacidad flexible es una de las ventajas de la arquitectura de Google), distribuyó el tráfico a través de los routers de petición, y la interface web de Gmail volvió a estar disponible.
¿Qué es lo siguiente? Estamos poniendo toda nuestra atención para asegurarnos de que este tipo de cosas no vuelva a suceder. Algunas de las acciones a tomar eran inmediatas y ya se han tomado - por ejemplo, incrementar la capacidad de nuestros routers de petición más allá del tope para asegurarnos espacio de sobra. Algunas de las acciones son más sutiles - por ejemplo, hemos concluido que los routers de petición no tienen suficiente aislamiento de fallos (por ejemplo, si hay un problema en un datacenter no debería afectar a los servidores de otro datacenter) y no reducirse progresivamente (por ejemplo, si muchos routers de petición están sobrecargados simultáneamente, simplemente deberían ralentizarse en vez de negarse a aceptar tráfico y enviarlo a otro lado). Vamos a trabajar duramente las próximas semanas para implementar éstas y otras mejoras de la fiabilidad de gmail - que permanece disponible para el 99,9% de usuarios, y estamos comprometidos a mantener sucesos como éste como memorables por su escasez.
Hace un rato la interface web de Gmail ha sufrido un amplio apagón que ha durado unos cien minutos. Sabemos que mucha gente depende de gmail para comunicarse personal y profesionalmente, y cuando hay un problema con el servicio nos lo tomamos muy en serio. Así que, me gustaría disculparme con todos vosotros - el apagón de hoy ha sido un problema SERIO, y lo estamos tratando como tal. Ya hemos investigado exhaustivamente lo que ha sucedido, y estamos confeccionando una lista de cosas que pretendemos arreglar o mejorar como resultado de esta investigación.
Esto es lo que ha pasado: esta mañana (hora del pacífico) hemos retirado de servicio una serie de servidores para efectuar actualizaciones de rutina. Esto no constituye un problema en sí mismo - lo hacemos a todas horas, y la interface web de Gmail funciona en diferentes lugares y simplemente envía el tráfico a otros servidores cuando uno de ellos está caído.
Sin embargo, como ahora ya sabemos, habíamos infraestimado la carga
que algunos cambios recientes (diseñados, irónicamente, para mejorar la disponibilidad del servicio) depositaban en los routers de petición - los servidores que dirigen las peticiones web al servidor gmail apropiado. Sobre las 12:30 pm hora del pacífico algunos de los routers de petición se sobrecargaron y consecuentemente le dijeron al resto del sistema "¡dejad de enviarnos tráfico, que vamos muy despacio!". Esto transfirió la carga a algunos de los otros routers de petición que quedaban, causando que algunos de ellos se sobrecargaran también, y en cuestión de minutos prácticamente todos estaban sobrecargados. A consecuencia de esto, la gente no pudo acceder a la interface web de gmail porque sus peticiones no podían ser reenviadas a un servidor de gmail. El acceso IMAP/POP y el procesado de mail siguió funcionando normalmente porque estas peticiones no usan los mismos routers.
El equipo ingeniero de gmail fue alertado en cuestión de segundos (nos tomamos la monitorización muy en serio). Después de establecer que el problema fundamental era la falta de capacidad, el equipo levantó un MONTON de routers de petición (la capacidad flexible es una de las ventajas de la arquitectura de Google), distribuyó el tráfico a través de los routers de petición, y la interface web de Gmail volvió a estar disponible.
¿Qué es lo siguiente? Estamos poniendo toda nuestra atención para asegurarnos de que este tipo de cosas no vuelva a suceder. Algunas de las acciones a tomar eran inmediatas y ya se han tomado - por ejemplo, incrementar la capacidad de nuestros routers de petición más allá del tope para asegurarnos espacio de sobra. Algunas de las acciones son más sutiles - por ejemplo, hemos concluido que los routers de petición no tienen suficiente aislamiento de fallos (por ejemplo, si hay un problema en un datacenter no debería afectar a los servidores de otro datacenter) y no reducirse progresivamente (por ejemplo, si muchos routers de petición están sobrecargados simultáneamente, simplemente deberían ralentizarse en vez de negarse a aceptar tráfico y enviarlo a otro lado). Vamos a trabajar duramente las próximas semanas para implementar éstas y otras mejoras de la fiabilidad de gmail - que permanece disponible para el 99,9% de usuarios, y estamos comprometidos a mantener sucesos como éste como memorables por su escasez.
#1:
Google sigue siendo google. La cagan y te lo explican sin problemas. Cualquier otra compañia empezaria a tirar balones fuera y decir que era culpa de otro pero esta gente deja claro que la cagaron por culpa de una imprevision y que van a tomar medidas para que no pase de nuevo.
#5:
Os recuerdo que no funcionaba la web, pero el resto de aplicaciones /accesos a gmail sí. Incluso igoogle, via web, cargaba perfectamente los correos
#8:
Bueno, yo no uso GMail para nada crítico, pero es mi correo personal y por tanto accedo frecuentemente. Estoy totalmente seguro que si hubiera sido, por ejemplo, Hotmail, ni siquiera sabríamos que hubiera habido un corte en el servicio, simplemente no podríamos entrar y punto.
Por otro lado, las grandes empresas (Telefónica, Santander, Repsol etc...) utilizan sus propios servidores de correo -basados en Lotus- así que, por lo menos en España y en lo que yo conozco no ha debido afectar demasiado.
Por distintos motivos he tenido que usar el MSN Messenger en algunos momentos de mi vida, y es más de lo mismo: algunas veces pocas no podía conectarme durante un largo período por problemas con el servidor... y NADIE me dio ninguna explicación, nunca
Por eso estoy con #1, si bien es cierto lo que apunta #6 de que son una empresa y han dicho lo que les ha dado la gana, otras empresas ni se molestan en hacer un comunicados, así que, chapeau por ellos
Por otro lado, las grandes empresas (Telefónica, Santander, Repsol etc...) utilizan sus propios servidores de correo -basados en Lotus- así que, por lo menos en España y en lo que yo conozco no ha debido afectar demasiado.
Por distintos motivos he tenido que usar el MSN Messenger en algunos momentos de mi vida, y es más de lo mismo: algunas veces pocas no podía conectarme durante un largo período por problemas con el servidor... y NADIE me dio ninguna explicación, nunca
Por eso estoy con #1, si bien es cierto lo que apunta #6 de que son una empresa y han dicho lo que les ha dado la gana, otras empresas ni se molestan en hacer un comunicados, así que, chapeau por ellos
Comentarios
Google sigue siendo google. La cagan y te lo explican sin problemas. Cualquier otra compañia empezaria a tirar balones fuera y decir que era culpa de otro pero esta gente deja claro que la cagaron por culpa de una imprevision y que van a tomar medidas para que no pase de nuevo.
#1 El problema es que muchas empresas tienen su infraestructura en la red íntimamente relacionada con aplicaciones de Google (de pago), y ayer esas empresas quedaron muy afectadas y a una hora muy mala (about 12:30 pm Pacific, mediodía en la costa oeste). Y eso Google (y cualquier empresa) no se lo puede permitir.
De todas formas, pocas explicaciones han dado. Han venido a decir que varios routers habían sido puestos offline para mantenimiento (como hacen regularmente) pero, debido a recientes cambios realizados para precisamente aumentar la disponibilidad del servicio, el resto de routers empezó a recibir demasiado tráfico y algunos de ellos empezaron a rechazar peticiones que debían ser atendidas por otros routers (también sobrecargados) hasta que... todo petó. Las soluciones propuestas (aumentar la capacidad de su red y hacer que los routers no rechacen tráfico, aunque vayan más lentos) tampoco son la bomba.
#3 yo estoy con #1 ¿o acaso otras compañias de software dan explicaciones por que ha dejado de funcionar tal o cual cosa o se te cuelga el programa? por ejemplo yo he estado un año trabajando con SAP nos daba muchos problemas y la empresa era incapaz de decirnos los por ques; y SAP no es barato precisamente
#3 Me da que te equivocas. Solo dejó de funcionar Gmail por web. No creo que esto haya afectado a los servicios de las empresas, a no ser que usen el correo de Gmail por web. Desde el Outlook yo no tuve ningún problema en revisar mi correo, mientras la web estaba caída. Si la empresa usa Gmail y no tenia ningún cliente de correo configurado, es que son un poco patanes.
Estoy con #1
#5 #7
"Google Apps, que es la oferta de servicios corporativos de Google, sufrio los mismos problemas. Google cuenta con mas de un millon de negocios que usan Apps" http://www.panamacom.com/blog/2009/09/02/gmail-y-apps-cae-por-3era-vez-este-ano/
"Update 1: Gmail/Google Apps Email is currently down. Gmail and Google Apps email is down at time of writing across the globe." http://thenextweb.com/2009/09/01/google-experiencing-downtime-world/
"In all seriousness, though, the outage isn’t helping Google’s attempts to portray Google Apps as a “mature product suite”—a desire that drove its recent decision to take the ‘beta’ label off of the product suite." http://paidcontent.org/article/419-in-gmail-outage-gone-google-hashtag-gets-co-opted/
"Dutch news service NU.nl briefly had to remove their ads (server by Doubleclick) because they weren’t loading and thus slowing down their sites." http://thenextweb.com/2009/09/01/google-experiencing-downtime-world/
"Both Apps For Domain and the usual consumer Gmail service are down completely." http://www.techcrunch.com/2009/09/01/gmail-now-really-down-can-i-get-my-email-back-please/
"for those of you who use Gmail for business, whether you're a paying Google Apps customer or not, you may feel almost 2 hours of downtime leads to 12 hours of lost productivity." http://googlewatch.eweek.com/content/gmail/google_gmail_is_down.html
"Customer who are paying to use Google Apps can probably expect some free usage to compensate for the wasted time." http://digital.venturebeat.com/2009/09/01/gmail-fails-outage-drives-users-to-overload-twitter/
"Software como servicio para la seguridad, el intercambio de información y el correo electrónico a nivel empresarial. Si tu empresa se pasa a Internet, desea contar con una solución de correo electrónico rentable o tiene dificultades a la hora de dar acceso a los empleados a información importante, Google Apps te ayudará a ampliar recursos y a trabajar de forma más inteligente." http://www.google.com/apps/intl/es/business/index.html
http://fon.gs/nada-mas
#3 ¿Puedes darnos ejemplos de otras empresas (Yahoo, Microsoft, ...) que hayan dado una explicación técnica tan detallada cuando se les ha caido el chiringuito?
Por ejemplo puedes empezar por aquí:
El sistema informático de la Bolsa de Londres, basado en .NET de Microsoft, se cae durante 7 horas
El sistema informático de la Bolsa de Londres, bas...
reuters.comUn, dos, tres responda otra vez
#13 Error 404, pagina no encontrada en el enlace que has puesto
http://www.reuters.com/article/ousiv/idUSL01084620080908?pageNumber=3&virtualBrandChannel=0&sp=true
#1 ¿Por qué siempre sale alguien a defender lo que hace Google? Lo que contaron fue lo que les da la gana, Google es una empresa, no una hermanita de la caridad.
Más les vale intentar tomar previsiones, si no crean desconfianza en "la nube" y eso no les conviene. Que expliquen ya puestos su doble rasero de por qué ellos pueden vender enlaces patrocinados en su buscador y si una web mundana lo hace le penalizan en el Page Rank por decir algo.
Bueno, yo no uso GMail para nada crítico, pero es mi correo personal y por tanto accedo frecuentemente. Estoy totalmente seguro que si hubiera sido, por ejemplo, Hotmail, ni siquiera sabríamos que hubiera habido un corte en el servicio, simplemente no podríamos entrar y punto.
Por eso estoy con #1, si bien es cierto lo que apunta #6 de que son una empresa y han dicho lo que les ha dado la gana, otras empresas ni se molestan en hacer un comunicados, así que, chapeau por ellos
Por otro lado, las grandes empresas (Telefónica, Santander, Repsol etc...) utilizan sus propios servidores de correo -basados en Lotus- así que, por lo menos en España y en lo que yo conozco no ha debido afectar demasiado.
Por distintos motivos he tenido que usar el MSN Messenger en algunos momentos de mi vida, y es más de lo mismo: algunas veces pocas no podía conectarme durante un largo período por problemas con el servidor... y NADIE me dio ninguna explicación, nunca
#6 Por que el buscador es suyo y se lo follan cuando les da la gana, asi de simple.
#12 Es abuso de posición dominante y competencia desleal. ¿Te parecen buenas prácticas empresariales?
#15 lo que no se es si tienen posición dominante. Recuerda que solo en Europa tiene un mayor porcentaje del negocio de los buscadores...
#15 Abuso de posición dominante es un termino que no tiene mucho sentido, y lo de competencia desleal pues no se, acaso es competencia desleal tener ventajas en su servicio que TU ofreces?
#1
Hablando de memoria, creo que ya van dos veces en lo que va de año que es por culpa de una mala previsión (además sobre el mismo tema: sobrecarga de routers y/o servidores) y que toman medidas para que no pase de nuevo.
Joder, es muy interesante (al menos para mí que estudio informática). Traduzco:
Hace un rato la interface web de Gmail ha sufrido un amplio apagón que ha durado unos cien minutos. Sabemos que mucha gente depende de gmail para comunicarse personal y profesionalmente, y cuando hay un problema con el servicio nos lo tomamos muy en serio. Así que, me gustaría disculparme con todos vosotros - el apagón de hoy ha sido un problema SERIO, y lo estamos tratando como tal. Ya hemos investigado exhaustivamente lo que ha sucedido, y estamos confeccionando una lista de cosas que pretendemos arreglar o mejorar como resultado de esta investigación.
Esto es lo que ha pasado: esta mañana (hora del pacífico) hemos retirado de servicio una serie de servidores para efectuar actualizaciones de rutina. Esto no constituye un problema en sí mismo - lo hacemos a todas horas, y la interface web de Gmail funciona en diferentes lugares y simplemente envía el tráfico a otros servidores cuando uno de ellos está caído.
Sin embargo, como ahora ya sabemos, habíamos infraestimado la carga
que algunos cambios recientes (diseñados, irónicamente, para mejorar la disponibilidad del servicio) depositaban en los routers de petición - los servidores que dirigen las peticiones web al servidor gmail apropiado. Sobre las 12:30 pm hora del pacífico algunos de los routers de petición se sobrecargaron y consecuentemente le dijeron al resto del sistema "¡dejad de enviarnos tráfico, que vamos muy despacio!". Esto transfirió la carga a algunos de los otros routers de petición que quedaban, causando que algunos de ellos se sobrecargaran también, y en cuestión de minutos prácticamente todos estaban sobrecargados. A consecuencia de esto, la gente no pudo acceder a la interface web de gmail porque sus peticiones no podían ser reenviadas a un servidor de gmail. El acceso IMAP/POP y el procesado de mail siguió funcionando normalmente porque estas peticiones no usan los mismos routers.
El equipo ingeniero de gmail fue alertado en cuestión de segundos (nos tomamos la monitorización muy en serio). Después de establecer que el problema fundamental era la falta de capacidad, el equipo levantó un MONTON de routers de petición (la capacidad flexible es una de las ventajas de la arquitectura de Google), distribuyó el tráfico a través de los routers de petición, y la interface web de Gmail volvió a estar disponible.
¿Qué es lo siguiente? Estamos poniendo toda nuestra atención para asegurarnos de que este tipo de cosas no vuelva a suceder. Algunas de las acciones a tomar eran inmediatas y ya se han tomado - por ejemplo, incrementar la capacidad de nuestros routers de petición más allá del tope para asegurarnos espacio de sobra. Algunas de las acciones son más sutiles - por ejemplo, hemos concluido que los routers de petición no tienen suficiente aislamiento de fallos (por ejemplo, si hay un problema en un datacenter no debería afectar a los servidores de otro datacenter) y no reducirse progresivamente (por ejemplo, si muchos routers de petición están sobrecargados simultáneamente, simplemente deberían ralentizarse en vez de negarse a aceptar tráfico y enviarlo a otro lado). Vamos a trabajar duramente las próximas semanas para implementar éstas y otras mejoras de la fiabilidad de gmail - que permanece disponible para el 99,9% de usuarios, y estamos comprometidos a mantener sucesos como éste como memorables por su escasez.
Os recuerdo que no funcionaba la web, pero el resto de aplicaciones /accesos a gmail sí. Incluso igoogle, via web, cargaba perfectamente los correos
¿La explicación en inglés?
We have messed it brown.
#2 traduccion: vamos, que la hemos liao parda
Un servicio que está parado 100 minutos al año... Me sale una disponibilidad del 99,98% online. Ya me diréis quién os da eso...
Hombre, es gratis... no tienen miedo a que sus "clientes" se quejen por dar un mal servicio. Además, estoy con #11... 99,98% de servicio online no está nada mal... no está nada mal...
Por eso uso Mutt con imap/smtp . El correo siempre ha sido así leñe, malditos usuarios 2.0, enteraros que aunque caiga el acceso web el correo está disponible con Thunderbird/Outlook/Mutt/ tu cliente de correo favorito.
#22 >> Que viva la nube, mi impresión es que tener almacenado correo en local es cosa del pasado, y si mañana desaparecen todos mis correos de Gmail por un fallo imposible, pues vuelta a empezar, no me amargaría demasiado.
#28 Cómo se nota que no eres administrador
#25 sí es oficial... y por lo que dicen estan cambiando routers todo el rato y les funciona... y porque tiene mas sentido que falle el servidor de la pagina de gmail que los routers internos?... de hecho dado que son páginas dinamicas casi tiene mas sentido que casi todo el trafico de datos entre los ordenadores distribuidos sea mayor que el que emiten fuera
#22 pues yo espero que tengan algun back up...
¿Tan importante es que un servicio de correo se caiga menos de dos horas?
#0 "dejará" hablamos de futuro pasado? eing?
#17 Cierto:
#0 "dejará de estar disponible ayer"... ¿Qué es eso?
"El equipo ingeniero de gmail fue alertado en cuestión de segundos (nos tomamos la monitorización muy en serio)."
Lo que no se entiende entonces es cómo el problema duró 100 minutos.
Buena explicación.
Ante esta noticia me asaltan un par de dudas. ¿Es oficial de Google este blog? Si no lo fuese, sin una fuente fiable de google.com no le daría mucha credibilidad. En cuanto a los trabajos de actualización, se hacen de una manera programada, en horarios de corte (mínimo impacto para el cliente). El horario que se ha usado no parece muy sensato, y ¿por qué no activaron los routers de backup antes del trabajo? La respuesta al problema me parece muy peculiar . Además me imagino que debería fallar por sobrecarga antes el servidor que responde la página de Gmail , que un router...