Empresa a nivel nacional, no voy a decir nombres. La VPN no funciona, varias de nuestras ubicaciones en diferentes estados no pueden conectarse al servidor en la oficina central. Perdimos unas 9 horas de productividad en todos estos lugares.
Todo el departamento de TI buscó una solución durante esas 9 horas y no encontró ninguna. Hasta que uno fue a pagar su almuerzo con la tarjeta de la empresa y se dio cuenta de que estaba vencida. La misma tarjeta que se usaba para pagar nuestras tarifas de DNS.
Sigh. De todos modos, pensé que algunos de ustedes podrían divertirse con esto.
Edit para hacerlo un poco más divertido: El que cuya tarjeta venció fue el CTO.
Segunda edición para responder a una pregunta que he visto hacer mucho. El CEO es muy viejo y todavía piensa que todo lo relacionado con computadoras es prácticamente innecesario para administrar un negocio. Entonces nuestro Departamento de TI es de 4 personas + el CTO en esta historia, que ni siquiera pensó en cambiar la facturación a la nueva tarjeta del departamento.
Tercera y última edición: Es una compañía de concreto. Nadie recibió correos electrónicos antes de la interrupción del servicio porque la información de Whois lleva al CEO jubilado, tiene el antiguo número de teléfono y dirección de la sede, y su correo personal. No puedo decirte por qué el servicio de DNS se paga con una Amex.
uf, eso es bueno. Me sorprende que nadie que reciba los correos de facturación se haya enterado de esto.
A veces me pasa esto con los servicios de VPN. “¿Por qué la MALDITA CONCHA no funciona mi conexión!!! TODO CORRECTO! Oh, claro… No pagué.”
Un haiku que todo sysadmin/pro de operaciones ha internalizado:
No es DNS.
No puede ser DNS.
Era DNS.
Pero en serio, espero que hayan configurado monitoreo ahora. Esa es una gran brecha de cobertura.
Siendo un SysAdmin… ¿Nadie recibió una notificación de que el pago del dominio no fue procesado?
Tuvimos algo similar con nuestro servicio de chat en vivo en línea. Por alguna razón extraña, alguien decidió que sería mejor pagar manualmente la suscripción mensual cada mes en lugar de configurar un débito directo. Después de la cuarta vez de insistir a las cuentas para que pagaran la factura, simplemente dejamos de mencionarlo y nadie notó que nuestro sistema de chat en vivo no funcionaba durante cuatro años.
También deberías publicar eso en r/talesfromtechsupport
¿El departamento de TI no puede averiguar que el problema está en DNS durante 9 horas?
¿Estás seguro, realmente tienes un departamento de TI?
¿Por casualidad era la compañía llamada Nationwide? 
Este tipo de cosas pasa tan a menudo que casi es increíble. He trabajado en facturación en un par de empresas, y muchos clientes simplemente ignoran cada factura, correo electrónico, alerta, etc. hasta el último día (o incluso después) y luego llaman al soporte en pánico.
Tu historia me recordó algunos incidentes famosos de “Olvidé renovar mi dominio”:
https://whoapi.com/blog/5-all-time-domain-expirations-in-internets-history/
Apuesto a que esto fue lo que hizo Rogers.
¿Era esta empresa Rogers?
¿Te diste cuenta hasta la hora del almuerzo que tu nombre de host no se resuelve?
¿En serio? ¿Todo el departamento de TI no pudo descubrir que hay un problema con DNS?
Entonces entiendo cómo el CTO pudo pasar por alto la tarjeta que expiró y por lo tanto el pago al proveedor de DNS, pero ¿cómo un departamento completo de TI no pensó en hacer una consulta nslookup con un servidor DNS externo durante la solución de problemas?\n\nnslookup somefqdn.com external.dns.server
¿Entonces todo el departamento de TI buscó pero no descubrió que era DNS?
¿Les llevó 9 horas solucionar un problema de DNS? Parece que su departamento de TI es patético.
9 horas para entender que DNS no funcionaba. ¿Qué tipo de departamento de TI tienen?.
¿Tu departamento de TI no pudo determinar en 9 horas que era un problema de DNS?
Siempre es DNS. A menos que seas un desarrollador, entonces son zonas horarias.
Hemos tenido esto con nuestro DNS y no tomó 9 horas descubrirlo. Usa algunas herramientas para verificar la búsqueda DNS desde diferentes ubicaciones, esa debería haber sido la primera cosa que hicieron. Cuando DNS cae a menudo, algunas personas están bien porque está en caché, pero otras no, así que puede ser engañoso.