Status Blog


Instabilidade rede Brasil 12/01/2017


Boa noite,

Caro(a)s clientes alguns IPs da rede Brasil estão sofre um ataque Ddos sofisticado desde o final da tarde, trazendo oscilação na rede. Aparentemente caindo e voltando o acesso por alguns minutos.
Nossa equipe de rede esta trabalhando junto com a equipe do Anti ddos criando novas regras para mitigar estes ataques e evitar maiores transtornos aos sites. Este tipo de ataque e sofisticado, misturando ataques volumétricos, como também outras formas que bloqueamos e o atacante muda a forma de ataque. O que chamamos de jogo de Xadrez, movemos uma peça/regra. Eles mudam a forma. Porém, todas as regras já efetuadas, mesmo que ocorra novos ataques da mesma forma, não surtira mais efeitos no futuro.

Lamentamos o transtorno, estamos trabalhando para normalização.
12/01 - 22:26

------
13/01 - 01:25
A rede esta operando normal no momento. Estamos monitorando a alterando a rede para a proteção sempre quando necessário. Quando esta operando 100% pela rede Anti ddos. O ping pode se elevar e aumentar os saltos nas redes. Neste caso, reporte ao suporte com print do ping, tracert e seu endereço IP para analise se o seu IP não esta sendo bloqueado como um falso positivo.


-----
13/01 - 09:24

Bom dia, a rede esta operando no momento 100% do trafego pela rede Anti ddos. Isto tem garantido todos os servidores online. Com as regras já criadas, os ataques não tem tido mais efeitos maiores. Porém, o efeito colateral e para alguns provedores de Internet o ping esta "Elevado", como rotas maiores. O que causa certa lentidão. Infelizmente, temos que aguardar o ataque cessar para removermos a rede 100% do link Anti ddos para voltarmos a operar a rede pelos Links Brasil e ter acesso 100% normalizado. Se tiver ocorrendo isto com você. Tente acessar com outro provedor de Internet para testes.


Revenda BR

2017-01-12 22:26:56 • Leia mais





E-mail srv4br.com.br


Bom dia!

08:59hrs
Foi detectado um problema no serviços de e-mail desse servidor agora pela manhã, já realizamos o processo de verificação do problema, e foi constatado uma falha no POP/IMAP depois do update.
Abrimos um chamado no suporte do cPanel pra eles verificarem.

Estamos no aguardo da verificação pelo cPanel.

09:12

Nossa equipe conseguiu corrigir o erro antes do Cpanel responder.
O acesso esta normalizado novamente, vale lembrar que o erro era apenas para logar, os emails estavam sendo recebido normalmente.


Revenda BR

2016-08-23 09:00:17 • Leia mais





Revenda Brasil


Boa tarde!

13:20 hrs
Caros clientes, informamos que nossos servidores Brasil encontram-se instáveis...
As DNS do servidor não estão respondendo, deixando assim os sites e vossos serviços sem acesso.
Nosso departamento técnico já esta verificando o que ocorreu, para corrigir e normalizar os serviços.

13:25
Identificamos a causa e de fato era um filtro severo do sistema Anti ddos o que causou erro nos DNS. Já foi removido e o acesso esta normal.


Revenda BR

2016-07-13 13:21:04 • Leia mais





Banco de dados


Bom dia!

09:57 hrs Nesse momento nossos servidores encontram-se com instabilidade gerando erro no banco de dados. Já estamos verificando e efetuando a correção, em alguns minutos servidor estará operando novamente 100%.

10:03 hrs
O update do easybackup apresentou problemas e criou um arquivo gigante no TMP dos servidores: O processo foi encerrado em todas as máquinas e o arquivo removido
Servidores online novamente.


Revenda BR

2016-05-25 09:57:03 • Leia mais





Rede Brasil


Boa noite,

Caros amigos, identificamos um problema em nossa rede BR. A mesma se encontra inoperante neste momento.
Acionamos a equipe do Data Center para verificar.

17/05/2016 - 19:10
Rede Brasil operando novamente. A rede esta online operando pelo Link da proteção Anti Ddos.

18/05/2016 - 09:22
A rede Brasil começou a receber ataques novamente, estamos alterando as regras para a proteção Anti Ddos. Em instantes normalizará sem perca de pacotes.


18/05/2016 - 09:50
A forma de ataque recebida, tem sido uma engenharia nova. Estamos junto com a empresa em que trabalhamos a nossa rede Anti ddos, mudando as regras e proteção para voltar a normalidade. Neste momento, a rede esta instável, com bastante perca de pacotes.


18/05/2016 - 10:07
Conseguimos com as novas regras, bloquear o ataque. Estamos operando sem perca de pacotes no momento.
O que esta ocorrendo é um ataque bem sofisticado. Toda nossa equipe esta empenhada em estabilizar 100% e criando novas regras e formas para proteção deste tipo de ataque, quando ocorrer.

18/05/2016 - 10:39
Identificamos o problema na propagação de nossos anúncios via BGP como consequência dos últimos ajustes manuais que fizemos nas configurações em nossa infraestrutura. Estamos fazendo a correção que entrará em vigor nos próximos minutos.

18/05/2016 - 10:40
Rede normalizada. Estamos operando pela proteção Anti ddos.

Um pergunta comum é: Mesmo utilizando proteção Anti Ddos, somos afetados?

R: A mitigação de DDoS é uma tarefa árdua e que exige todo um repertório técnico e operacional que a própria Alog (hoje Equinix, a maior empresa mundial de datacenters) não consegue proteger destes ataques. Como para proteger nossa infraestrutura temos que lançar mão de técnicas não triviais, a reconfiguração de roteadores para acomodar um novo cenário costuma levar mais tempo do que uma configuração normal/comum de roteador.

Os ataques que temos recebido desde ontem tem sido desenhados especificamente para fugir dos principais parâmetros de detecção e mitigação de DDoS e fomos bem sucedidos em perceber, detectar e criar contra-medidas inéditas para este caso. Esse tipo de esforço e empenho é desafiador e exige muita experiência no assunto para chegar a uma solução única como chegamos para atende a nossa necessidade.

Vale lembrar que até estruturas grandes como Microsoft já caíram com ataques Ddos. Como recentemente a Anatel e a Operadora Algar que ficaram dias com problemas.
A nossa equipe junto com a empresa Anti ddos conseguimos sanar os efeitos do ataque em nossa rede. Caso não tivéssemos a proteção, ficaríamos 100% fora do ar, por dias ou horas até encerrar o ataque.

Atenciosamente,
HostHP
www.hosthp.com.br
0800 094 4000


Revenda BR

2016-05-17 18:31:57 • Leia mais





Srv1br.com.br


14/03/2016 08:36
Olá!

Caro(a)s clientes, o servidor srv1br.com.br IP 143.208.8.4 amanheceu sem acesso SSH e WHM.
Solicitamos ao Data Center uma analise do mesmo.

Estamos no aguardo da conclusão para verificarem o que ocorreu e normalizar os acessos aos sites e serviços.



14/03/2016 - 08:58
O técnico do Data Center acabou de informar mais detalhes. Ocorreu um problema em dois discos do RAID do servidor.


DADOS DA INTERAÇÃO:
------------------
Chamado: AT608966
Hora da interação: 14/03/2016 às 08:48
Cliente: HOSTHP
Atendente:
Assunto: Sem acesso SSH

INFORMAÇÃO SOLICITADA:
---------------------
Prezado Cliente, boa tarde.

Conforme conversamos via telefone, o servidor apresenta raid degradado, o HD0 e HD1 esta como Missing impossibilitando o boot do sistema operacional.

Como medida prioritária, iremos tentar restaurar o raid do equipamento, passarei um feedback a respeito do andamento da solicitação.

Atenciosamente,

Ezequias de Araujo
Operações - Operação IBX
Equinix

Sistema de atendimento EQUINIX

14/03/2016 - 09:35
A restauração do RAID foi concluída. O servidor esta online novamente sem erros.
Vamos agendar um teste dse7 da Dell para analisar se tem algum problema na controladora do RAID.
Lamentamos o transtorno.
_____________________

14/03/2016 - 13:00
Caro(a)s clientes, novamente o servidor srv1br.com.br IP 143.208.8.4 esta sem acesso SSH e WHM.
Já estamos verificando juntamente ao Data Center uma analise do mesmo.

Estamos no aguardo da conclusão para verificarem o que ocorreu e normalizar os acessos aos sites e serviços.

-------
14:51
O serviço voltou neste momento. Mas ainda não esta 100% concluído o teste e identificado o problema para troca do que for necessário.
Poderá ter falhas ainda durante a conclusão.


-----
15:08
O servidor no momento esta online, voltando os serviços com o Load elevado.
Recebemos o report da Dell e segundo eles terão que trocar os discos do servidor. Um foi danificado, mas, como esta em RAID5, ele danificou os demais.

Estamos solicitando ao operador no DC para remover um dos discos do srv1br.com.br e inserir em uma case para adicionarmos como HD externo no srv4br.com.br e restaurarmos as contas no mesmo.
Não vamos trocar os discos deste srv1br.com.br o servidor apresentou em menos de seis mês o mesmo problema. Estamos descartando esta maquina.
O servidor srv4br.com.br e uma maquina potente, com as mesmas configurações, com uma grande vantagem, o sistema utiliza disco SSD, diferente da atual que era SATA.
A única vantagem para vocês clientes durante este problema e que, após a migração para este novo servidor, o acesso aos sites e serviços será visivelmente melhor.

-----------
15:59
Servidor srv1br.com.br esta fora do ar para que possa restaurar os arquivos.

16:16 - Atualização:
O disco inserido no Case, não foi identificado no novo servidor.
O operador esta trocando por outro disco para testarmos e iniciar a restauração. Neste momento ainda o servidor continuará fora do ar.


-------
16:37
Disco inserido com sucesso. Estamos montando a unidade porá poder iniciar a restauração dos arquivos.

-------
19:37
Voltamos os discos para o servidor, estamos desativando os serviços, deixando apenas os e-mails online.
Assim, estaremos iniciando a migração dos arquivos para o srv4br.com.br conforme diagnostico da Dell, os discos estão com problema, não sendo mais confiável continuar com o mesmo online e travar novamente há qualquer momento.
Sendo assim, os sites continuaram fora, até concluir a migração, funcionando apenas os e-mails para estarem entrando em contato com seus clientes e fornecedores sem problemas.
Lamentamos o transtorno. A restauração diretamente por ele foi iniciada.

-------
21:26
A migração esta em andamento com sucesso!
Os sites que já forem restaurados, voltam a funcionar normalmente. Não será perdido nenhum dos dados dos sites/clientes, já esta sendo feito dos arquivos que estão online e não do Backup...

-------
23:30
A restauração esta em 4% até o momento.
Esta sendo feita por ordem alfabética, iniciando pela letra A...


-------
00:23
Restauração em 7%.

-------
05:31
Restauração em 17%

-------
07:10
Restauração em 20%

-------
08:02
Restauração em 27%

-------
09:42
Restauração em 30%
Apenas para constar, os sites estão online desde quando foi iniciado a migração. Deixamos ele bem limitado, mas conseguimos deixar o apache rodando durante a migração. Sendo assim, poderá ter acesso aos sites/clientes durante este processo. Mas, como citado, esta limitado, no momento que os acessos prejudicam a migração, e desligado o serviço até normalizar para concluir a migração.

Ao concluir a migração, será necessário as revendas alterar os IPs. Informaremos os novos Ips ao concluir a restauração.

-------
11:35
Restauração em 33%
____
13:08
Restauração em 35%

____
14:27
Restauração em 39%

____
16:23
Restauração em 42%
- Uma pergunta frequente: Irei perder algum arquivo ou email durante a migração, já que esta sendo feita inclusive no horário comercial?
R: Não, a migração esta sendo feita via transferência/redirecionamento. Ou seja, ao concluir a migração, a conta já passa a responder automaticamente no novo servidor, antes mesmo de alterar os IPs. Após migrar, já e bloqueada no antigo. Sendo assim, uma margem muito pequena para perca de dados. Mas, caso ocorrer, o servidor antigo continuara online alguns dias após ser restaurados 100% as contas, para serem sincronizados os arquivos da migração novamente se houver necessidade.
__________
18:18
Restauração em 46%

________
19:56
Restauração em 50%

____________
21:01
Restauração em 54%
_____________
21:54
Restauração em 57%

_____________
00:09
Restauração em 68% :)

_____________
07:14
Restauração em 98%

_____________
Atenção! 07:55
Migração concluída.
Agora todos os clientes que utilizava os DNS:
ns1.srv1br.com.br
ns2.srv1br.com.br
Devem alterar para:
ns1.srv4br.com.br
ns2.srv4br.com.br

Ou que utilizava os IPs:
143.208.8.4
143.208.8.5
Deve alterar para:
143.208.8.61
143.208.8.62

Estes dados atuais, ainda funcionara por alguns dias, para todos terem prazos de alteração. Mas, será desligados em breve, se não tiverem alterados, seus sites iram ficar fora do ar.
Duvidas? suporte@hosthp.com.br


Revenda BR

2016-03-14 08:37:21 • Leia mais





Srv1br.com.br


Olá!

Caro clientes, detectamos que os discos RAID do servidor citado, esta tendo picos de leitura dos discos, causando elevação dos discos.
Efetuamos uma visita no Rack e visualmente em alerta de leds e cabos esta tudo ok.
Agendamos para hoje 16/02/2016 as 18 horas a migração de algumas revendas que estão com elevado uso dos discos para um servidor com pouco uso.
Os clientes já foram notificados, caso esteja neste servidor e não recebeu o e-mail, não precisa efetuar nenhum procedimento.
A migração será mais rápida do que o normal, já que será feita dentro da nossa rede.

Lamentamos o transtorno.

www.hosthp.com.br
(0xx11)3958-7072


----

22:48
Boa noite,

Caro(a)s, a migração esta em andamento. Em virtude da lentidão causada, decidimos não gerar novos Backups diarios hoje 16/02 e desativar a função Backup do Cpanel até concluir esta migração.
Informamos que amanha cedo 17/02 antes do horário comercial, se a migração ainda estiver em andamento, iremos efetuar uma pausa, para voltar após o horário comercial e não prejudicar a todos os clientes.
Com a Pausa da migração, também não afeta os clientes que estão sendo migrado, já que as contas estão sendo migradas via apontamento de DNS, ao ser migrada, já respondem no novo servidor, o que já terá um certo alivio na carga do mesmo amanha.
Lamentamos o transtornos aos clientes deste servidor, estamos focado em sanar este problema!

----
17/02 06:31
A migração foi pausada, em instantes normaliza o Load do servidor para o horário comercial.
Ao final do dia, iniciaremos novamente para concluir definitivamente a mesmo já foi 51% concluída.

----
17/02/2016 18:25
Foi novamente a migração. A mesma já esta em 80% até o presente momento.
Em poucas horas estará concluída, normalizando 100% o servidor!

----
17/02/2016 22:10
A migração das contas foram concluídas com sucesso.
Servidor volta ao padrão de qualidade HostHP o/

Lamentamos o transtorno. Novos clientes revenda não serão inseridos neste servidor, deixando apenas o crescimento orgânico dos clientes que já estão no mesmo.

www.hosthp.com.br


Revenda BR

2016-02-16 16:45:16 • Leia mais





Clientes Net Virtua!


22/01/2016 16:40
Caro(a)s clientes, foi identificado que usuários da empresa "Embratel/Net/Virtua". Especificamente que usam as rotas de São Paulo estão sem acesso aos servidores de nossa rede BR.
Já notificamos o abuse deles, estamos entrando em contato diretamente com os técnicos de rede do mesmo em uma tentativa de solução ao fato deles não estarem anunciando/enxergando os nossos Ips na rede deles.
Como todos os clientes podem notar, o serviço esta online e funcional, apenas com este determinado provedor esta causando problemas. Estamos intervindo junto aos mesmos para uma solução definitiva.


22/01/2016 - 16:54
Segundo a NetVirtua, foi efetuado ajustes na rede dos mesmos. Acesso normalizado aos clientes desta operadora.


Revenda BR

2016-01-22 16:42:07 • Leia mais





Revenda BR


21:26 21/01/2016
Boa noite,

Caro(a)s tivemos uma instabilidade e já está sendo verificado de imediato peço que aguarde estamos verificando a causa e dentro de pouco tempo será normalizado.

Boa noite
Caro(a)s servidor normalizado todo o trafego está sendo filtrado pela proteção anti ddos, o que pode elevar um pouco o ping.
2016-01-21 22:03:51

Boa noite,

As 23:11 ataques que estavam sendo filtrado, foram intensificado. Estamos alterando as configurações nos roteadores.

23:50:
Identificamos a configuração que estava impedindo o anúncio de nosso bloco e estamos fazendo as correções. Esperamos ter resultados positivos nos próximos minutos.

23:59 Mesmo ocorrendo alguns ataques de Gbps, O ataque esta controlado. Trafego sendo filtrado 100%.
Ótima noite a todos!

------

10:39 22/01/2016
A rede esta sendo filtrada toda pela proteção Anti Ddos. O que causa uma certa perca de pacotes.
No momento, a rede ainda continua recebendo ataques Ddos, aumentando a perca de pacotes. Estamos alterando as configurações nos roteadores para os clientes não sentirem estes ataques em andamento.

11:15 22/01/2016
Configurações de filtro destes ataques ajustada. Mitigando o ataque com sucesso.


Revenda BR

2016-01-21 22:21:49 • Leia mais





Rede Brasil Revendas


Boa tarde,

Caro(a)s, a rede BR esta sobre ataque Ddos. Estamos alterando o trafego da rede 100% para o sistema de proteção Anti Ddos.
O que poderá causar um aumento do ping enquanto estivermos operando assim.


Boa tarde, caro(a)s, a rede Brasil esta operando normalmente, mesmo sobre forte ataque Ddos.
Filtramos toda a nossa rede, para passar pela proteção Anti Ddos.
Após, esta ação, tudo funcionando normalmente e a concorrência ficando triste! :)

13/01/2016 16:25


Revenda BR

2016-01-13 17:26:18 • Leia mais