A maneira mais simples de resolver problemas de alcance, se estiver disposto a investir, seria usando uma solução de wi-fi mesh, como o Google (Nest) Wi-Fi, eero da Amazon, Velop da Linksys, Deco da TP-Link, Orbi da Netgear, etc.
Outra opção seria adicionando repetidores nos pontos onde o sinal não alcança.
Sobre a rede cair, depende… É a internet que cai? Quando cai, funciona se conectado via cabo de rede? Se não, o problema pode estar na sua operadora e não no seu roteador.
No mais, configure sua rede de 2,4 GHz para a frequência de apenas 20 MHz, e tente alternar entre os canais 1, 6 ou 11 para ver qual deles te dá o melhor resultado. Se seu roteador tiver a opção de canal automático, use-a. Não use qualquer outro canal que não seja 1, 6 ou 11 na sua rede de 2,4 GHz.
Veja também: