@Leonardo Neves Magalhães No site do OpenWrt é meio difícil achar o firmware para gravar, mas geralmente fica no final da pagina quando você clica no seu modelo de roteador, lá vai ter três opções de arquivos para baixar. O firmware de atualização caso já tenha instalado uma versão anterior do OpenWrt, o firmware principal para fazer a instalação via interface de atualização da TP-Link e o firmware original da TP-Link caso não goste do OpenWrt você possa voltar para o firmware original da TP-Link. No seu caso eles não recomendam modelos de memória flash de apenas 4 MB para atualização das versões 19.0 em diante, mas as versões 18.0 funcionam, vai que tal vez resolvem o seu problema.
https://openwrt.org/toh/hwdata/tp-link/tp-link_tl-wr840n_v2
La no final da pagina desse link , clique no link azul em frente de Firmware OpenWrt Install URL:
Esse é seu firmware, caso queira testar, depois de baixado é só ir na interface de atualização da TP-Link e atualizar normalmente, igual quando se faz com firmware da própria TP-Link. É muito fácil , lembre-se, se for atualizar pela interface web, faça usando o cabo de rede e não pelo Wifi.