Dúvida para uso de internet em mais de um computador

Olá pessoal, Bom dia.

Em minha casa, uso um modem comum de 100 Mbps para conexão da internet, 5Mbps. Mas agora, quero também usar a mesma internet no notebook. Mas este modem só tem uma entrada para internet cabeada, e não tem Wireless.
(Model ZXDSL 831, ZTE).
Ouvir dizer que é só comprar um roteador que eu consigo usar a internet em ambos. E vejam, hoje, somente hoje tem um roteador na promoção na Americanas.
Assim, gostaria que vocês confirmassem (ou não), se no meu caso, se eu usar um roteador será possivel usar a internet em ambos os computadores simultaneamente, pc e notebook, e se o roteador do link é apropriado para este caso.
http://www.americanas.com.br/aofertadodia?WT.ac=ofertadodia

http://www.americanas.com.br/produto/113466000/roteador-wireless-150mbps-tl-wr720n-panda-antivirus-pro-2012-cartao-de-ativacao-oem-1-licenca-?chave=home_aoferta_13052013&opn=ACOMDEAL&WT.mc_id=homeaoferta

Obrigada
Att.