Если DHCP на модеме не раздаёт автоматически настройки, то тебе надо прописать в свойствах сетевых карт своих компьютеров как на прикреплённой картинке:
в поле шлюз (вместо 192.168.1.1) - IP-адрес модема
в поле DNS-сервер (вместо 192.168.1.1) - IP-адрес модема
По идее должно помочь. Пробуй.