Честно говоря на PPPoE не похоже...скорее PPTP. Да, все это Вы задаете на компьютере.

Подскажите, пожалуйста, можно ли настроить в этом случае DSL-504G, чтобы модем/роутер соединялся к интернету и через себя давал доступ к интернету двум домашним компьютерам.
Ещё раз исходные данные от провайдера:
IP, Mask, Gateway, логин/пароль и IP vpn(?) сервера.

Правильно ли моё предположение:
создать PPPoE LLC соединение на модеме,
задать IP, Mask и Gateway, выданные провайдером для компьютера
в PPP удалить и создать новое соединение PPPoE, где прописать в Service Name IP vpn сервера

IP, Mask и Gateway компьютеров узнавать от DHCP модема.

Нужно ли в этом случае как-то специально настраивать NAT?

Заранее спасибо!

В Инфолайне:

ADSL-модем используется как прозрачный мост (bridge) в сеть, не как шлюз в Интернет.

IP-адрес хоста, шлюза и маску настраиваете на своём компьютере.

Как шлюз использовать какое-либо устройтво ADSL от D-Link в данном случае невозможно, т.к. они не умеют работать в качестве PPTP-клиента (PPTP в редакции от MicroSoft).

Спасибо большое за ответ!
Буду пробовать как мост...

Но в этом случае в интернете сможет находиться одновременно только один компьютер, если я правильно понимаю?

Можно использовать один Ваш компьютер, который подключен к интернету, в качестве шлюза для другого.

Большое спасибо всем за помощь.