今現在、
ＡＤＳＬ － モデム － パソコン
という形で接続しているのだと思います。（初期のものならスプリッタが間にあるかも）これはあくまでインターネットとパソコンを単独で接続する方法なので、１本に複数のパソコンを有線でつなぐ場合には、次のようにルータとハブが必要になります。
ＡＤＳＬ － モデム － ルータ － ハブ － パソコン
というように、モデムとパソコン間にルータとハブを入れることになります。ただ、今どきは、ルータそのものに４ポート程度のハブが内蔵されているものもありますから、そういうのを買えば、
ＡＤＳＬ － モデム － ルータ － パソコン
となります。そしてルータの他のポートにさらにパソコンをつないで、複数台が同時に別々のインターネットを利用できます。
ＡＤＳＬ － モデム － ルータ － パソコン1
＼ パソコン2
もしこのときに、ルータを無線付きのもの（１万～２万くらいかな）にすると、有線でのポートの代わりに電波で他のパソコンと接続できます。
ＡＤＳＬ － モデム － 無線ルータ パソコン1
パソコン2
パソコン3
また、この無線ルータに有線用のポートが付いているなら、
ＡＤＳＬ － モデム － 無線ルータ － パソコン1
パソコン2
パソコン3
今使っているパソコンはそのまま有線で、追加分のノートパソコンは無線でルータと接続できます。
すでに、他でも回答が出ていますが、割とスタンダードなお悩みですので、事情を話せば普通のショップの店員ならちゃんと対応できる機種を紹介してくれることでしょう。
お礼
ご回答、ありがとうございました。 すごくよく分かりました！ 助かりました！