IEのダイヤルアップ設定でできます。

1. 「スタート」→「設定」→「コントロールパネル」→「インターネットオプション」→「接続」タブ→インターネット接続に使用する接続名を選択→「設定」ボタ ンで、"<接続名> 設定"ダイアログ ボックスが表示されます。ダイヤルアップの設定の「プロパティ」ボタン→「ダイヤル」タブを開きます。
2. 「アイドル時の切断」にチェックを入れ、時間を設定することで自動切断されます。
3. 「接続が不要なときは切断する」にチェックを入れると、次回IE終了時に確認ダイアログが出ます。但し、「次回表示しない」にチェック入れて切断してしまうと、自動切断になります。