Windows 7 以降のOSの場合

Alt + F4 を押し続けると

Windowsのシャットダウンのダイアログが表示されます。

▼　をクリックし、再起動を選択します

OK　クリックすると再起動を開始します。