あのウィンドウはどれだっけ？

・・・というとき、これがあるとすぐにわかりそうです。

Visual Task Tips
http://www.visualtasktips.com/

↓このように、タスクバー上のウィンドウアイコンにマウスカーソルを持って行くと内容が縮小ウィンドウで表示されます（画像クリックで拡大）。


似たツールに、Alt+Tabキーによるタスク切り替え時に、プレビュー画像が表示される「Alt-Tab Replacement」というアクセサリがあります。

↓こちらでダウンロードからインストールに至るまで非常に丹念かつ懇切丁寧に解説されています。
http://allabout.co.jp/computer/windows/closeup/CU20050809A/