現在使用中のテンプレートを表示するプラグインです。正式にwordpress.orgのプラグインディレクトリに登録しましたので、そちらからインストール可能になりました。

プラグインを探す > Current Page Template Viewer で検索してみてください。

Current Page Template Viewer

現在のテンプレートと、includeされているテンプレートを表示します。

includeされているテンプレートは、現在のテンプレート名をクリックすると表示されます。