關閉插件窗口小工具的顯示，可以按照以下步驟操作：

1. 打開你想要關閉的插件。
2. 在插件的設置或選項中，找到“窗口”或“小工具”相關的設置。
3. 找到“隱藏窗口”或“隱藏小工具”的選項，將其設置為“是”。
4. 保存設置并關閉插件。

如果你使用的是Chrome瀏覽器，還可以通過快捷鍵來快速關閉插件窗口小工具：

1. 同時按下“Ctrl + Shift + N”鍵。
2. 在彈出的插件列表中，找到你想要關閉的插件。
3. 點擊插件名稱，即可快速關閉該插件窗口小工具。