在Windows 10中，您可以通过以下方法关闭任务栏预览小窗口：
右键单击任务栏上的空白区域，然后选择“任务栏设置”。
在任务栏设置窗口中，找到“任务栏预览”选项，并将其切换为关闭状态。
关闭任务栏设置窗口后，您将不再看到任务栏上的预览小窗口。
另外，您还可以通过以下方法临时关闭任务栏预览小窗口：
将鼠标悬停在任务栏上的预览小窗口上。
在预览小窗口上右键单击，并选择“关闭预览”。
请注意，这种方法只会暂时关闭预览小窗口，并且当您打开新的应用程序时，预览小窗口可能会重新显示。如果您想完全关闭任务栏预览小窗口，建议使用第一种方法。