Создаем обычную папку любым удобным для Вас способом, стираем название. После чего зажимаем клавишу [ Alt ] и не отпускаем её пока не напишем дополнительными клавишами (Numpad клавиатуре) число: 255, после этого отпускаем клавишу [ Alt ] и жмем [ Enter ]. После этих действий надпись папки исчезнет. Теперь правой мышью жмем на эту папку, выбираем Свойства, переходим во вкладку Настройка и выбираем Сменить значок…

В появившемся окне, пролистываем и выбираем любую пустую иконку, жмем кнопку [ ОК ]

Вот в принципе и всё…