Aprendi uma hoje bem legal vou fazer umas alterações para tentar facilitar o tutorial.
Veja esta imagem abaixo como fica o Explorer.



1- Para começar a modificar seu PC primeiro vai até: Iniciar, Painel de controle, depois em Opções de pasta, Modo de exibição, Desmarque a opção: Ocultar arquivos protegidos pelo sistema operacional [recomendavel], clique OK.

2- Agora baixem este arquivo na área de trabalho (Desktop).
 desktop.zip ( 261bytes ) Número de downloads: 2221

DeZip ele de dois clique, vai abrir um bloco de notas com esta informação abaixo:

[ExtShellFolderViews]4
{BE098140-A513-11D0-A3A4-00C04FD706EC}={BE098140-A513-11D0-A3A4-00C04FD706EC}
[{BE098140-A513-11D0-A3A4-00C04FD706EC}]
IconArea_image=D:\Minhas imagens\wallpaper windows\winxptutoriais.JPG

3- Mude o que esta em VERMELHO, pela imagem que você quer usar no seu Explorer.
Nota: O endereço da imagem tem de ser completo como mostro acima, até com a extensão do arquivo EX: .JPG

4- Agora feche o bloco de notas clique Sim para salvar a alteração.

Pronto agora é só colocar este arquivo onde você quer que mude o a imagem do Explorer tipo: Meus documentos, Imagens, Minhas músicas, etc.

Para cada pasta tem de criar um arquivo é somente dar um clique no arquivo depois apertar no teclado Ctrl + C para copiar, depois onde você quer por a imagem apertar Ctrl + V para colar o arquivo.


Você pode colocar uma imagem diferente para cada pasta é somente mudar o endereço da imagem.

                                                      
Fonte: Sakyracris.spaces.live.com