modificar icono de carpeta

Hola:

Me gustaría hacer algo simplísimo pero que hasta cierto aspecto desconozco.
Bien, he creado un acceso directo a una carpeta en el escritorio y pretendo
modificar el icono, ya saben lo típico, poner una foto o muñeco, lo que sea.
Evidentemente en las propiedades de la carpeta esta la opción, pero no se que
formato, extensión o lo que sea debe tener la imagen en cuestión para que se
produzca el feliz cambio. ¿Alguien sería tan amable de indicárme qué tipo de
archivo (extensión, etc) es el que se presta a estas asociaciones? Sé que a
estas alturas es de parvulario, pero qué le voy a hacer si soy torpecete.

Muchas gracias.