Bueno aqui les dejo una pagina que me sirvio mucho y sin necesidad de instalar algun programa.
http://www.convertico.com/
Lo unico que tienen que hacer es:
Clic en Browse.. para buscar el archivo a convertir. (.png)
Una vez seleccionado el archivo le damos en Convert
Despues nos saldra una opcion que dice Click here to Download precionamos clic derecho y le damos en guardar como.
y asi ya tendran si imagen en .ico.
Espero les sirva como ami.