C sharp - problema al firmar electronicamente con C#

Hola, estoy generando una firma electronica para archivos XML con un certificado .pfx en C# y al momento de firmar me envia el siguiente error:

Excepción no controlada del tipo 'System.Security.Cryptography.CryptographicException' en mscorlib.dll
Información adicional: La contraseña de red especificada no es válida.

¿a que se puede deber?