Visual Basic - Como borrar un directorio

Hola chicos/as para borrar un directorio uso RmDir("C:\aa") y solo me lo borra cuando esta carpeta no contiene nada,en cuanto tengo algun archivo dentro ya no me la elimina.Me podeis comentar alguna solucion.
Muchas gracias.

Usa el objeto FilesystemObject

Estoy interesado en este tema pero ¿dónde busco el objeto FILESYSTEMOBJECT? ¿dónde encuentro ayuda sobre el mismo?
GRacias

Ayuda hay en el msdn