Visual Basic - RANDOM

URGENTE!!! POR FAVOR NECESITO QUE DIGAN COMO HACER PARA QUE EL RANDOM NO ME REPITA LOS NROS, ES DECIR TENGO UN RANGO DE 1 A 20 Y NECESITO QUE CADA VEZ QUE LE DE CLIC A UN BOTON NO ME REPITA LOS ANTERIORES ES DECIR SI LE DOY A LA TERCERA VEZ NO ME PUEDE REPETIR EL VALOR NI DEL PRIMERO NI DEL SEGUNDO....GRACIAS.....

yo lo haria guardando los valores que han salido en un vector... y luego cuando salga un numero lo busco en el vector y si ya esta entonces busco otro, y ya.