Visual Basic - cambiar el fondo de color d un textbox

He conseguido cambiar el fondo de color amarillo de un texbox al introducir un numero o letra, pero no consigo hacer la operacion contraria, es decir, si borro todo el contenido del textbox y cambio de sitio no se pone amarillo el texbox. El codigo que tengo es el sigueinte:
Private Sub TextBox4_Change()
If TextBox4 = 0 Then
TextBox4.BackColor = &HFFFF&
End If
If TextBox4 <> 0 Then
TextBox4.BackColor = &H80000005
End If
End Sub

Prueba con esto:

Private Sub TextBox4_Change()
If TexBox4 = "" Then
TextBos4.BackColor = &HFFFF&
Else
TextBox4.BackColor = &H80000005
End If
End Sub

Espero que te sirva, suerte!

Esto tambien puede servir:
Private Sub TextBox4_Change()
TextBox4.BackColor=IIF(Trim(TextBox4.Text)<>" ",&HFFF&,&H800000005)
End Sub