como cambiar fondo item gridview

Hola, quiero cambiar el fondo del item seleccionado en un gridView.

Esto lo consigo, el problea esta en que como la lista es reutilizable pues me pinta mas de una fila, es decir, si la lista contiene 6 item y solo se muestran 3, pues me pinta la fila 1 y la 4 ya que estas vistas son la misma.

¿Como podría hacer para que solo me cambie el fondo de la que he seleccionado?
¿Podría acceder a la vista de la posición en la que marco??

El código que uso asta ahora es:


gridView.setOnItemClickListener(new OnItemClickListener() {
@Override
public void onItemClick(AdapterView arg0, View arg1,
int position, long arg3) {

click_item = true;

// Esta parte la uso para poder quitar el fondo cambiado a la fila seleccionada anteriormente

if(vista != null){
if(!vista.equals(arg1)){
arg1.getBackground();
vista.setBackgroundDrawable(arg1.getBackground());
}
}

// Aqui cambio el fondo de la fila seleccionada actualmente
arg1.setBackgroundColor(Color.argb(200,208,245,169 ));
vista = arg1;

});