Mais non, mais non.
Qui t'a dit qu'une copie mémoire n'était qu'un déplacement de pointeurs? C'est parfois le cas, dans les listes chaînées, mais ce n'est pas systématique. Un pointeur est avant tout une commodité de programmeurs, une convention d'écriture, ça n'a pas de réalité matérielle. Ca sert juste à indiquer qu'on travaille avec des adresses, et c'est pratique pour le traitement des structures et les allocations mémoires.
Le processeur ne comprend que données et adresses. Par exemple, il lit une donnée à une adresse, il avance, il fait une opération, il avance, il écrit une donnée à une adresse. C'est aussi bête que ça.