GPU는 x86과 x64랑 관계없죠.

드라이버가 x64용 드라이버냐 ARM64용 드라이버냐 차이일뿐

gpu는 cpu 아키텍처 처럼 둘 중 하나를 선택하는 개념이 아니니까여 대표적으로 엔비디아는 arm 프로세서에 자기네 gpu를 섞어서 모바일 ap를 내기도 했고 차량용 칩도 그렇게 만들고 있지요.

아무래도 명령어 체계가 다르기 때문에 CPU가 명령을 던지기 좋게 최적화를 할 수는 있다고 생각합니다.

그렇지만 서로 다른 아키텍처의 GPU를 아예 못 쓰지는 않을거예요. 

32비트 아키텍처에선 64비트 연산을 하는게 오히려 독이 되는 것처럼요. 

GPU는 드라이버만 잘 만들면 CPU/OS 상관 없이 성능 잘 뽑아냅니다. 하드웨어 설계 자체부터 특정 CPU 아키텍처에 최적화한다는 것 자체가 불가능해요. 드라이버만 OS에 따라 맞추는 편이고, 그 과정에서 필요하다면 아키텍처에도 조금씩 맞추는거죠.