Eerlijk gezegd verwacht ik niet dat je "snelheidsverlies" echt gaat merken. Je moet het meer zien als dat de software niet helemaal op topsnelheid draait. Overigens doet de processor in samenwerking met de bredere bus en geheugencontrollers het toch al sneller dan een "native 32-bits" machine vanwege de interne optimalisaties, dus je verlies is verwaarloosbaar vermoed ik.
Het probleem is volgens mij dat 64bit compilers, maar ook de processoren waar de geproduceerde code voor gemaakt is, nog lang geen gemeengoed zijn. Hierdoor worden er noodzakelijkerwijs compromissen gesloten die op hun beurt weer niet overal even goed (of "standaard") geimplementeerd zijn. Het resultaat is een ogenschijnlijk wat gammele ondersteuning van het 64bits platform.
Nog even een paar jaar geduld, dan is 64bit gemeengoed!