Предполагам че става дума за FreeBSD, ако няма нужда от компилиране от сорс (portmaster) не виждам защо не инсталираш бинарния пакет: #pkg install x11/xorg (pkg install xorg). Ще стане за по-малко от 5 минути.
В допълнение не виждам и смислени опции които можа да се добавят ако се инсталира от порт, само една документация.
https://www.freshports.org/x11/xorg/А за това че е много, много бавна компилацията едното е старата машина/CPU/mem, друга възможна причина е малкото памет (става дума за компилиране, свързване и т.н.) та може би от един момент свършва оп. памет и започва да суапва и ако и диска е бавен и не е SSD нищо чудно да отнема дни, не часове.
Ако при компилиране се виижда как работи, сменят се файловете може да се види дали работи (е активен) компилатора и дали се ползва суап. Тоест процеса не е блокирал, просто е много бавен !
Лично аз бих инсталирал от бинарен пакет.