Terminé descubriendo que necesito usar export para establecer mis variables de entorno. Así que en mi .zshrc Agregué:
PKG_CONFIG_PATH=/usr/local/lib64/pkgconfig:/usr/lib64/pkgconfig:/usr/local/lib/pkgconfig; export PKG_CONFIG_PATH
Ahora ./configure encuentra la biblioteca correcta.
¿Tu Ubuntu es un sistema operativo de 32 bits o de 64 bits?
Cómo saber si tiene una computadora de 32 o 64 bits en Linux y Windows
Comando de exportación en Linux explicado
Comando de exportación en Linux
Cómo saber si la versión de Linux es de 32 bits o de 64 bits
¿Cómo verificar que el sistema Linux sea de 32 bits o de 64 bits?