交叉编译目录问题

小弟用arm-linux-gcc进行交叉编译，设定嵌入式单板的文件系统根为/work/rootfs，然后编译软件A，设置./configure --prefix=/usr; make; make DESTDIR=/work/rootfs install 完成软件A的编译安装，然后编译软件B，它依赖于软件A，./configure --prefix=/usr; make 的时候总是去/usr/lib里面链接我本机（PC）的库，导致could not read symbols: File in wrong format这样的错误，求助

改Makefile吧。