如何使自己维护的lib/dll不再需要区分debug与release？

我们在用vc++写软件的时候一般都会为不同的dll proj配置生成不同的_ud/_u的lib和dll，在其他工程中引用的时候通过编译选项在链接不同的lib，大家都是这样做的。
我的问题是如果debug与release需要区分，32与64也需要区分，那我们需要维护四个lib，感觉debug与release的能否合并呢？难道只能是纯c的吗？