Ubuntu 12.04: Desinstalar impulso instalado a partir da fonte

Eu instalei as bibliotecas boost 1.54 no ubuntu 12.04, e parece entrar em conflito com a minha instalação do libboost-all-dev, então eu quero desinstalar completamente as bibliotecas boost 1.54. Como desinstalar o instalado da fonte?

basta olhar http://lists.boost.org/boost-users/2005/01/9444.php, que diz para excluir /usr/local/lib/libboost*e/usr/local/include/boost