Nossa, dá sim, e é nessa parte que o gentoo brilha praticamente ksksk

Existe uma funcionalidade, que é a de mascarar pacotes: No meu caso, no KDE, por exemplo, tinha a qtwebengine, que é um MONSTRO de compilar, tipo, mesmo, tanto que eu só mascarei o pacote, e conseguir usar o KDE sem isso.

Não sei como o gentoo empacota o gnome, mas o kde pelo menos veio super enxuto, e dava pra enxutar ele ainda mais usando essa funcionalidade de mascarar.

As USE flags também controlam isso.