Perso, c'est plus l'apparition d'un bouton spécifique au lancement de la musique (genre "regarder ce diaporama en musique") qui me gênerait moins.
Mais à chaque fois qu'une musique se déclenche et que je dois chercher où est le bouton "stop", ça m'horripile plus qu'autre chose (surtout quand il n'y a pas de bouton "silence" comme sur certains sites).

Mais ton approche de musique juste dans les diaporama peut convenir, je différencierais plus les usages des visiteurs :
- Sur galerie privée pour un événement donné : galerie silencieuse et diaporama en musique (ça te permettra de t'adapter à la demande en proposant par exemple une musique qui parle à ton client)
- Sur portfolio public : galerie et diaporama silencieux ou éventuellement avec musique activable manuellement.

Mais dans la partie portfolio, je pense vraiment qu'il faut rester silencieux pour ne pas "ennuyer" un visiteur qui ne souhaiterait pas de musique (et inversement, celui qui aimerait de la musique n'appréciera qu'un poil moins, mais ça ne sera pas rédhibitoire contrairement à l'inverse