Pues no sé si habrá algún problema, no lo he probado nunca, mis sistemas sólo tienen una gráfica. En arch, los drivers de nvidia sólo tienen conflictos con drivers anteriores de nvidia y con libgl.
Lo que puedes probar es a instalarlos omitiendo comprobaciónn de dependencias.