Sí. Puedes utilizar VLC y varios reproductores más que están a la altura y más allá que VLC. No es complicado si no quieres.
El nombre ya te lo he puesto LXLE. Es una distribución muy liviana de Linux. También tienes la posibilidad de ver de instalarle Kodi con un SO que lleve lo escencial para hacerlo funcionar. Tendrías un centro multimedia de puta madre.
Lo que hay que entender es que si no vas a utilizar software procesador de imagen (meter shader, interpolar, desentrelazar, convertir de HDR a SDR), se necesita muy poca potencia para reproducir un vídeo.