Ну и мое IMHO:
Человек не поленился - и таки протестировал RDP vs RemoteFX
https://habrahabr.ru/post/234235/
Скажу сразу - результат не в пользу RDP.
В Вашем, Dim-soft, случае - предположу, что дело в оптимизации драйверов/кодеков. Т.к. очевидно что задачи по обработке h264 потока легли на плечи процессора(ов).
У самого на ноутбуке i7 при просмотре фильма (до настройки кодеков на использование аппаратного декодирования) под 100% уходил.
Если абстрагироваться - Raspberry умеет h264 FullHD играть локально? Умеет. Что ей мешает так-же играть тот-же поток, но из сети?
Прихожу к мнению, что дело в оптимизации, как на стороне сервера так и клиента.
https://blogs.msdn.microsoft.com/rds/20 ... l-preview/
Теперь "лирика":
RemoteFX - признан (предназначен) как протокол от MS для VDI решений.
Следовательно - именно на его и ставка MS в продвижении данной технологии.
Совсем "лирика и фантазии":
Роль тонкого клиента от недорогого терминального рабочего места (офис/1С) должна сместится в полноценную замену ПК, со всеми мультимедийными и 3D функциями.
(оставаясь недорогим решением, что актуально используя ARM)
Следовательно, ожидается поддержка всех основных VDI протоколов (PCoIP, RemoteFX, HDX, SPICE), причем с аппаратной поддержкой кодеков...
Что, в какой-то степени, демонстрируют наши "китайские товарищи":
http://www.jieyung.com/en/product.asp?wid=195