Для меня только все это время оставалась загадкой как автор умудряется ещё лавку ставить. Тут через remote desktop сложно даже просто команду ввести или в инвентаре что-то нажать, с такой то задержкой большой. Камерой крутить вообще не реально, таких усилий стоит переодеться, что я написал скрипт, который сам переодевается)
По итогу для себя нашел выход - утром захожу со своего компа и делаю все дела, а потом уже стою на сервере. У меня правда на Амстердаме сервер, но не думаю, что в этом причина, по rdp все отлично работает, да и без игры задержка терпима, именно игра грузит сильно сервер, из-за этого и задержка в remote desktop, больше идей нет.