VNCを用いてロボットを遠隔操作したい。

テーマ、知りたいこと

ラスベリーパイをVNCで動かしています。VNCは「PC(クライアント側)のマウスやキーボードはそれぞれの入出力をネットワーク越しにラズパイ(サーバー側)へ送信している」と認識しております。
同じようにゲームパッドなどの入力をラズパイ側に送信したいのですが。可能でしょうか？可能であれば方法をご教授お願いしたいです。

背景、状況

遠隔でロボットを動かす際にBluetoothでは良くて10ｍ程度しか届かない為、WiFiなどを使い遠距離でラズパイとの通信を行いたいです。そこで、VNCならばラズパイ側の動きも見れるし、操作がしやすいと考えました。ROSは考えはしましたが今から開発するのでは時間がなく断念しました。

一応調べはしましたがほぼVNCでラズパイを操作する、ROS,Bluetoothに関するものでVNCを使った遠隔操縦はありませんでした。