اسکریپت کلیک کردن روی مانیتور مجازی در سرور ریموت لینوکس

من برای اتوماسیون کارای خودم رو سرور لینوکس (ترجیحا Ubuntu) نیاز دارم یه تسکی رو اتوماتیک انجام بدم، که مستلزم این هست که رو جاهای مختلف صفحه کلیک کنه (راست و چپ) و همچنین بتونه با کیبورد هم تایپ کنه. برای این کار نیاز به درست کردن یه X-server روی سرورو مجازی هست، چون سرورو های ریموت Headless هستن. من از XRDP استفاده کردم و میکنم، ولی باز اگه جایگزینی پیدا کردید که بهتر کار میکنه، میتونیم اونو انتخاب کنیم. مشکلی که میخوام حلش کنید: من خودم کد زدن بلدم، و تونستم با پایتون و کتابخونه pyautogui از اسکرین، اسکرین شات هم بگیرم. برای این کار از XVFB برای بافر کردن GUI استفاده کردم، ولی خب مشکلی که هست اینه که کلیک کردن روی اسکرین کار نمیکنه (همه متد های کیبورد و موس رو همین کتابخونه pyautogui ارائه میکنه)، و من نمیتونم بفهمم مشکل از کجاست. چیزی که میخوام از شما اینه که یه اسکریپت خیلییی ساده (در حد چند سطر) بنویسید که میتونه روی مختصات خاصی کلیک کنه و این کلیکه عمل کنه. همین. ترجیح خودم استفاده از پایتون هست، ولی اگه جایگزین دیگه ای دارید، خوشحال میشم در میون بزارید تا انتخاب کنیم استک رو.