Python模拟鼠标轨迹[Python]

一.鼠标轨迹模拟简介

传统的鼠标轨迹模拟依赖于简单的数学模型,如直线或曲线路径。然而,这种方法难以捕捉到人类操作的复杂性和多样性。AI大模型的出现,使得神诺科技 能够通过深度学习技术,学习并模拟更自然的鼠标移动行为。


二.鼠标轨迹算法实现

AI大模型通过学习大量的人类鼠标操作数据,能够识别和模拟出自然且具有个体差异的鼠标轨迹。以下是实现这一技术的关键步骤:

  1. 数据收集:收集不同玩家在各种游戏环境中的鼠标操作数据,包括移动速度、停顿、加速度等。
  2. 模型训练:利用深度学习算法,训练AI模型识别鼠标操作中的模式和规律。
  3. 轨迹生成:在给定起点和终点的情况下,AI模型能够生成符合人类操作习惯的鼠标轨迹。

三.鼠标轨迹API应用场景

游戏中通过分析玩家的鼠标轨迹,检测是否为脚本,例如:魔兽世界,无畏契约等等,大部分游戏都有数据行为检测!

图片[1]-python模拟真人鼠标轨迹

四.API跨语言平台支持

鼠标轨迹api底层实现采用C/C++语言,利用其高性能和系统级访问能力,开发出高效的鼠标轨迹模拟算法。通过将算法封装为DLL(动态链接库),可以方便地在不同的编程环境中调用,实现跨语言的兼容性。

通过DLL封装,开发者可以在C++、Python、易语言、按键精灵等多种编程语言中使用鼠标轨迹模拟技术。这种封装方式提供了一种简便的接口,使得不同背景的开发者都能够轻松集成和使用这一技术。


五.鼠标轨迹 API 介绍

图片[2]-python模拟真人鼠标轨迹

注意:如果是多线程,每个线程都需要通过apiSNCreateHandle创建HANDLE句柄,这样才能多个线程互不影响

图片[3]-python模拟真人鼠标轨迹

1.头文件

// Copyright (c) 2024 神诺科技 www.winsdk.cn
// 
// 保留所有权利。
// 
// 在满足以下条件的情况下,允许重新使用和分发:
// 
// 1. 代码必须保留上述版权声明、作者声明和/或最初发布的网址。
// 2. 不得将代码用于商业目的,除非与版权所有者签订了书面协议。
// 3. 修改过的源版本必须清楚地标识出修改的部分,并且不得以任何方式表明版权所有者支持或认可这些修改。
// 
// 禁止以任何形式的直接或间接商业利用,除非与版权所有者签订了书面协议。
// 



 
 
#ifndef _SN_SDK_H__
#define _SN_SDK_H__
 
 
 
#include <windows.h>
 
 
//返回参数
typedef struct SN_RESULT {
 
	int code;			//错误码,如果为 0 表示成功,否则表示错误号
	char message[4096];	//错误信息,如果为 "OK" 表示成功,否则返回错误信息
 
}SN_RESULT;
 
 
//坐标参数
typedef struct SN_POINT
{
	int x;				//屏幕坐标,左上角(0,0),右下角(1920,1080 - 以实际屏幕为准)
	int y;				//屏幕坐标,左上角(0,0),右下角(1920,1080 - 以实际屏幕为准)
 
}SN_POINT;
 
//轨迹参数
typedef struct SN_POINT_PARAMS
{
	struct SN_POINT point;//屏幕坐标,左上角(0,0),右下角(1920,1080 - 以实际屏幕为准)
	int delayTime;		  //延时时间(单位:毫秒),仅供参考
 
}SN_POINT_PARAMS;
 
 
/*创建句柄
*
* 参数:
*	[in] szKey:		卡密
* 	[in] pOnnxFilePath:设置 onnx 模型文件路径,如果设置为 NULL,默认和 DLL文件同级目录
* 	[out] pResult:		返回错误信息,参数pResult.code(错误码)如果为 0 表示成功,否则表示错误号;
*
* 返回值:成功返回句柄,失败返回NULL
*
*/
HANDLE WINAPI apiSNCreateHandle(char* szKey, char* pOnnxFilePath, SN_RESULT* pResult);
 
 
 
/*获取鼠标移动轨迹
*
* 参数:
*	[in] handle:		句柄(通过调用apiSNCreateHandle得到)
* 	[in] startPoint:	开始坐标,左上角(0,0),右下角(1920,1080 - 以实际屏幕为准)
* 	[in] endPoint:		结束坐标,左上角(0,0),右下角(1920,1080 - 以实际屏幕为准)
*  	[in] type:			轨迹类型(0代表绝对坐标,1代表相对坐标)
* 	[out] points:		轨迹数组,如果数组中元素 point 出现(10000,10000),表示鼠标轨迹结束
*
* 返回值:返回参数SN_RESULT.code(错误码)如果为 0 表示成功,否则表示错误号;
*
*/
int WINAPI apiSNMouseMove(HANDLE handle, SN_POINT *startPoint, SN_POINT *endPoint, int type, SN_POINT_PARAMS* points);
 
 
/*获取版本号
*
* 参数:
*	[in] handle:		句柄(通过调用apiSNCreateHandle得到)
* 	[out] szVersion:	版本号
*
* 返回值:返回参数SN_RESULT.code(错误码)如果为 0 表示成功,否则表示错误号;
*
*/
int WINAPI apiSNGetVersion(HANDLE handle, char* szVersion);
 
 
/*获取错误信息
*
* 参数:
*	[in] handle:		句柄(通过调用apiSNCreateHandle得到)
*
* 返回值:返回参数SN_RESULT.code(错误码)如果为 0 表示成功,否则表示错误号;
*
*/
int WINAPI apiSNGetError(HANDLE handle);
 
 
 
/*释放句柄(内存)
*
* 参数:
*	[in] handle:		句柄(通过调用apiSNCreateHandle得到)
*
* 返回值:返回参数SN_RESULT.code(错误码)如果为 0 表示成功,否则表示错误号;
*
*/
int WINAPI apiSNDestroyHandle(HANDLE handle);
 
 
#endif // !_SN_SDK_H__

2.Python代码


'''
@官方名称:神诺科技

@官方网站:www.winsdk.cn

@官方微信:cq41398

@SDK功能描述:鼠标轨迹

'''

from ctypes import cdll, Structure, c_int, c_char, c_char_p, POINTER, create_string_buffer
import ctypes
import platform
import time
class SN_RESULT(ctypes.Structure):
    _fields_ = [("code", ctypes.c_int),
                ("message", ctypes.c_char * 4096)]

class SN_POINT(ctypes.Structure):
    _fields_ = [("x", ctypes.c_int),
                ("y", ctypes.c_int)]

class SN_POINT_PARAMS(ctypes.Structure):
    _fields_ = [("point", SN_POINT),
                ("delayTime", ctypes.c_int)]

class SN_MOUSE_TRACK_SDK:
    def __init__(self, key, onnx_path, dll_path):
        self.key = key.encode('utf-8')
        self.onnx_path = onnx_path.encode('utf-8')
        self.sn_sdk = ctypes.WinDLL(dll_path)
        self.handle = None
        self.result = SN_RESULT()
        self._initialize_sdk()

    def _initialize_sdk(self):
        self.sn_sdk.apiSNCreateHandle.argtypes = [ctypes.POINTER(ctypes.c_char), ctypes.POINTER(ctypes.c_char),
                                                  ctypes.POINTER(SN_RESULT)]
        self.sn_sdk.apiSNCreateHandle.restype = ctypes.c_void_p
        # 检测当前是 x64 还是 x86
        print(platform.architecture())
        self.handle = self.sn_sdk.apiSNCreateHandle(self.key, self.onnx_path, ctypes.byref(self.result))
        if self.result.code != 0:
            print(f"Failed to create handle: {self.result.message.decode('gbk', errors='replace')}")
        else:
            print("sn_sdk.apiSNCreateHandle success")

    # 获取版本信息
    def get_version(self):
        version = ctypes.create_string_buffer(4096)
        self.sn_sdk.apiSNGetVersion.argtypes = [ctypes.c_void_p, ctypes.POINTER(ctypes.c_char)]
        self.sn_sdk.apiSNGetVersion.restype = ctypes.c_int

        if self.handle is None:
            print("apiSNCreateHandle fail!")
            return ""

        result = self.sn_sdk.apiSNGetVersion(self.handle, version)
        if result != 0:
            raise Exception(f"Failed to get version: {result}")
        return version.value.decode()

    def set_track_params(self, density, isSliderTrack):
        self.sn_sdk.apiSNSetTrackParams.argtypes = [ctypes.c_void_p, ctypes.c_int, ctypes.c_int]
        self.sn_sdk.apiSNSetTrackParams.restype = ctypes.c_int
        return self.sn_sdk.apiSNSetTrackParams(self.handle, density, isSliderTrack)

    def get_key_expires_time(self):
        self.sn_sdk.apiSNGetKeyExpiresTime.argtypes = [ctypes.c_void_p, ctypes.POINTER(SN_RESULT)]
        self.sn_sdk.apiSNGetKeyExpiresTime.restype = ctypes.c_char_p
        if self.handle is None:
            print("apiSNCreateHandle fail!")
            return ""
        return self.sn_sdk.apiSNGetKeyExpiresTime(self.handle, ctypes.byref(self.result))

    def move_mouse(self, start_point, end_point, type, num_points=4096):
        points_array = (SN_POINT_PARAMS * num_points)()
        self.sn_sdk.apiSNMouseMove.argtypes = [ctypes.c_void_p, POINTER(SN_POINT), POINTER(SN_POINT), ctypes.c_int,
                                               POINTER(SN_POINT_PARAMS)]
        self.sn_sdk.apiSNMouseMove.restype = ctypes.c_int

        if self.handle is None:
            print("apiSNCreateHandle fail!")
            # 强制给 points_array 赋值
            points_array[0].point.x = 10000  # 设置 X 坐标
            points_array[0].point.y = 10000  # 设置 Y 坐标
            points_array[0].delayTime = 0  # 设置延迟时间
            return points_array

        result_code = self.sn_sdk.apiSNMouseMove(self.handle, start_point, end_point, type, points_array)
        if result_code != 0:
            print(f"Failed to move mouse start_point:{start_point.x},{start_point.y} end_point:{end_point.x},{end_point.y} ,Error core:{result_code}")
            # 强制给 points_array 赋值
            points_array[0].point.x = 10000  # 设置 X 坐标
            points_array[0].point.y = 10000  # 设置 Y 坐标
            points_array[0].delayTime = 0  # 设置延迟时间

        return points_array

    def destroy_handle(self):
        self.sn_sdk.apiSNDestroyHandle.argtypes = [ctypes.c_void_p]
        self.sn_sdk.apiSNDestroyHandle.restype = ctypes.c_int
        return self.sn_sdk.apiSNDestroyHandle(self.handle)


if __name__ == "__main__":
    #from sn_mouse_track import SN_MOUSE_TRACK_SDK, SN_POINT

    # 重要提醒:初始化 SDK - 只需要创建一次,然后通过循环不停的设置开始和结束坐标获取轨迹即可
    # 重要提醒:初始化 SDK - 只需要创建一次,然后通过循环不停的设置开始和结束坐标获取轨迹即可
    # 重要提醒:初始化 SDK - 只需要创建一次,然后通过循环不停的设置开始和结束坐标获取轨迹即可
    # 重要提醒:初始化 SDK - 只需要创建一次,然后通过循环不停的设置开始和结束坐标获取轨迹即可
    # 重要提醒:初始化 SDK - 只需要创建一次,然后通过循环不停的设置开始和结束坐标获取轨迹即可
    sdk = SN_MOUSE_TRACK_SDK(key="SNKJBV3pNrw4u57aq6c8CLPnmmBz3w1AYJd2gvSHMSH2",
                             onnx_path="d://SNTrack.onnx",
                             dll_path="d://SNSDK.dll")

    # 获取版本号
    version = sdk.get_version()
    print("SDK Version:", version)

    # 设置轨迹参数 ,详细参数解释参考 SNSDK.h
    '''
    设置轨迹参数,轨迹密度density调节,默认5倍速,根据自身需求设置 ,density必须大于或者等于 1,默认 5,
    举个例子:假如轨迹有 100 个点,累计耗时 1000 毫秒,设置 density 如下:
				-  density = 1  时,轨迹有 100/1=100 个点,整个轨迹累计耗时 1000/1=1000 毫秒 (默认 1  倍速度)
				-  density = 2  时,轨迹有 100/2=50  个点,整个轨迹累计耗时 1000/2=500  豪秒 (等价 2  倍速度)
				-  density = 3  时,轨迹有 100/3=33  个点,整个轨迹累计耗时 1000/3=333  豪秒 (等价 3  倍速度)
				-  density = 5  时,轨迹有 100/5=20  个点,整个轨迹累计耗时 1000/5=200  豪秒 (等价 5  倍速度)
				-  density = 20 时,轨迹有 100/20=5  个点,整个轨迹累计耗时 1000/20=50  豪秒 (等价 20 倍速度)
	
	
	isSliderTrack 表示是否为滑块轨迹,0表示默认轨迹,1表示滑块轨迹
    '''
    sdk.set_track_params(density=5, isSliderTrack=0)

    # 获取卡密到期时间
    expires_time = sdk.get_key_expires_time()
    print("Key expires time:", expires_time)

    # 模拟鼠标移动 - 通过设置开始和结束位置,不停获取轨迹(仅仅只是演示代码,只获取一次轨迹)
    while True:
        start_point = SN_POINT(100, 100)
        end_point = SN_POINT(800, 800)
        points_array = sdk.move_mouse(start_point, end_point, type=0)

        # 打印轨迹点
        for i, point in enumerate(points_array):
            if point.point.x == 10000 and point.point.y == 10000:
                break
            print(f"Point {i}: ({point.point.x}, {point.point.y}, {point.delayTime})")

        # 仅仅只是演示代码,只获取一次轨迹
        break

    # 销毁句柄
    sdk.destroy_handle()
 
 
 
 
'''
输出鼠标轨迹如下:
 
Handle created successfully
Result message: 1.0
Point 0: (100, 100,0)
Point 1: (100, 98,10)
Point 2: (103, 98,15)
Point 3: (111, 98,16)
Point 4: (116, 101,15)
Point 5: (122, 104,2)
Point 6: (129, 107,13)
Point 7: (135, 109,2)
Point 8: (144, 112,14)
Point 9: (155, 117,2)
Point 10: (167, 123,14)
Point 11: (180, 128,2)
Point 12: (193, 134,13)
Point 13: (209, 138,2)
Point 14: (225, 144,13)
Point 15: (238, 149,5)
Point 16: (254, 157,10)
Point 17: (269, 162,5)
Point 18: (282, 168,11)
Point 19: (298, 175,5)
Point 20: (311, 180,10)
Point 21: (326, 185,6)
Point 22: (341, 193,9)
Point 23: (369, 211,15)
Point 24: (396, 231,16)
Point 25: (419, 251,16)
Point 26: (442, 270,16)
Point 27: (461, 285,17)
Point 28: (481, 300,15)
Point 29: (491, 311,15)
Point 30: (502, 319,2)
Point 31: (513, 329,14)
Point 32: (523, 343,2)
Point 33: (535, 355,14)
Point 34: (546, 369,0)
Point 35: (558, 383,15)
Point 36: (570, 397,2)
Point 37: (582, 411,13)
Point 38: (596, 427,2)
Point 39: (608, 443,14)
Point 40: (620, 459,5)
Point 41: (633, 476,10)
Point 42: (645, 490,5)
Point 43: (656, 503,11)
Point 44: (666, 515,5)
Point 45: (675, 527,11)
Point 46: (684, 538,5)
Point 47: (694, 551,11)
Point 48: (702, 565,5)
Point 49: (710, 577,11)
Point 50: (716, 588,5)
Point 51: (723, 598,11)
Point 52: (728, 606,5)
Point 53: (733, 615,11)
Point 54: (738, 622,5)
Point 55: (743, 631,11)
Point 56: (747, 637,5)
Point 57: (750, 644,11)
Point 58: (753, 652,5)
Point 59: (756, 659,10)
Point 60: (759, 666,5)
Point 61: (761, 673,11)
Point 62: (764, 680,5)
Point 63: (766, 687,11)
Point 64: (768, 694,5)
Point 65: (769, 701,10)
Point 66: (771, 708,5)
Point 67: (772, 714,11)
Point 68: (773, 722,5)
Point 69: (774, 729,10)
Point 70: (777, 743,16)
Point 71: (778, 755,15)
Point 72: (778, 764,16)
Point 73: (780, 775,16)
Point 74: (781, 784,16)
Point 75: (781, 785,15)
Point 76: (781, 789,2)
Point 77: (781, 790,13)
Point 78: (781, 792,2)
Point 79: (782, 796,14)
Point 80: (782, 796,2)
Point 81: (782, 797,14)
Point 82: (782, 798,15)
Point 83: (782, 800,311)
Point 84: (784, 800,16)
Point 85: (784, 800,5)
Point 86: (785, 800,10)
Point 87: (786, 800,5)
Point 88: (786, 800,11)
Point 89: (788, 800,6)
Point 90: (789, 800,9)
Point 91: (790, 800,5)
Point 92: (791, 800,10)
Point 93: (793, 800,16)
Point 94: (795, 800,16)
Point 95: (796, 800,15)
Point 96: (797, 800,15)
Point 97: (797, 800,2)
Point 98: (798, 800,15)
Point 99: (798, 800,30)
Point 100: (799, 800,15)
Point 101: (799, 800,15)
Handle destroyed successfully
 
Process finished with exit code 0
 
'''

得到轨迹数据后使用 PyAutoGUI 移动鼠标即可


六.鼠标轨迹 Demo 效果演示

  • 1.开始坐标为(100,100),结束坐标为(800,800),通过调用接口获得 4 条鼠标轨迹
  • 2.开始坐标为(1000,100),结束坐标为(800,800),通过调用接口获得 2 条鼠标轨迹

七.鼠标轨迹 Demo 下载

百度云盘下载

夸克云盘下载

123云盘下载


© 版权声明
THE END
喜欢就支持一下吧
点赞816 分享
评论 抢沙发
头像
欢迎您留下宝贵的见解!
提交
头像

昵称

取消
昵称表情代码图片快捷回复

    暂无评论内容