python之模拟鼠标键盘动作具体实现

上个月就打算开发个还算好玩的项目，但是一直没时间。这篇是此项目用到的一部分，

处理好此部分基本还差通信等方面的了。首先模拟鼠标键盘按下释放的动作，本人利用x11

这个库，所以要了解x11编程;其次，本身用c或者c++就可以实现了，但是由于本人是py

粉，所以总想把代码搬进python，所以本人就要实现python模块，本篇用的ctypes，以后会

把python的c扩展模块附上来的。

　　1.x11编程

    首先简单的介绍一下x11吧，网上有介绍，本人就不重复了。我们知道x是以server与client

的方式提供服务的，我们想要使用其功能，我们就需要与server通信。使用

display *xopendisplay(char *display_name)获得一个display类型的句柄指针就可以了。

display_name可以是display环境变量，用echo $display输出是:0（这是本人linux mint输

出的）。如果display_name为null接口默认使用环境变量保存的值。x11编程常用的几个头

文件：

  #include <x11/xlib.h>
  #include <x11/xutil.h>
  #include <x11/xos.h>

本人用到的是#include <x11/xlib.h>和 #include <x11/extensions/xtest.h>.

xtest.h有我们模拟鼠标和键盘需要的接口xtestfakebuttonevent、 xtestfakemotionevent和

xtestfakekeyevent。想了解更多信息只需要在终端上man加函数名即可获得。

比如xtestfakemotionevent接口：

int xtestfakemotionevent(display, screen_number, x, y,delay);

display *display;  //此值就是从xopendisplay获得
int screen_number; //让其为-1即可表示当前的屏幕
int x, y;          //屏幕位置
unsigned long delay; //延迟毫秒，让其为currenttime表示不延迟

最后我们要关闭display句柄：xclosedisplay(display *display)。

接口实现如下：

#include <stdio.h>
#include <x11/extensions/xtest.h>
#include <x11/xlib.h>
display *dspopen(){  

    display *dsp = xopendisplay(null);
    if(!dsp) {
        printf("open display failed\n");
        return null;
    }
    return dsp;
}
int presskey(display *dsp,int s){  //键盘按
    if(dsp==null)
        return -1;
//    keysym keysym=xstringtokeysym(s);
    keycode key=xkeysymtokeycode(dsp,s);
    if(key==nosymbol)
        return -1;
    xtestfakekeyevent(dsp,key,1,currenttime);
    xflush(dsp);
    return 0;
}
int move(display *dsp,int x,int y) //鼠标移动
{
    if(0==xtestfakemotionevent(dsp,-1,x,y,currenttime))
    {
        printf("cannot move!\n");
        return -1;
    }
    return 0;
}
int buttonpress(display *dsp,int type) //鼠标按，type=1表示左键，3是右键，2是中键
{
    if(0==xtestfakebuttonevent(dsp,type,1,currenttime))
    {
        printf("press failed\n");
        return -1;
    }
    return 0;
}
int buttonrelease(display *dsp,int type) //鼠标释放
{
    if(0==xtestfakebuttonevent(dsp,type,0,currenttime))
    {
        printf("release failed\n");
        return -1;
    }
    return 0;
}
int releasekey(display *dsp,int s){ //键盘release
    if(dsp==null)
        return -1;
//    keysym keysym=xstringtokeysym(s);
    keycode key=xkeysymtokeycode(dsp,s);
    if(key==nosymbol)
        return -1;
    xtestfakekeyevent(dsp,key,0,currenttime);
    xflush(dsp);
    return 0;
}
void dspclose( display *dsp ){
    if(dsp!=null){
        xclosedisplay(dsp);

    }
}
//int main(){     //测试用的会在程序结束后，在光标前输出c
//    display *dsp=dspopen();
//    presskey(dsp,'c');
//    releasekey(dsp,'c');
//    dspclose(dsp);
//    return 0;
//}

上面注释掉的main函数可以作为测试用的，好了，我们把上面的代码保存为display.c

编译成一个共享库，需要x11和xtst库。

gcc -fpic -shared -o libdisplay.so display.c -lx11 -lxtst

编译后会生成libdisplay.so 。现在我们ctypes模块使用这个动态共享库。

     2.ctypes简单介绍和使用

    我们知道python中的类型与c中类型是不一样的，应该说没有一样的，就拿int想来说，

python也是把它看作pyobject类型来处理的。那么我们需要使用ctype提供的接口做类型的

转换。见：http://docs.python.org/2/library/ctypes.html#fundamental-data-types

此链接有张图详细的展现类型转换对应的接口。下面演示具体的操作吧。

我们通过cdll（）接口载入库：

lc=cdll("./libdisplay.so")

然后就可以使用库中提供的接口了，但是上面dspopen()接口的返回值是display类型的指针，

所以我们需要用c_void_p()转换一下：

d=c_void_p(lc.dspopen())

之后就可以用d做处理了，代码如下：

from ctypes import *
import time
class mouse:
    left=1
    middle=2
    right=3
lc=cdll("./libdisplay.so")
d=c_void_p(lc.dspopen())
time.sleep(5);
lc.buttonpress(d,c_int(mouse.right))
lc.buttonrelease(d,c_int(mouse.right))
lc.dspclose(d)

上面的代码会在5秒后在鼠标指针处打开右键菜单。

利用ctypes使用c编写的库就讲这么多吧。以后会把c代码的部分写成python的c扩展再分享吧。

利用上面的模拟键盘和鼠标的接口可以做一些有意思的事情....