描述
最近使用node实现了一个远程桌面监控的应用,分为服务端和客户端,客户端可以实时监控服务端的桌面,并且可以通过鼠标和键盘来控制服务端的桌面。
这里因为我是用的同一台电脑,所以监控画面是这样的,当然使用两台电脑一个跑客户端,一个跑服务端才有意义。
原理
其实这个应用的功能主要分为两部分,一是实现监控,即在客户端可以看到服务端的桌面,这部分功能是通过定时截图来实现的,比如服务端一秒截几次图,然后通过socketio发送到客户端,客户端通过改变img的src来实现一帧帧的显示最新的图片,这样就能看到动态的桌面了。监控就是这样实现的。
另一个功能是控制,即客户端对监控画面的操作,包括鼠标和键盘的操作都可以在服务端的桌面真正的生效,这部分功能的实现是在electron的应用中监听了所有的鼠标和键盘事件,比如keydown、keyup、keypress,mousedown、mouseup、mousemove、click等,然后通过socketio把事件传递到服务端,服务端通过 robot-js来执行不同的事件,这样就能使得客户端的事件在服务端触发了。
实现
原理讲完,我们来具体实现一下(源码链接在这)。
实现socket通信
首先,服务端和客户端分别引入socket.io
和socket.io-client
, 分别初始化
服务端:
const app = new Koa();
//createSocketIO
客户端:
var socket = this.socket = io('http://' + this.ip + ':3000')
这样,服务端和客户端就通过socketio建立了链接。
实现桌面监控
之后我们首先要在服务端来截图,使用screenshot-desktop这个包
const screenshot = require('screenshot-desktop')
然后通过socketio的emit来传到客户端:
startScreenshotTimer(([imgStr, img]): void => {
客户端收到图片后,设置到img的src上(这里是base64的图片url):
<img
data () {
socket.on('screenshot', (data) => {
其实这样就已经实现了桌面监控了,有兴趣的同学可以照着这个思路实现看看,并不是很麻烦。
当然这样的方案是有问题的,因为我们需要知道服务端桌面尺寸的大小,然后根据这个来调整客户端显示的图片尺寸。
实现这个细节是使用的get-pixels这个库,可以读取本地图片文件的宽度高度等信息,所以我先把图片写入本地,然后又读取出来,这样获取到的屏幕尺寸。
interface ScreenSize {
然后通过socektio传递给客户端
getScreenSize(img).then(({ width, height}) => {
客户端收到之后调整图片大小就可以了
<img
data () {
socket.on('screensize', (screensize) => {
至此已经实现了桌面监控,并且图片尺寸和服务端屏幕的尺寸是一致的。
这里还有一个细节,就是获取到的图片大小是物理像素,而客户端设置的px是设备无关像素,也就是要除以dpr才是px的值。这里需要获取dpr,因为目前只是在mac下用,所以直接除以2了。
实现远程控制
代码写到这里,客户端的electron应用中已经可以实时显示服务端的桌面了。(当然像输入ip的弹框,以及electron-vue和typescript等和主要逻辑无关的细节就不展开了。)
接下来我们要实现远程控制,也就是监听事件,传递事件,执行事件这几部分。
首先我们定义一下传递的事件的格式:
interface MouseEvent {
鼠标事件MouseEvent,type为鼠标事件的类型,具体的值包括mousedown、mouseup、mousemove、click、dblclick,buttonType指的是鼠标的左键还是右键,值为 left 或 right,x和y是具体的坐标。
键盘事件KeyboardEvent,type为键盘事件的类型,具体的值包括keydown、keyup、keypress,keyCode为键盘码,keyName为键的名字。
接下来我们要在客户端监听事件:
<img
window.onkeypress = window.onkeyup = window.onkeydown = this.handle
KeyboardEvent
通过socekt把事件传递到服务端
handleKeyboardEvent (e) {
然后在服务端把事件取出来执行,执行事件使用的是robot-js:
const { Mouse, Point, Keyboard } = require('robot-js');
至此,桌面监控和远程控制的客户端还有服务端的部分,以及两端的通信都已经实现了。思路其实并不麻烦,但细节还是很多的。有兴趣的同学可以把代码下下来跑跑试试,或者按着这个思路自己实现一遍,还是挺好玩的。
源码链接
remote-monitor-server
remote-monitor-client
欢迎反馈,欢迎star~
源自:https://juejin.im/post/5d18d4c36fb9a07ecb0bbe7b
声明:文章著作权归作者所有,如有侵权,请联系小编删除。
感谢 · 转发欢迎大家留言
本文分享自微信公众号 - web前端学习圈(web-xxq)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。