数码之家

标题: 基于合宙luatOS ESP32-C3视频投屏显示，双端全部开源 [打印本页]
作者: hzy3774    时间: 2022-6-2 12:57
标题: 基于合宙luatOS ESP32-C3视频投屏显示，双端全部开源
在160x80分辨率的屏幕上看部电影是什么感觉，用这个9.9包邮的合宙luatOS开发板+配套TFT板就可以来体验一下项目开源地址：https://github.com/zhuhai-esp/LuatOS-C3-Video-Cast
[attach]1508068[/attach]



上位机软件就用Python开发一个吧，上位机的工作只有两件事：
1. 读取视频文件并做相关变换，我采用OpenCV
2. TCP连接单片机并发送视频数据
  1. import socket

  3. import cv2

  5. if __name__ == "__main__":
  6.     print('请保障PC和开发板访问同一个局域网！')
  7.     ip = input('请输入开发板IP地址：')
  8.     cap = cv2.VideoCapture('video.mp4')
  9.     s = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
  10.     s.connect((ip, 8888))
  11.     encode_param = [int(cv2.IMWRITE_JPEG_QUALITY), 90]
  12.     while cap.isOpened():
  13.         _, frame = cap.read()
  14.         dst = cv2.resize(frame, (160, 80))
  15.         _, jpg = cv2.imencode('.jpg', dst, encode_param)
  16.         ba = bytearray(jpg)
  17.         cv2.imshow('frame', frame)
  18.         s.send(ba)
  19.         if cv2.waitKey(25) & 0xFF == ord('q'):
  20.             break
  21.     cap.release()
  22.     cv2.destroyAllWindows()
  23.     s.close()
复制代码


关于视频数据发送一般有2种方案：
1. 非压缩位图发送，每一帧固定发送160x80x2个字节数据，缺点是数据量过大
2. 采用JPEG压缩，每一帧发送数据不是定长，网络数据得到很大压缩
[attach]1508067[/attach]

单片机设备端需要做什么操作呢？
1. 快速配网连接网络，使用smartConfig吧
  1. WiFi.beginSmartConfig();
复制代码


2. 开启TCP服务监听端口：
  1. WiFiServer server(serverPort);
  2. server.begin();
复制代码


3. 读取网络数据，JPEG解码(若位图发送不需要解码)：
  1. WiFiClient client = server.available();
  2. int batch = client.read(pRead, capable);
  3. TJpgDec.drawJpg(0, 0, pTail, pFNext - pTail);
复制代码


4. 显示图像(显示依赖于TFT_eSPI库)：
  1. tft.pushImage(x, y, w, h, bmp);
复制代码


这样就可以TCP视频投屏就显示出来了
[attach]1508136[/attach]

电脑上也会同步显示：
[attach]1508066[/attach]

项目开源地址：https://github.com/zhuhai-esp/LuatOS-C3-Video-Cast
嵌入式端采用VSCode打开即可
上位机端可以用PyCharm打开，系统需要安装OpenCV库
作者: wfzdm    时间: 2022-6-2 14:13
多谢lz分享
作者: jpdd521    时间: 2022-6-2 14:42
仓库地址404打不开了。。
作者: 261307853    时间: 2022-6-2 15:18
这个有点玩头
作者: sumandigit    时间: 2022-6-2 17:07
这个分辨率有些低,好玩吗?
作者: 桃源客    时间: 2022-6-2 23:41
刚好19.8元买了，看来有玩头了！多谢楼主的分享，不明觉厉，看下能不能抄着刷入看看。
作者: 网络孤客    时间: 2022-6-3 12:11
仓库地址404打不开了。。
作者: 网络孤客    时间: 2022-6-3 12:12
jpdd521 发表于 2022-6-2 14:42
仓库地址404打不开了。。

https://github.com/zhuhai-esp/ESP32-C3-LuatOS
作者: hzy3774    时间: 2022-6-3 14:54
网络孤客 发表于 2022-6-3 12:11
仓库地址404打不开了。。

唉，上个github也是太难了，用这个镜像试试吧
https://hub.fastgit.xyz/zhuhai-esp/ESP32-C3-LuatOS
作者: hzy3774    时间: 2022-6-3 14:58
网络孤客 发表于 2022-6-3 12:11
仓库地址404打不开了。。

现在应该可以了，我的问题
https://hub.fastgit.xyz/zhuhai-esp/LuatOS-C3-Video-Cast
作者: hzy3774    时间: 2022-6-3 14:59
jpdd521 发表于 2022-6-2 14:42
仓库地址404打不开了。。

可以了，这个也行
https://hub.fastgit.xyz/zhuhai-esp/LuatOS-C3-Video-Cast
作者: srygg    时间: 2022-6-3 21:04
这个有点意思，超级小电影
作者: apnic    时间: 2022-6-3 21:35
求教各位大大，为什么我总是不成功呢？这个也和楼主那个网络时钟报一样的错误
  1. [  1358][E][WiFiSTA.cpp:322] begin(): connect failed! 0x300a
复制代码
作者: eagler8    时间: 2022-6-5 05:32
jpdd521 发表于 2022-6-2 14:42
仓库地址404打不开了。。

可以打开
[attach]1510335[/attach]
作者: hzy3774    时间: 2022-6-5 21:21
apnic 发表于 2022-6-3 21:35
求教各位大大，为什么我总是不成功呢？这个也和楼主那个网络时钟报一样的错误
...

这个是配网的吧，手机上要下载个esptouch帮板子练一次网
作者: apnic    时间: 2022-6-6 00:10
hzy3774 发表于 2022-6-5 21:21
这个是配网的吧，手机上要下载个esptouch帮板子练一次网

下过了，对照视频试了几遍就是配网不成功。
作者: hzy3774    时间: 2022-6-6 17:58
apnic 发表于 2022-6-6 00:10
下过了，对照视频试了几遍就是配网不成功。

https://search.bilibili.com/all?keyword=smartconfig
还不行也没办法了，这smartconfig底层我也没仔细看
作者: 月鸣风息    时间: 2022-6-6 18:43
这屏幕着实有点小，长见识了
作者: gw168sh    时间: 2022-6-6 23:48
大佬受我膜拜一下，我就是那个抖音让你出教程的粉丝
作者: hewayking    时间: 2022-6-7 17:20
买了可是不会玩     膜拜大神
作者: ynqj2004    时间: 2022-6-12 08:10
作者: 亲爱的混蛋    时间: 2022-6-12 13:31
牛逼，这个屏幕有够买地址嘛？
作者: hzy3774    时间: 2022-6-13 10:24
亲爱的混蛋 发表于 2022-6-12 13:31
牛逼，这个屏幕有够买地址嘛？

夕夕或者某宝搜索合宙
作者: zwk34    时间: 2022-6-13 11:41
谢谢分享。
作者: jiaolyg    时间: 2022-8-2 10:43
谢谢LZ分享
作者: rgzdb    时间: 2022-8-5 12:54
买个开发板试试，大概率吃灰
作者: eking    时间: 2022-8-5 16:15
这个有点好玩啊
作者: 18675929920    时间: 2023-1-13 18:07
大概率吃灰了



欢迎光临 数码之家 (https://www.mydigit.cn/) Powered by Discuz! X3.4