vision-board USB 摄像头

发布于 2024-04-14 19:26:43 浏览：493 订阅该版

[tocm]

# vision-board USB 摄像头

基于 vision-board 实现 USB 摄像头

## 代码移植

由于没有瑞萨 FSP 开发环境，就基于已有 openmv demo 进行移植。

- 添加 `video_device.c` 源文件和头文件
- 修改 rtconfig.h 文件，取消 CDC 支持 UVC

```c
#define PKG_TINYUSB_DEVICE_CDC
//#define CFG_TUD_CDC 1
#define PKG_TINYUSB_DEVICE_CDC_STRING "Board CDC"
#define PKG_TINYUSB_DEVICE_CDC_EPNUM_NOTIF 1
#define PKG_TINYUSB_DEVICE_CDC_EPNUM 2
#define PKG_TINYUSB_DEVICE_CDC_RX_BUFSIZE 512
#define PKG_TINYUSB_DEVICE_CDC_TX_BUFSIZE 512
#define PKG_TINYUSB_DEBUG_ERROR
#define CFG_TUSB_DEBUG 1
#define PKG_USING_TINYUSB_V01400

/* peripheral libraries and drivers */
//------------- CLASS -------------//
// The number of video control interfaces
#define CFG_TUD_VIDEO            1

// The number of video streaming interfaces
#define CFG_TUD_VIDEO_STREAMING  1

// video streaming endpoint size
#define CFG_TUD_VIDEO_STREAMING_EP_BUFSIZE  256

// use bulk endpoint for streaming interface
#define CFG_TUD_VIDEO_STREAMING_BULK 0
//#define CFG_EXAMPLE_VIDEO_READONLY
```

- 修改 usb_descriptor.c 文件，这里的修改比较暴力，没有考虑兼容性，将 tinyusb 官网的 UVC 描述符 copy 过来，替换已有的描述符，解决编译报错问题。修改摄像头的分辨率和板子一致

```c
#define FRAME_WIDTH   320
#define FRAME_HEIGHT  240
#define FRAME_RATE    10
```

- 将 `tinyusb_port.c` 文件中的 `init_tinyusb` 添加到自动初始化中，运行 tinyusb 线程

```c
INIT_APP_EXPORT(init_tinyusb)
```

- hal_entry.c 代码修改

```c
#include <drv_lcd.h>
#include "sensor.h"
#include <tusb.h>
#define CAM_WIDTH   320
#define CAM_HEIGHT  240

extern sensor_t sensor;
uint8_t g_image_rgb565_sdram_buffer[CAM_WIDTH * CAM_HEIGHT * 2] BSP_PLACE_IN_SECTION(".sdram") BSP_ALIGN_VARIABLE(8);

void hal_entry(void)
{
    rt_kprintf("This is a USB UVC demo.\n\n");

sensor_init();
    sensor_reset();
    sensor_set_pixformat(PIXFORMAT_YUV422);
    sensor_set_framesize(FRAMESIZE_QVGA);

while (1)
    {
        sensor_snapshot(&sensor, g_image_rgb565_sdram_buffer, 0);
        tud_video_n_frame_xfer(0, 0, (void*)g_image_rgb565_sdram_buffer, CAM_WIDTH * CAM_HEIGHT * 16/8);
        rt_thread_mdelay(10);
    }
}
```

## 效果

枚举成功

![screenshot_image.png](https://oss-club.rt-thread.org/uploads/20240414/1a83b92c6aa8005d3e1451e4d0fd375b.png.webp)

摄像头数据上传

```c
tud_video_n_frame_xfer(0, 0, (void*)g_image_rgb565_sdram_buffer, CAM_WIDTH * CAM_HEIGHT * 16/8);
```

![screenshot_image.png](https://oss-club.rt-thread.org/uploads/20240414/890bad45a220b9550338c0ee4eeb1ce9.png.webp)

## 问题

使用 EBU color bars 色彩棒测试 UVC 是能够正常显示的，摄像头格式设置为 `YUV422` 不知道为啥摄像头数据有点不对。

![screenshot_image.png](https://oss-club.rt-thread.org/uploads/20240414/bdf369f3e3ce51e2301a4c51bf5d915e.png)