出现问题
在进行两个相机显示的时候,出现了相机显示不同步的情况,具体情况如下视频所示:
华睿/大华相机左右相机显示不同步
可以见到视频之中,右相机是比左相机更快一点的,但是有的时候就是同步的。我调用的代码是现成的,在原有的代码上进行了稍微的更改。
上面是根据现成的代码直接更改得到的,按道理而言,即便是出问题也应该是左相机显示比右相机快呀。所以决定再重新写一个显示代码。
解决思路
一.原始代码
原来的代码之中使用到了相应的SendMessage与ReceiveMessage函数,将原始的相机操作写成单独的一个.h与.cpp文件。看着代码有点儿迷糊,懒得使用这两个函数了,直接在写相应的主要的cpp函数之中进行写入。
查看技术手册,相机的操作流程为如下所示:
在进行配置好环境之后,发现设备到打开相机的操作如下代码所示:
IMV_HANDLE devHandle;unsigned int cameraIndex = 0;TCHAR errMsg[256];int ret = IMV_OK;// 发现设备 IMV_DeviceList deviceInfoList;ret = IMV_EnumDevices(&deviceInfoList, interfaceTypeAll);if (IMV_OK != ret){_stprintf_s(errMsg, _T("Enumeration devices failed! ErrorCode[%d]"), ret);throw errMsg;return FALSE;}if (deviceInfoList.nDevNum < 1){_stprintf_s(errMsg, _T("No Camera."));throw errMsg;return FALSE;}//左相机进行操作cameraIndex = 0;//假设左相机的参数为0// 创建设备句柄ret = IMV_CreateHandle(&devHandle, modeByIndex, (void*)&cameraIndex);if (IMV_OK != ret){_stprintf_s(errMsg, _T("Create devHandle failed! ErrorCode[%d]"), ret);throw errMsg;return FALSE;}// 打开相机 // Open camera ret = IMV_Open(devHandle);if (IMV_OK != ret){_stprintf_s(errMsg, _T("Open camera failed! ErrorCode[%d]"), ret);throw errMsg;return FALSE;}// 设置属性值 这个地方是需要结合后面的说明进行设定ret = IMV_SetDoubleFeatureValue(devHandle, "FrameRate", 10.00);if (exposureAuto_Left != 2){ret = IMV_SetEnumFeatureValue(devHandle, "ExposureAuto", exposureAuto_Left);ret = IMV_SetEnumFeatureValue(devHandle, "GainAuto", GainAuto_Left);ret = IMV_SetEnumFeatureValue(devHandle, "ContrastAuto", ContrastAuto_Left);ret = IMV_SetDoubleFeatureValue(devHandle, "ExposureTime", exposureTime_Left);ret = IMV_SetDoubleFeatureValue(devHandle, "Gamma", Gramma_L);if (IMV_OK != ret){printf("Set feature value failed! ErrorCode[%d]\n", ret);return ret;}}else{ret = IMV_SetEnumFeatureValue(devHandle, "GainAuto", 2);ret = IMV_SetEnumFeatureValue(devHandle, "ContrastAuto", 2);}ret = IMV_SetIntFeatureValue(devHandle, "Brightness", Brightness_L);
文档技术手册之中提到了相机参数的注册回调函数,其作用为当相机的曝光时间或增益发生变化时,应用程序可以通过注册回调函数来接收相机的通知,并相应地更新显示界面上的参数值或图像。
对比两个回调函数:
由于第二个函数是不支持多线程调用,因此选用第一个函数。
// 注册数据帧回调函数ret = IMV_AttachGrabbing(devHandle, onGetFrame, this);if (IMV_OK != ret){_stprintf_s(errMsg, _T("Attach grabbing failed! ErrorCode[%d]"), ret);throw errMsg;return FALSE;}// 开始拉流 // Start grabbing ret = IMV_StartGrabbing(devHandle);if (IMV_OK != ret){_stprintf_s(errMsg, _T("Start grabbing failed! ErrorCode[%d]"), ret);throw errMsg;return FALSE;}
一般而言,此时将显示的信息直接写到onGetFrame之中便是可以的,但是此处我是通过界面交互的方式。由于此处是将相应的采集信息通过一个线程发送出去,因此,需要将线程进行加入。
try{LxhStartThread();}catch (TCHAR* errMsg){throw errMsg;return FALSE;}
二.问题猜想
想法一:和之前的倾角传感器的延迟解决方案一致,先启动线程再进行采集。发现并不是这里的问题。
onGetFrame函数之中将帧信息进行复制
static void onGetFrame(IMV_Frame* pFrame, void* pUser)
{if (pFrame == NULL){return;}CRGB_CameraCtrl *pThis = (CRGB_CameraCtrl2 *)pUser;// Save and call thread.FrameBuffer* pConvertFrameBuffer = new FrameBuffer(pThis->GetDevHandle(), *pFrame);memcpy_s(pThis->pRGB_bufPtr(), IMAGE_SIZE, pConvertFrameBuffer->bufPtr(), IMAGE_SIZE);//使用delete pConvertFrameBuffer;return;
}
开始写的代码是这顺序:注册回帧函数 -> 抓流 -> 启动线程。问题?是不是抓流和启动线程之间存在一定的时间延迟?
所以这里想的是在进行抓流之前便把线程启动起来,实时监控帧信息进行显示。
想法二:首先设置左右相机帧率一致,启动代码,发现仍然存在左右相机延迟的问题。
想法三:
①首先启动官方软件时,观察相机的各项指标。
可以观察到左、右相机的帧率都为10FPS,其中数据传输速率几乎一致。
左右相机同步。
②之后启动自己写的软件,观察情况。
可以观察到左右相机仍然同步。
③再次启动官方软件观察相机的各项指标。
可以发现到左相机明显出现速率变慢的情况。
④多次重复上述②③操作,发现左相机的帧率和传输速率下降的非常明显。按道理而言,在关闭自己写的软件,打开官方软件,采集速率应该是保持一致的。因此,猜想是自己写的软件并没有关闭成功。
查看后台:
果然发现软件仍然在后台进行运行。结束软件任务,重新打开官方软件,左、右相机的传输速率与帧率正常。
上述说明软件在使用过程之中,没有正常关闭软件,存在软件后台运行的问题,代码层次的原因,看一看代码方面是否存在线程未关闭的情况。
三.软件关闭
果然发现重载 主窗口类的 OnClose 函数之中缺少了一个线程的结束。完善代码,重新重复上述测试过程,不再出现掉帧的现象。
开始没往软件结束这个方向想,因为是左相机比右相机慢,想的方向直接偏到了帧率和线程方向是不是出了问题。最后,对比官方软件发现是软件关闭之后并未结束,导致左相机网口一直占用,从而左相机读出的数据比右相机慢很多。