(四)Qt 动态手势识别“手掌随动”+“握拳选择”

系列文章目录

通过Qt实现手势识别控制软件操作相关系列技术方案

(一)Qt 将某控件、图案绘制在最前面的方法,通过QGraphicsScene模块实现
(二)Qt QGraphicsScene模块实现圆点绘制在所有窗体的最前方,实现圆点的“彩色拖尾”效果以及“选中方框”效果
(三)Qt 动态手势识别“握拳”
(四)Qt 动态手势识别“手掌随动”+“握拳选择”
(五)Qt 动态手势识别“左右滑动”以及实现翻页效果

文章目录

  • 系列文章目录
  • 1、前言
    • 1.1 目标
  • 2、效果
  • 2、代码实现
    • 2.1 核心代码
  • 总结


1、前言

  本系列博客第(一)、(二)、(三)篇分别介绍了如何建立一个Qt软件界面用于作为演示动态手势识别的载体,本文为该系列第(四)篇博客,将融合前三篇博客所述,完成一个阶段性的演示demo。

1.1 目标

  本篇博客主要记录了在Qt平台实现动态手势“手掌随动”+“握拳选择”的过程。
  所谓“手掌随动”即在摄像头前移动操作人的手掌,在软件界面中将有个类似鼠标的“小圆”跟随手掌的移动而移动。
  “握拳选择”则是令手部进行一次“握拳”动作,则产生一种“选中”的效果出来。


2、效果

  为了便于观察手势识别结果以及原始手势图像,我分别打开两个Widget窗口,左边的窗口用于显示识别结果,右边为摄像头实时画面。
  左边的窗口中有8个黄色小窗口,有一个类似鼠标功能的“小圆点”用于随动,当“小圆点”移动至某个黄色小窗口上时,该小窗口将变色,于此同时产生类似鼠标移入时的音效。
  当在黄色小窗口内做“握拳选择”的动作时,被选中的小窗口将立即变色,当“小圆点”移出该小窗口时,其颜色恢复为黄色。

  先看演示效果视频:

动态手势识别_随动+选择(视角1)

动态手势识别_随动+选择(视角2)

效果演示动态图

图1 “手掌随动”效果gif图

(四)Qt 动态手势识别“手掌随动”+“握拳选择”_第1张图片

图2 “握拳选择”动态手势识别效果gif图

2、代码实现

2.1 核心代码

  这里面需要搞清楚每个类的作用,以及类与类之间的关系,信号槽的连接等一系列逻辑问题。

    QObject::connect(&udpServer, SIGNAL(receivedPoints(QList<QPointF>*)),w.ui->widget, SLOT(point_update(QList<QPointF>*)));
    QObject::connect(&udpServer, SIGNAL(receivedPoints(QList<QPointF>*)),&handposturedetect, SLOT(point_update(QList<QPointF>*)));
    QObject::connect(w.ui->widget, SIGNAL(paly_sound(int)),&sound, SLOT(play(int)));
    QObject::connect(&handposturedetect, SIGNAL(send_selected()),w.ui->widget, SLOT(select_widget()));

  下面是识别“握拳选择”的算法。

QString HandPostureDetect::dynamic_gesture_recognize(const QQueue<QString>& gestureQueue)
{
    int state = 0; 
    int countFive1 = 0; 
    int countFist = 0; 
    int countFive2 = 0; 
    for (const QString& gesture : gestureQueue)
    {
        if (state == 0)
        {
            if (gesture == "five")
            {
                countFive1++;
                if (countFive1 >= 5)
                {
                    state = 1;
                    countFive1 = 0;
                }
            }
            else
            {
                countFive1 = 0;
            }
        }
        else if (state == 1)
        {
            if (gesture == "fist")
            {
                countFist++;
                if (countFist >= 5)
                {
                    state = 2;
                    countFist = 0;
                }
            }
            else
            {
                countFist = 0;
            }
        }
        else if (state == 2)
        {
            if (gesture == "five")
            {
                countFive2++;
                if (countFive2 >= 5)
                {
                    if(pre_condition == 0)
                    {
                        qDebug()<<"select_"<<count;
                        count++;

                        pre_condition = 1;
                        emit send_result(pre_condition);
                        return "select";
                    }
                    if(pre_condition == 1)
                    {
                        return "";
                    }
                }
            }
            else
            {
                countFive2 = 0;
            }
        }
    }

    if(pre_condition == 1)
    {
        pre_condition = 0;
    }
    emit send_result(pre_condition);
    return "";
}

  本项目所有代码的获取,请私信与本人联系。


总结

  本系列文章,通过动、静态手势识别技术方式操控Qt界面软件实现相关操作功能:
(一)Qt 将某控件、图案绘制在最前面的方法,通过QGraphicsScene模块实现
(二)Qt QGraphicsScene模块实现圆点绘制在所有窗体的最前方,实现圆点的“彩色拖尾”效果以及“选中方框”效果
(三)Qt 动态手势识别“握拳”
(四)Qt 动态手势识别“手掌随动”+“握拳选择”
(五)Qt 动态手势识别“左右滑动”以及实现翻页效果
  本项目所有代码的获取,请私信与本人联系。

你可能感兴趣的:(Qt,qt,数据库,开发语言)