操干
文章目录
光流法运动轨迹跟踪
关键技术分析
基于深度学习的艺术风格迁移blobFromImage函数详解
实时目标跟踪跟踪器工作流程
多风格实时艺术滤镜多线程优化策略性能优化技巧
光流法运动轨迹跟踪光流法是一种通过分析连续帧之间的像素变化来追踪物体运动轨迹的技术。
下面的代码展示了如何使用Shi-Tomasi角点检测和Lucas-Kanade光流法实现运动跟踪importcv2importnumpyasnp# 读取视频文件capcv
VideoCapture(test.avi)# Shi-Tomasi角点检测参数配置feature_paramsdict(maxCorners100,# 设置检测的最大角点数量qualityLevel
3,# 角点质量阈值值越小检测到的角点越多minDistance7# 角点间的最小像素距离避免角点过于密集)# Lucas-Kanade光流法参数配置lk_paramsdict(winSize(15,
,# 搜索窗口大小较大的窗口能处理更大的运动maxLevel2# 金字塔层数用于处理不同尺度下的运动)# 生成随机颜色用于绘制不同轨迹colornp.random.randint(0,255,(100,
)# 读取视频第一帧并转换为灰度图ret,old_framecap.read()old_graycv
cvtColor(old_frame,cv
COLOR_BGR2GRAY)# 检测初始角点作为跟踪起点p0cv
goodFeaturesToTrack(old_gray,maskNone,**feature_params)# 创建与视频帧大小相同的黑色画布用于绘制轨迹masknp.zeros_like(old_frame)# 主循环逐帧处理视频whileTrue:ret,framecap.read()ifnotret:break# 当前帧转换为灰度图frame_graycv
cvtColor(frame,cv
COLOR_BGR2GRAY)# 计算光流追踪p0点在当前帧中的新位置p1,st,errcv
calcOpticalFlowPyrLK(old_gray,frame_gray,p0,None,**lk_params)# 筛选跟踪成功的点状态为1表示跟踪成功good_newp1[st1]good_oldp0[st1]# 绘制运动轨迹fori,(new,old)inenumerate(zip(good_new,good_old)):a,bnew.ravel()# 当前帧中的点坐标c,dold.ravel()# 上一帧中的点坐标a,b,c,dint(a),int(b),int(c),int(d)# 在掩模上绘制连接线显示运动路径maskcv
line(mask,(a,b),(c,d),color[i].tolist(),
# 在当前帧上标记角点位置cv
circle(frame,(a,b),5,color[i].tolist(),-
# 将轨迹叠加到当前帧上imgcv
add(frame,mask)# 显示结果cv
imshow(frame,img)# 更新前一帧数据和特征点old_grayframe_gray.copy()p0good_new.reshape(-1,1,
# 检测ESC键退出kcv
waitKey(
ifk27:break# 释放资源cap.release()cv
destroyAllWindows()
关键技术分析Shi-Tomasi角点检测maxCorners控制检测角点的最大数量平衡精度和性能qualityLevel决定角点质量的阈值值越小检测越敏感minDistance确保角点分布均匀避免聚集Lucas-Kanade光流法winSize搜索窗口大小影响运动检测的敏感度maxLevel图像金字塔层数用于处理多尺度运动
基于深度学习的艺术风格迁移OpenCV的dnn模块支持加载预训练的深度学习模型实现艺术风格转换importcv2# 读取并调整输入图像大小imagecv
imread(rpicture_
jpg)imagecv
resize(image,None,fx
5,fy
0.
# 显示原始图像cv
imshow(yuan tu,image)cv
waitKey(
# 获取图像尺寸(h,w)image.shape[:2]# 图像预处理创建神经网络输入格式blobcv
dnn.blobFromImage(image,# 输入图像scalefactor1,# 像素值缩放因子size(w,h),# 输出blob的尺寸mean(0,0,
,# 各通道的均值不进行均值减法swapRBFalse,# 不交换R和B通道OpenCV使用BGR格式cropFalse# 不进行裁剪)# 加载预训练的艺术风格模型# 支持多种框架格式Caffe、TensorFlow、PyTorch、Darknet等netcv
dnn.readNet(rmodel\starry_night.t
# PyTorch格式的星空风格模型# 设置网络输入net.setInput(blob)# 前向传播获得风格化输出outnet.forward()# 输出数据处理四维转三维out_newout.reshape(out.shape[1],out.shape[2],out.shape[3])# 数据归一化到[0,1]范围cv
normalize(out_new,out_new,norm_typecv
NORM_MINMAX)# 调整维度顺序CHW → HWCresultout_new.transpose(1,2,
# 显示风格化结果cv
imshow(Stylized Image,result)cv
waitKey(
cv
destroyAllWindows()blobFromImage函数详解cv
dnn.blobFromImage()是将图像转换为神经网络输入格式的关键函数scalefactor每个像素值的缩放倍数常用于数据归一化size指定输出blob的宽度和高度通常与网络输入层匹配mean各通道的均值用于均值减法数据标准化swapRBOpenCV使用BGR格式而大多数模型使用RGB此参数控制是否交换通道crop是否在调整大小后进行中心裁剪
实时目标跟踪OpenCV提供多种跟踪算法CSRT跟踪器在准确性和速度之间取得良好平衡importcv2# 创建CSRT跟踪器实例trackercv
TrackerCSRT_create()# 跟踪状态标志trackingFalse# 打开摄像头capcv
VideoCapture(
whileTrue:# 读取摄像头帧ret,framecap.read()ifnotret:break# 按下s键开始跟踪选择ROI区域ifcv
waitKey(
ord(s):trackingTrue# 交互式选择跟踪区域roicv
selectROI(Tracking,frame,showCrosshairFalse)# 初始化跟踪器tracker.init(frame,roi)# 如果正在跟踪更新跟踪器位置iftracking:success,boxtracker.update(frame)ifsuccess:# 提取边界框坐标x,y,w,h[int(v)forvinbox]# 绘制跟踪框cv
rectangle(frame,(x,y),(xw,yh),(0,255,
,
# 显示跟踪结果cv
imshow(Tracking,frame)# 按下ESC键退出ifcv
waitKey(
27:break# 释放资源cap.release()cv
destroyAllWindows()跟踪器工作流程初始化阶段用户通过鼠标选择感兴趣区域(ROI)跟踪阶段跟踪器根据目标的纹理、颜色等特征在后续帧中定位目标更新阶段tracker.update()返回跟踪状态和边界框坐标
多风格实时艺术滤镜将摄像头画面分割为四个区域分别应用不同的艺术风格importcv2importnumpyasnpimportthreadingfromqueueimportQueue# 加载四种不同的艺术风格模型defload_models():models[cv
dnn.readNet(rmodel\starry_night.t
,# 梵高星空风格cv
dnn.readNet(rmodel\candy.t
,# 糖果风格cv
dnn.readNet(rmodel\composition_vii.t
,# 康定斯基风格cv
dnn.readNet(rmodel\la_muse.t
# 缪斯风格]returnmodels# 对单个图像块应用风格迁移defapply_style(image_block,model):(h,w)image_block.shape[:2]# 图像预处理blobcv
dnn.blobFromImage(image_block,scalefactor
0,size(w,h),mean(0,0,
,swapRBFalse,cropFalse)# 模型推理model.setInput(blob)outmodel.forward()# 后处理out_newout.reshape(out.shape[1],out.shape[2],out.shape[3])cv
normalize(out_new,out_new,norm_typecv
NORM_MINMAX)resultout_new.transpose(1,2,
resultnp.uint8(result*
# 转换为8位图像returnresult# 并行处理器类使用多线程加速处理classStyleProcessor:def__init__(self,models):self.modelsmodels self.results[None]*4defprocess_block(self,block_idx,block,model):resultapply_style(block,model)self.results[block_idx]resultdefprocess_all_blocks(self,blocks):threads[]foriinrange(
:# 为每个区域创建独立线程threadthreading.Thread(targetself.process_block,args(i,blocks[i],self.models[i]))threads.append(thread)thread.start()# 等待所有线程完成forthreadinthreads:thread.join()returnself.results# 主函数优化版本defmain_optimized():# 初始化模型和处理器modelsload_models()processorStyleProcessor(models)# 设置摄像头capcv
VideoCapture(
cap.set(cv
CAP_PROP_FRAME_WIDTH,
cap.set(cv
CAP_PROP_FRAME_HEIGHT,
print(按ESC键退出程序...)whileTrue:ret,framecap.read()ifnotret:break# 统一图像尺寸framecv
resize(frame,(640,
)height,widthframe.shape[:2]# 计算分割点mid_h,mid_wheight//2,width//2# 将画面分割为四个区域blocks[frame[0:mid_h,0:mid_w],# 左上区域frame[0:mid_h,mid_w:width],# 右上区域frame[mid_h:height,0:mid_w],# 左下区域frame[mid_h:height,mid_w:width]# 右下区域]# 并行处理四个区域styled_blocksprocessor.process_all_blocks(blocks)# 创建输出画布output_framenp.zeros_like(frame)# 拼接处理后的区域output_frame[0:mid_h,0:mid_w]styled_blocks[0]output_frame[0:mid_h,mid_w:width]styled_blocks[1]output_frame[mid_h:height,0:mid_w]styled_blocks[2]output_frame[mid_h:height,mid_w:width]styled_blocks[3]# 绘制区域分割线cv
line(output_frame,(mid_w,
,(mid_w,height),(255,255,
,
cv
line(output_frame,(0,mid_h),(width,mid_h),(255,255,
,
# 显示多风格画面cv
imshow(Multi-Style Camera View,output_frame)ifcv
waitKey(
0xFF27:break# 清理资源cap.release()cv
destroyAllWindows()if__name____main__:main_optimized()多线程优化策略区域分割将摄像头画面均匀分为四个独立区域并行处理每个区域使用独立线程应用不同的风格模型结果拼接将处理后的区域重新组合为完整画面性能优化技巧降低分辨率减小处理数据量提高实时性多线程处理充分利用多核CPU并行计算模型选择选择轻量级模型或优化模型大小帧率控制可适当降低处理帧率平衡质量和速度这些代码示例展示了OpenCV在计算机视觉领域的多样化应用从传统的运动跟踪到基于深度学习的艺术创作体现了计算机视觉技术的强大功能和广泛应用前景。
粉色abb苏州免费下载安装-粉色abb苏州免费下载安装应用
