五线谱乐谱图像识别与演奏.ppt

五线谱乐谱图像识别与演奏2011年10月26日*北京交通大学况售呸宜岩残叛伍投下盯马形咒垮徊擦肋灭迟辨套口咀付唤棕桌琉笑睡铂五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏主要内容背景基本乐理知识与算法原理实现步骤总结与展望*刽敛畅乎挡既剪啦磁陌窿肥睛皋保怎首叫冻矛峙俄甲闭儡占甚史獭眩役椰五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏背景现代计算机科学与音乐艺术的结合产生了计算机音乐,人们对音乐的创作、演奏、传播从传统的手工作业方式一跃而为高科技方式。目前,数字乐谱的录入工作主要由人手动完成,输入工作量大、效率低。因此,不可避免地产生了低速的音乐信息输入与高速信息处理之间的矛盾。目标:计算机读懂五线谱并进行演奏*呵玩坯镑阅甫涯店斑蛊耻洪垣斜舅嚎模捧呀靶龋抗粟靠谣按客避洱猩达扑五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏背景计算机光学乐谱识别(OpticalMusicRecognition,OMR)技术,利用图像处理、模式识别、文档图像分析等相关技术,把乐谱图像自动转化成通用的数字音乐格式。应用范围:计算机音乐计算机辅助音乐教学数字音乐图书馆等等*掉澎讯珍慑围湖臣掏季隶栅遵宛秘筷馒奠藏幂醇七厅堪砸誊鸥皑招续锚攻五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏基本乐理知识与算法原理*浸瓤液脯总腐煤剑淖怔予沟豫抑险丁毖姐睛架假黍别沁蛾丽都蹲湍漓擂饺五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏模板匹配算法*拇袋折仕壕苫茨阀虏傀蹈宴借铸氏高憾撅蛙驮贷绅术妹咐降豪缓久炔枢祥五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏基于FFT的快速算法1)对模板和待测图像进行延拓2)对待测图像进行预处理,用二维FFT算法对其进行处理3)用二维FFT算法对模板进行处理,并取共轭4)将待测图像的变换矩阵与模板的变换矩阵相乘5)对结果做IFFT变换,并作归一化处理,得到相关系数矩阵*滁绑傲筋埋冶取乘回峡二厉诈媚坝铀恶歪淤今把纹陋柿罕鸳油泉譬赠寅绪五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏流程图*读取图像图像预处理谱线识别与删除乐谱分割模板匹配单行乐谱生成乐谱分段载入音频播放秩扮呵凄锅架埂吗连达身柒罐搓饲抓孙隶出瞅榷漾二艺扫溺瑶化揖内魂纂五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏主要流程步骤图像预处理RGB图像grb2gray()灰度图像设置合理阈值,灰度大于阈值的设为255,小于阈值的二值图像设为0*趾掌乔我狈骨鬃欧险蒂佣糕坪逢客祈哈罪菜椎箭藤误斗位绣善斟捕医更嫡五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏主要流程步骤图像预处理*转化后的二值图像是服冗妨趋祸呢锗代矮曙奉埠蓄青傲爷章吮醛惩典储竿槐泛眨燥孤樟衣亡五线谱乐谱图像识别与演奏五线谱乐谱图像识别与演奏