专利名称：一种图像至音乐的转换方法
技术领域：
本发明涉及图像处理和音乐处理领域，特别是图像与音乐转换模型的建立。
背景技术：
自古以来图像和音乐就是一对孪生姐妹！当人们陶醉于世界大师笔下的美术与摄影作品的水墨丹青之时，一首基于该作品的美妙音乐似乎就萦绕在耳旁。例如在欣赏“奔腾黄河”的画卷时，人们似乎能听到黄河的咆哮声；在欣赏山林晨曲的画卷时，人们又好像听到了山间小溪的潺潺流水声和林中小鸟委婉动听的歌唱声。随着社会的发展，电影、动漫、插画、广告等等艺术产物都离不开图像与音乐这两种艺术表现形式。音乐具有时间上连续的特性，但是不能同时展现全部；相对来说，图像的优势是能够同时展示全部内容。将色彩和音乐进行比较，我们不难发现美术和音乐都力图表现人们的情感，色彩兼有温度的感觉，例如，红、橙、黄色会使人感到温暖，称之为暖色； 蓝、青绿色使人感到寒冷，称之为冷色。音乐就更是人们述说情感的方式，欢快的音乐让人幸福洋溢，哀伤的乐曲使人泫然泪下。图像与音乐的转换，使得其所表达出的情感更加具有张力。因此，现代的多种艺术表达手法中都力求实现图像与音乐的完美结合，以取得更加强烈的感染力。
发明内容
发明目的本发明提供一种图像至音乐的转换方法。将视觉美可听化，实现图像与音乐的完美结合，在进行绘画时，也能听到表达其情绪的音乐，从而取得更强烈的感染力和更加丰富的艺术效果。为了取得以上效果，本发明公开了一种图像至音乐的转换方法，包括以下方面方面一，图像色彩转换为音调通过提取画笔当前色彩的RGB信息，对应转换为音调的信息；方面二，图像中线条的长度转换为音长我们定义作画时以连续绘制出的线条作为一段，规定最短音长在空间上的对应长度为一特定长度d。计算每一段与d的比值，依据此比值通过计算将不同的段转换为不同的音长；方面三，图像中线条的宽度转换为音量在画图工具中提供不同粗细(宽度)的画笔选择，当选择一种宽度时，就按其所占最大宽度的比例来转换为音量。在本发明中，优选地，所述方面一包括以下步骤步骤(11)，对图像色彩的RGB模型的信息提取，并计算出该颜色在HSV模型下的饱和度的值步骤(12)，将色彩的RGB模型的数据转换为音调，HSV模型中的饱和度( 转换为音阶在本发明中，优选地，所述方面二包括以下步骤
步骤，由用户定义最短音长time和该最短音长所对应的长度d步骤(22)，在作画的同时，记录下所绘画的每一笔的线条长度L。步骤(23)，将所绘线条长度转换为对应的音长计算L和d的比值，向下取整获取该比值的整数值K，将所绘线条L对应的音长赋值为KXtime在本发明中，优选地，所述方面三包括以下步骤步骤(31)，用户在绘图时，可在绘图工具栏中点击选择不同宽度(W)的画笔步骤(32)，计算用户所选择的画笔宽度(W)与可选的最短宽度的画笔宽度(Wmin) 的比值，将该比值乘以最低的音量(Volmin)，即可得到该画笔宽度所对应的音量本发明的原理是依据人的“色-听”联觉，确定图像的组成元素与音乐组成元素间的一一对应的对象关系，再依照人对于图像和音乐特质的感受，建立它们相互对应对象间的转换模型，实现图像与音乐的转换。有益效果本发明所述的方法是建立在嵌入式系统的基础上，通过软件方法分别对图像和音乐进行处理和变换，本方法不消耗硬件资源，并且在电影、动漫、广告等多种领域都有着广泛的应用前景。
下面结合附图和具体实施方式
对本发明做更进一步的具体说明，本发明的具体转换模型会更加清晰明白。图1是本发明方法的简化示意2是音乐中音调信息的二维数据表图3是图像色彩的归一化饱和度与音阶的对应表
具体实施例方式本发明方法的核心思想是将图像与音乐的组成要素一一对应，建立彼此之间的转换关系。在本发明中所考虑的图像的组成要素是颜色、线长和线宽，音乐的组成要素是音调、音长和音量。从“色-听”联觉，即对色彩的感觉能引起相应的听觉的角度来思考图像至音乐的联系。我们将具有冷暖表现性的色彩与具有情绪表现性的音调作为相互对应的对象，建立两者之间的转换模型。将分别在空间和时间上具有长度性质的线条长度与节拍对应起来，建立它们之间的转换模型。同时，建立线宽与音量的转换关系。如图1所示，本发明公开了一种图像至音乐的转换方法，包括以下方面方面一，图像色彩转换为音调通过提取画笔当前色彩的RGB信息，对应转换为音调的信息；所述方面一包括以下步骤步骤(11)，对图像色彩的RGB模型的信息提取，并计算出该颜色在HSV模型下的饱和度的值；步骤(12)，将色彩的RGB信息转换为音调，HSV模型中的饱和度(S)转换为音阶。步骤(11)，提取图像色彩的RGB值，并计算出该颜色的饱和度(S)用软件方式实现的画图工具可以很容易地实现对当前画笔的颜色信息提取，得到 RGB值。因为HSV (色彩H、饱和度S、明度V)模型中的饱和度S是直接与艺术家使用颜色的鲜艳程度相关的，为了更加贴近于人的感受，我们将依据下式的RGB模型与HSV模型的转换
公式，计算出饱和度的值。
权利要求
1.一种图像至音乐的转换方法，其特征在于，包括以下方面 方面一，颜色转换为音调将颜色的RGB模型转换为不同音调；方面二，线条长短转换为音长根据线条长短对应转换为不同的时值，即得到音长； 方面三，线条的宽度转换为音量根据线条的粗细对应转换为不同的音量值。
2.根据权利要求1所述的一种图像至音乐的转换方法，其特征在于，所述方面一包括以下步骤步骤(11)，对图像色彩的RGB模型的信息提取，并计算出该颜色在HSV模型下的饱和度的值；步骤(12)，将色彩的RGB模型的数据转换为音调，HSV模型中的饱和度( 转换为音阶。
3.根据权利要求2所述的一种图像至音乐的转换方法，其特征在于，所述方面二包括以下步骤步骤，由用户定义最短音长time和该最短音长所对应的长度d 步骤(22)，在作画的同时，记录下所绘画的每一笔的线条长度L。 步骤(23)，将所绘线条转换为对应音长。
4.根据权利要求3所述的一种图像至音乐的转换方法，其特征在于，所述方面三包括以下步骤步骤(31)，用户在绘图时，可在绘图工具栏中点击选择不同宽度(W)的画笔步骤(32)，计算用户所选择的画笔宽度(W)与可选的最短的画笔宽度(Wmin)的比值， 将该比值乘以最低的音量(Volmin，Volmin Φ 0)，即可得到该画笔宽度所对应的音量。
5.根据权利要求2所述的一种图像至音乐的转换方法，其特征在于，所述步骤(12)的色彩的RGB模型的数据转换为音调、饱和度转换为音阶，它包括了音调信息的二维数据表的建立以及依据此表，分别通过饱和度和RGB值计算得出二维表中的横竖向偏移量，确定最终的乐音频率。
6.根据权利要求3所述的一种图像至音乐的转换方法，其特征在于，所述步骤03)的将所绘线条转换为对应音长，它包括线条长度与音长的线性转换关系。
全文摘要
本发明公开了一种图像至音乐的转换方法，包括以下方面1、颜色转换为音调将颜色的RGB模型转换为不同音调；2、线条长短转换为音长根据线条长短对应转换为不同的时值，即得到音长；3、线条的宽度转换为音量根据线条的粗细对应转换为不同的音量值。本发明通过建立转换模型，将图像与音乐的基本要素对应转换，从而实现图像与音乐这两个艺术表现形式的融合。
文档编号G06T1/00GK102289778SQ20111011968
公开日2011年12月21日 申请日期2011年5月10日 优先权日2011年5月10日
发明者付世斌, 张婕, 张洁, 戴稚晖, 薛亚兰, 袁杰, 霍伟, 顾仁舒 申请人:南京大学