专利名称:图像补正装置,图像补正方法,及图像形成装置的制作方法
技术领域:
本发明涉及图像补正装置,程序,储存媒体,图像补正方法,图像读取装置及图像形成装置。
背景技术:
使用平台式扫描器读取原稿大多为一张张纸状原稿,在原稿玻璃台上设置开闭自如的压板,将原稿载置到原稿玻璃台上后,关闭压板,对原稿进行扫描。但是,原稿并不限于上述一张张纸状,有时也要处理例如书原稿(书,册子等),这种场合,将书原稿载置到原稿玻璃台上,对原稿进行扫描。
但是,使用书原稿场合,如图39所示,书原稿100的页装订部101离开原稿玻璃台102。当书原稿100的页装订部101离开原稿玻璃台102场合,页装订部101离开焦点面,因此,隆起部分的扫描图像发生图像歪曲、文字模糊等图像劣化。劣化图像的页装订部101难以读取,通过光学文字读取装置(optical character reading,简记为“OCR”)进行文字识别处理时的识别率显著低下。尤其,厚本子时,状况更差,另外,当进行加压以使得书原稿100的页装订部101不离开焦点面场合,有时会发生书原稿本身破损。
为了解决上述问题,提出了使用根据图像的浓度信息推断物体的三次元形状的方法对图像歪曲进行补正的方法。作为这种根据图像的浓度信息推断物体的三次元形状的方法的代表例是被称为“Shape fromShading”的方法(例如,参照非专利文献T.Wada,H.Uchida and T.Matsuyama,“Shape from Shading with Interreflections under a ProximalLight SourceDistortion-Free Copying of an Unfolded Book”,International Journal Computer Vision 24(2),125-135 )。
但是,上述被称为“Shape from Shading”的方法计算量大,图像歪曲补正处理计算时间长,难以实用化。
另外,还有通过三角测量方式测定书籍形状的方法(例如,参照专利文献1特开平5-161002号公报)。但是,若根据该方法,需要用于通过三角测量方式测定书籍形状的特别形状检测装置,不合适。
于是,近年,提出了使用读取扫描图像的页外形形状推断书籍表面的三次元形状的图像补正装置(例如,参照专利文献2特开平11-41455号公报)。
将书原稿载置到原稿玻璃台场合,需要将书原稿图像向下载置,操作者只能看到原稿的背面。因此,如图40所示,扫描图像有时会成为扫描图像a,由于书原稿的页装订部隆起,该隆起部(离开原稿玻璃台的距离)在页的上下不同,因此,成为如日文片假名“ハ”字那样的歪曲形状(以下为方便起见,用中文“八”字代替,简记为“八”字歪曲)。
但是,在以往的图像补正方式中,由于没有考虑这种状况,若补正这种扫描图像的歪曲,不仅不能进行充分的补正,且存在图像质量劣化问题。
发明内容
本发明就是为解决上述先有技术所存在的问题而提出来的,本发明的目的在于,提供即使对“八”字歪曲形状的扫描图像进行三次元形状歪曲补正也能防止发生伴随上述补正而引起的图像质量的劣化的图像补正装置,程序,储存媒体,图像补正方法,图像读取装置及图像形成装置。
为了实现上述目的,本发明提出以下方案(1)一种图像补正装置,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,设有“八”字歪曲角度检测装置,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度;
“八”字歪曲补正装置,根据上述“八”字歪曲角度检测装置检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。
因此,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度,根据上述“八”字歪曲角度检测装置检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。这样,即使对“八”字歪曲形状的扫描图像进行三次元形状歪曲补正也能防止发生伴随上述补正而引起的图像质量的劣化。
(2)在上述(1)的图像补正装置中,上述“八”字歪曲角度检测装置包括歪曲区域推断装置,从上述扫描图像的左右页分别检测上述线形状部分的直线部,检测上述直线部与弯曲部的分界处,推断歪曲区域;“八”字歪曲角度计算装置,分别计算上述扫描图像的左右各页的上述直线部与读取图像时的副扫描方向所成的角度。
因此,根据扫描图像的左右各页的线形状部分的直线部与读取图像时的副扫描方向所成的角度计算“八”字歪曲角度。这样,仅仅通过检测线形状部分的直线部,检测上述直线部与弯曲部的分界处,就能计算“八”字歪曲角度,能在短时间里检测“八”字歪曲角度。
(3)在上述(1)或(2)的图像补正装置中,上述“八”字歪曲补正装置包括三次元形状检测装置,检测上述书原稿的三次元形状;主扫描方向歪曲补正装置,根据上述三次元形状检测装置检测而得的书原稿的三次元形状,进行上述扫描图像的主扫描方向的伸长处理;图像回转装置,分割上述已由主扫描方向歪曲补正装置施以主扫描方向伸长处理的扫描图像的左右页,以所定位置为中心,分别回转由上述“八”字歪曲角度检测装置检测而得的各“八”字歪曲角度;副扫描方向歪曲补正装置,根据经上述图像回转装置回转的图像的三次元形状,在副扫描方向使图像伸长。
因此,能可靠地在对扫描图像的“八”字歪曲进行补正后,对扫图像的副扫描方向的形状歪曲进行补正。
(4)在上述(1)-(3)的任一个图像补正装置中,上述三次元形状检测装置包括隆起形状检测装置,将上述扫描图像的左右各页的直线部延长到装订部分界线,根据从上述延长直线到上述线形状部分的弯曲部的距离,检测上述扫描图像的从原稿玻璃台的隆起形状值;线性插值装置,在与上述装订部分界线平行的各直线上,分别选择两点,根据该两点的由上述隆起形状检测装置检测而得的上述扫描图像从原稿玻璃台的隆起形状值,进行各直线的线性插值处理。
因此,能可靠地检测书原稿的三次元形状。
(5)在上述(4)的图像补正装置中,上述隆起形状检测装置推断上述书原稿隆起的歪曲区域与没有歪曲区域的分界处,将该分界处的隆起形状值设为0。
因此,很容易检测扫描图像的从原稿玻璃台的隆起形状值。
(6)在上述(1)-(5)的任一个图像补正装置中,上述“八”字歪曲补正装置包括像素线性插值装置,对于经上述图像回转装置回转后的上述扫描图像的各像素值,根据邻接四区域的各像素值,进行线性插值处理。
因此,使得被分割的扫描图像的左右页回转,补正的图像像素的坐标不会成为小数。这样,能保持“八”字歪曲补正图像的图像质量。
(7)在上述(3)的图像补正装置中,上述主扫描方向歪曲补正装置根据以上述图像读取手段的光轴为基准检测的各像素的伸长率,使图像在主扫描方向伸长。
因此,能可靠地对从原稿玻璃台隆起的的书原稿的扫描图像的主扫描方向的图像歪曲进行补正。
(8)在上述(1)-(7)的任一个图像补正装置中,设有对图像施以亮度补正处理的亮度补正装置。
因此,对图像实行亮度补正,能防止在扫描图像上发生黑条纹或淡影。
(9)在上述(1)-(8)的任一个图像补正装置中,设有对图像施以模糊补正处理的模糊补正装置。
因此,对图像实行模糊补正,能使扫描图像清晰。
(10)一种图像补正装置,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,设有双值化装置,对由上述图像读取手段读取的扫描图像进行双值化处理;文字外接矩形抽取装置,从上述经双值化装置双值化处理的已双值化的图像,切取文字,抽取各文字的外接矩形;文字行抽取装置,根据由上述文字外接矩形抽取装置抽取的文字外接矩形,抽取文字行;隆起量推断装置,根据由上述文字行抽取装置抽取的文字行形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正装置,根据由上述隆起量推断装置推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取文字行,根据文字行的形状变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
(11)在上述(10)的图像补正装置中,设有文书判别装置,对上述图像读取手段所读取图像的副扫描方向的双值化图像的黑像素数进行计数,根据上述计数,构成主扫描方向的直方图,根据该直方图的图形,判别上述原稿图像是横书文书还是纵书文书。
因此,横书文书场合,出现山谷反复形状,纵书文书场合不出现这种形状,通过利用该形状能判别文书是横书文书还是纵书文书。
(12)在上述(11)的图像补正装置中,得到上述双值化图像的黑像素数多的部分与少的部分交替出现的直方图场合,判别上述原稿图像是横书文书,除此以外场合,判别上述原稿图像是纵书文书。
因此,能可靠地判别上述原稿图像是横书文书还是纵书文书。
(13)在上述(11)或(12)的图像补正装置中,通过上述文书判别装置,判别上述原稿图像是横书文书场合,在上述隆起量推断装置,从由上述文字行抽取装置抽取的文字行中选择相对其中最长文字行具有所定比率以上长度的文字行,再从上述所选择的文字行中将弯曲量程度最大的文字行作为基准文字行,根据该基准文字行推断隆起量。
因此,选择最适基准文字行,根据该基准文字行,合适地推断原稿图像从原稿玻璃台的隆起量。
(14)在上述(13)的图像补正装置中,上述弯曲量通过包含在上述文字行中的各文字外接矩形的中心坐标在读取图像的主扫描方向的位置坐标测定,中心坐标的最大值与最小值之间的差越大,看作弯曲量越大。
因此,能可靠地将弯曲量最大的文字行设为基准文字行。
(15)在上述(11)或(12)的图像补正装置中,通过上述文书判别装置,判别上述原稿图像是纵书文书场合,在上述隆起量推断装置,仅选择从由上述文字行抽取装置抽取的若干文字行的最前头行的文字外接矩形,或者末尾行的文字外接矩形构成基准文字行,根据该基准文字行推断隆起量。
因此,选择最适基准文字行,根据该基准文字行,合适地推断原稿图像从原稿玻璃台的隆起量。
(16)在上述(13)-(15)任一个图像补正装置中,对包含在上述基准文字行中的上述各文字外接矩形的中心坐标施以Hough变换,推断上述基准文字行的直线部分。
因此,即使是直线与曲线混杂场合,也能检测直线部分。
(17)在上述(16)的图像补正装置中,通过最小二乘法用多项式近似上述基准文字行整体的形状。
因此,能可靠地抽取曲线部分。
(18)在上述(17)的图像补正装置中,测定上述基准文字行的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。
因此,测定往直线内侧的歪曲量,使三次元形状复原。
(19)在上述(18)的图像补正装置中,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。
因此,推断合适的隆起量。
(20)在上述(11)-(19)的任一个图像补正装置中,上述隆起量推断装置在上述原稿图像的左右页分别独立进行。
因此,即使当打开的页接近书籍封面或封底时,书原稿的页装订部的左右隆起量不同场合,也能分别独立地推断隆起量,能得到更良好的补正结果。
(21)一种图像补正装置,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,设有双值化装置,对由上述图像读取手段读取的扫描图像进行双值化处理;格线抽取装置,从上述经双值化装置双值化处理的已双值化的图像,抽取格线;隆起量推断装置,根据由上述格线抽取装置抽取的格线形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正装置,根据由上述隆起量推断装置推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取格线,根据格线形状的变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
(22)在上述(21)的图像补正装置中,上述格线抽取装置对上述双值化图像的黑像素数沿上述图像读取手段的读取图像的副扫描方向进行计数,根据该计数,构成主扫描方向的直方图,根据该直方图的图形抽取上述格线。
因此,抽取副扫描方向的格线。
(23)在上述(22)的图像补正装置中,将直方图上出现细高峰值的部分判定为上述格线。
因此,能可靠地抽取副扫描方向的格线。
(24)在上述(22)或(23)的图像补正装置中,在上述隆起量推断装置,从由上述格线抽取装置抽取的格线中选择相对其中最长格线具有所定比率以上长度的格线,再从上述所选择的格线中将最接近图像上端或下端的格线作为基准格线,根据该基准格线推断隆起量。
因此,选择最适基准格线,根据该基准格线,合适地推断原稿图像从原稿玻璃台的隆起量。
(25)在上述(24)的图像补正装置中,对包含在上述基准格线中的各像素坐标施以Hough变换,推断上述基准格线的直线部分。
因此,即使是直线与曲线混杂场合,也能检测直线部分。
(26)在上述(25)的图像补正装置中,通过最小二乘法用多项式近似上述基准格线的形状。
因此,能可靠地抽取曲线部分。
(27)在上述(26)的图像补正装置中,测定上述基准格线的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。
因此,测定直线往内侧的歪曲量,使得三次元形状复原。
(28)在上述(27)的图像补正装置中,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。
因此,推断合适的隆起量。
(29)在上述(22)-(28)的任一个图像补正装置中,上述隆起量推断装置在上述原稿图像的左右页分别独立进行。
因此,即使当打开的页接近书籍封面或封底时,书原稿的页装订部的左右隆起量不同场合,也能分别独立地推断隆起量,能得到更良好的补正结果。
(30)一种程序,由计算机实行,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,使计算机实行以下功能“八”字歪曲角度检测功能,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度;“八”字歪曲补正功能,根据上述“八”字歪曲角度检测功能检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。
因此,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度,根据上述“八”字歪曲角度检测装置检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。这样,即使对“八”字歪曲形状的扫描图像进行三次元形状歪曲补正也能防止发生伴随上述补正而引起的图像质量的劣化。
(31)在上述(30)的程序中,上述“八”字歪曲角度检测功能使计算机实行下列功能歪曲区域推断功能,从上述扫描图像的左右页分别检测上述线形状部分的直线部,检测上述直线部与弯曲部的分界处,推断歪曲区域;“八”字歪曲角度计算功能,分别计算上述扫描图像的左右各页的上述直线部与读取图像时的副扫描方向所成的角度。
因此,根据扫描图像的左右各页的线形状部分的直线部与读取图像时的副扫描方向所成的角度计算“八”字歪曲角度。这样,仅仅通过检测线形状部分的直线部,检测上述直线部与弯曲部的分界处,就能计算“八”字歪曲角度,能在短时间里检测“八”字歪曲角度。
(32)在上述(30)或(31)的程序中,上述“八”字歪曲补正功能使计算机实行下列功能三次元形状检测功能,检测上述书原稿的三次元形状;主扫描方向歪曲补正功能,根据上述三次元形状检测功能检测而得的书原稿的三次元形状,进行上述扫描图像的主扫描方向的伸长处理;图像回转功能,分割上述已由主扫描方向歪曲补正功能施以主扫描方向伸长处理的扫描图像的左右页,以所定位置为中心,分别回转由上述“八”字歪曲角度检测功能检测而得的各“八”字歪曲角度。
副扫描方向歪曲补正功能,根据经上述图像回转功能回转的图像的三次元形状,在副扫描方向使图像伸长。
因此,能可靠地对扫描图像的“八”字歪曲进行补正后,对扫描图像的副扫描方向的形状歪曲进行补正。
(33)一种程序,由计算机实行,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,使得计算机实行以下功能双值化功能,对由上述图像读取手段读取的扫描图像进行双值化处理;文字外接矩形抽取功能,从上述经双值化功能双值化处理的已双值化的图像,切取文字,抽取各文字的外接矩形;文字行抽取功能,根据由上述文字外接矩形抽取功能抽取的文字外接矩形,抽取文字行;隆起量推断功能,根据由上述文字行抽取功能抽取的文字行形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正功能,根据由上述隆起量推断功能推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取文字行,根据文字行的形状变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
(34)在上述(33)的程序中,使得计算机实行文书判别功能,对上述图像读取手段所读取图像的副扫描方向的双值化图像的黑像素数进行计数,根据上述计数,构成主扫描方向的直方图,根据该直方图的图形,判别上述原稿图像是横书文书还是纵书文书。
因此,横书文书场合,出现山谷反复形状,纵书文书场合不出现这种形状,通过利用该形状能判别文书是横书文书还是纵书文书。
(35)在上述(34)的程序中,得到上述双值化图像的黑像素数多的部分与少的部分交替出现的直方图场合,判别上述原稿图像是横书文书,除此以外场合,判别上述原稿图像是纵书文书。
因此,能可靠地判别原稿图像是横书文书还是纵书文书。
(36)在上述(34)或(35)的程序中,通过上述文书判别功能,判别上述原稿图像是横书文书场合,在上述隆起量推断功能,从由上述文字行抽取功能抽取的文字行中选择相对其中最长文字行具有所定比率以上长度的文字行,再从上述所选择的文字行中将弯曲量程度最大的文字行作为基准文字行,根据该基准文字行推断隆起量。
因此,选择最适基准文字行,根据该基准文字行,合适地推断原稿图像从原稿玻璃台的隆起量。
(37)在上述(36)的程序中,上述弯曲量通过包含在上述文字行中的各文字外接矩形的中心坐标在读取图像的主扫描方向的位置坐标测定,中心坐标的最大值与最小值之间的差越大,看作弯曲量越大。
因此,能可靠地将弯曲量最大的文字行作为基准文字行。
(38)在上述(34)或(35)的程序中,通过上述文书判别功能,判别上述原稿图像是纵书文书场合,在上述隆起量推断功能,仅选择从由上述文字行抽取功能抽取的若干文字行的最前头行的文字外接矩形,或者末尾行的文字外接矩形构成基准文字行,根据该基准文字行推断隆起量。
因此,选择最适基准文字行,根据该基准文字行,合适地推断原稿图像从原稿玻璃台的隆起量。
(39)在上述(36)-(38)的任一个程序中,对包含在上述基准文字行中的上述各文字外接矩形的中心坐标施以Hough变换,推断上述基准文字行的直线部分。
因此,即使直线与曲线混杂场合也能检测直线部分。
(40)在上述(39)的程序中,通过最小二乘法用多项式近似上述基准文字行整体的形状。
因此,能可靠地抽取曲线部分。
(41)在上述(40)的程序中,测定上述基准文字行的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。
因此,测定直线往内侧的歪曲量,使得三次元形状复原。
(42)在上述(41)的程序中,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。
因此,推断合适的隆起量。
(43)在上述(34)-(42)的任一个程序中,上述隆起量推断功能在上述原稿图像的左右页分别独立进行。
因此,即使当打开的页接近书籍封面或封底时,书原稿的页装订部的左右隆起量不同场合,也能分别独立地推断隆起量,能得到更良好的补正结果。
(44)一种程序,由计算机实行,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,使得计算机实行以下功能双值化功能,对由上述图像读取手段读取的扫描图像进行双值化处理;格线抽取功能,从上述经双值化功能双值化处理的已双值化的图像,抽取格线;隆起量推断功能,根据由上述格线抽取功能抽取的格线形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正功能,根据由上述隆起量推断功能推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取格线,根据格线形状的变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
(45)在上述(44)的程序中,上述格线抽取功能对上述双值化图像的黑像素数沿上述图像读取手段的读取图像的副扫描方向进行计数,根据该计数,构成主扫描方向的直方图,根据该直方图的图形抽取上述格线。
因此,抽取副扫描方向的格线。
(46)在上述(45)的程序中,将直方图上出现细高峰值的部分判定为上述格线。
因此,能可靠地抽取副扫描方向的格线。
(47)在上述(45)或(46)的程序中,在上述隆起量推断功能,从由上述格线抽取功能抽取的格线中选择相对其中最长格线具有所定比率以上长度的格线,再从上述所选择的格线中将最接近图像上端或下端的格线作为基准格线,根据该基准格线推断隆起量。
因此,选择最适基准格线,根据该基准格线,合适地推断原稿图像从原稿玻璃台的隆起量。
(48)在上述(47)的程序中,对包含在上述基准格线中的各像素坐标施以Hough变换,推断上述基准格线的直线部分。
因此,即使直线与曲线混杂场合也能检测直线部分。
(49)在上述(48)的程序中,通过最小二乘法用多项式近似上述基准格线的形状。
因此,能可靠地抽取曲线部分。
(50)在上述(49)的程序中,测定上述基准格线的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。
因此,测定直线往内侧的歪曲量,使得三次元形状复原。
(51)在上述(50)的程序中,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。
因此,推定合适的隆起量。
(52)在上述(45)-(51)的任一个程序中,上述隆起量推断功能在上述原稿图像的左右页分别独立进行。
因此,即使当打开的页接近书籍封面或封底时,书原稿的页装订部的左右隆起量不同场合,也能分别独立地推断隆起量,能得到更良好的补正结果。
(53)一种储存媒体,可由计算机读取,其特征在于,储存上述本发明(30)-(52)中任一个所述的程序。
因此,通过将储存在该储存媒体中的程序设置在计算机中,能得到与上述本发明(30)-(52)中任一个程序同样的作用。
(54)一种图像补正方法,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,包括以下步骤“八”字歪曲角度检测工序,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度;“八”字歪曲补正工序,根据上述“八”字歪曲角度检测工序检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。
因此,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度,根据上述“八”字歪曲角度检测装置检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。这样,即使对“八”字歪曲形状的扫描图像进行三次元形状歪曲补正也能防止发生伴随上述补正而引起的图像质量的劣化。
(55)在上述(54)的图像补正方法中,上述“八”字歪曲角度检测工序包括歪曲区域推断工序,从上述扫描图像的左右页分别检测上述线形状部分的直线部,检测上述直线部与弯曲部的分界处,推断歪曲区域;“八”字歪曲角度计算工序,分别计算上述扫描图像的左右各页的上述直线部与读取图像时的副扫描方向所成的角度。
因此,根据扫描图像的左右各页的线形状部分的直线部与读取图像时的副扫描方向所成的角度计算“八”字歪曲角度。这样,仅仅通过检测线形状部分的直线部,检测上述直线部与弯曲部的分界处,就能计算“八”字歪曲角度,能在短时间里检测“八”字歪曲角度。
(56)在上述(54)或(55)的图像补正方法中,上述“八”字歪曲补正工序包括三次元形状检测工序,检测上述书原稿的三次元形状;主扫描方向歪曲补正工序,根据上述三次元形状检测工序检测而得的书原稿的三次元形状,进行上述扫描图像的主扫描方向的伸长处理;图像回转工序,分割上述已由主扫描方向歪曲补正工序施以主扫描方向伸长处理的扫描图像的左右页,以所定位置为中心,分别回转由上述“八”字歪曲角度检测工序检测而得的各“八”字歪曲角度;副扫描方向歪曲补正工序,根据经上述图像回转工序回转的图像的三次元形状,在副扫描方向使图像伸长。
因此,能可靠地在对扫描图像的“八”字歪曲进行补正后,对扫描图像的副扫描方向的形状歪曲进行补正。
(57)一种图像补正方法,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,包括以下步骤双值化工序,对由上述图像读取手段读取的扫描图像进行双值化处理;文字外接矩形抽取工序,从上述经双值化工序双值化处理的已双值化的图像,切取文字,抽取各文字的外接矩形;文字行抽取工序,根据由上述文字外接矩形抽取工序抽取的文字外接矩形,抽取文字行;隆起量推断工序,根据由上述文字行抽取工序抽取的文字行形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正工序,根据由上述隆起量推断工序推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取文字行,根据文字行的形状变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
(58)一种图像补正方法,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,包括以下步骤双值化工序,对由上述图像读取手段读取的扫描图像进行双值化处理;格线抽取工序,从上述经双值化工序双值化处理的已双值化的图像,抽取格线;隆起量推断工序,根据由上述格线抽取工序抽取的格线形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正工序,根据由上述隆起量推断工序推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取格线,根据格线形状的变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
(59)一种图像读取装置,其特征在于,包括读取原稿图像的图像读取手段;对由上述图像读取手段读取的扫描图像进行补正的上述本发明的(1)-(29)中任一个所述的图像补正装置。
因此,能得到具有与上述本发明的(1)-(29)中任一个相同作用的图像读取装置。
(60)一种图像形成装置,其特征在于,包括读取原稿图像的图像读取手段;对由上述图像读取手段读取的扫描图像进行补正的上述本发明(1)-(29)中任一个所述的图像补正装置;根据从上述图像补正装置输出的图像数据将图像印刷在纸上的图像印刷装置。
因此,能得到具有与上述本发明的(1)-(29)中任一个相同作用的图像形成装置。
下面说明本发明的效果。
按照上述本发明(1)的图像补正装置,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,设有“八”字歪曲角度检测装置,利用位于上述扫描图像主扫描方向上边及下边附近的上述书原稿的页外形,检测上述扫描图像的“八”字歪曲角度;“八”字歪曲补正装置,根据上述“八”字歪曲角度检测装置检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。
通过利用位于上述扫描图像主扫描方向上边及下边附近的上述书原稿的页外形,检测上述扫描图像的“八”字歪曲角度,根据上述“八”字歪曲角度检测装置检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。这样,即使对“八”字歪曲形状的扫描图像进行三次元形状歪曲补正也能防止发生伴随上述补正而引起的图像质量的劣化。
按照上述本发明(2)的图像补正装置,在上述(1)的图像补正装置中,上述“八”字歪曲角度检测装置包括歪曲区域推断装置,从上述扫描图像的左右页分别检测上述页外形的直线部,检测上述直线部与弯曲部的分界处,推断歪曲区域;“八”字歪曲角度计算装置,分别计算上述扫描图像的左右各页的上述直线部与读取图像时的副扫描方向所成的角度。
根据扫描图像的左右各页的页外形的直线部与读取图像时的副扫描方向所成的角度计算“八”字歪曲角度。这样,仅仅通过检测页外形的直线部,检测上述直线部与弯曲部的分界处,就能计算“八”字歪曲角度,能在短时间里检测“八”字歪曲角度。
按照上述本发明(3)的图像补正装置,在上述(1)或(2)的图像补正装置中,上述“八”字歪曲补正装置包括三次元形状检测装置,检测上述书原稿的三次元形状;主扫描方向歪曲补正装置,根据上述三次元形状检测装置检测而得的书原稿的三次元形状,进行上述扫描图像的主扫描方向的伸长处理;图像回转装置,分割上述已由主扫描方向歪曲补正装置施以主扫描方向伸长处理的扫描图像的左右页,以所定位置为中心,分别回转由上述“八”字歪曲角度检测装置检测而得的各“八”字歪曲角度。
副扫描方向歪曲补正装置,根据经上述图像回转装置回转的图像的三次元形状,在副扫描方向使图像伸长。
因此,能可靠地在对扫描图像的“八”字歪曲进行补正后,对扫图像的副扫描方向的形状歪曲进行补正。
按照上述本发明(4)的图像补正装置,在上述(1)-(3)的任一个图像补正装置中,上述三次元形状检测装置包括隆起形状检测装置,将上述扫描图像的左右各页的直线部延长到装订部分界线,根据从上述延长直线到上述线形状部分的弯曲部的距离,检测上述扫描图像的从原稿玻璃台的隆起形状值;线性插值装置,在与上述装订部分界线平行的各直线上,分别选择两点,根据该两点的由上述隆起形状检测装置检测而得的上述扫描图像从原稿玻璃台的隆起形状值,进行各直线的线性插值处理。
因此,能可靠地检测书原稿的三次元形状。
按照上述本发明(5)的图像补正装置,在上述(4)的图像补正装置中,上述隆起形状检测装置推断上述书原稿隆起的歪曲区域与没有歪曲区域的分界处,将该分界处的隆起形状值设为0。因此,很容易检测扫描图像的从原稿玻璃台的隆起形状值。
按照上述本发明(6)的图像补正装置,在上述(1)-(5)的任一个图像补正装置中,上述“八”字歪曲补正装置包括像素线性插值装置,对于经上述图像回转装置回转后的上述扫描图像的各像素值,根据邻接四区域的各像素值,进行线性插值处理。因此,使得被分割的扫描图像的左右页回转,补正的图像像素的坐标不会成为小数。这样,能保持“八”字歪曲补正图像的图像质量。
按照上述本发明(7)的图像补正装置,在上述(3)的图像补正装置中,上述主扫描方向歪曲补正装置根据以上述图像读取手段的光轴为基准检测的各像素的伸长率,使图像在主扫描方向伸长。因此,能可靠地对从原稿玻璃台隆起的的书原稿的扫描图像的主扫描方向的图像歪曲进行补正。
按照上述本发明(8)的图像补正装置,在上述(1)-(7)的任一个图像补正装置中,设有对图像施以亮度补正处理的亮度补正装置。因此,对图像实行亮度补正,能防止在扫描图像上发生黑条纹或淡影。
按照上述本发明(9)的图像补正装置,在上述(1)-(8)的任一个图像补正装置中,设有对图像施以模糊补正处理的模糊补正装置。因此,对图像实行模糊补正,能使扫描图像清晰。
按照上述本发明(10)的图像补正装置,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,设有双值化装置,对由上述图像读取手段读取的扫描图像进行双值化处理;文字外接矩形抽取装置,从上述经双值化装置双值化处理的已双值化的图像,切取文字,抽取各文字的外接矩形;文字行抽取装置,根据由上述文字外接矩形抽取装置抽取的文字外接矩形,抽取文字行;隆起量推断装置,根据由上述文字行抽取装置抽取的文字行形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正装置,根据由上述隆起量推断装置推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取文字行,根据文字行的形状变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
按照上述本发明(11)的图像补正装置,在上述(10)的图像补正装置中,设有文书判别装置,对上述图像读取手段所读取图像的副扫描方向的双值化图像的黑像素数进行计数,根据上述计数,构成主扫描方向的直方图,根据该直方图的图形,判别上述原稿图像是横书文书还是纵书文书。因此,横书文书场合,出现山谷反复形状,纵书文书场合不出现这种形状,通过利用该形状能判别文书是横书文书还是纵书文书。
按照上述本发明(12)的图像补正装置,在上述(11)的图像补正装置中,得到上述双值化图像的黑像素数多的部分与少的部分交替出现的直方图场合,判别上述原稿图像是横书文书,除此以外场合,判别上述原稿图像是纵书文书。因此,能可靠地判别上述原稿图像是横书文书还是纵书文书。
按照上述本发明(13)的图像补正装置,在上述(11)或(12)的图像补正装置中,通过上述文书判别装置,判别上述原稿图像是横书文书场合,在上述隆起量推断装置,从由上述文字行抽取装置抽取的文字行中选择相对其中最长文字行具有所定比率以上长度的文字行,再从上述所选择的文字行中将弯曲量程度最大的文字行作为基准文字行,根据该基准文字行推断隆起量。因此,选择最适基准文字行,根据该基准文字行,能合适地推断原稿图像从原稿玻璃台的隆起量。
按照上述本发明(14)的图像补正装置,在上述(13)的图像补正装置中,上述弯曲量通过包含在上述文字行中的各文字外接矩形的中心坐标在读取图像的主扫描方向的位置坐标测定,中心坐标的最大值与最小值之间的差越大,看作弯曲量越大。因此,能可靠地将弯曲量最大的文字行设为基准文字行。
按照上述本发明(15)的图像补正装置,在上述(11)或(12)的图像补正装置中,通过上述文书判别装置,判别上述原稿图像是纵书文书场合,在上述隆起量推断装置,仅选择从由上述文字行抽取装置抽取的若干文字行的最前头行的文字外接矩形,或者末尾行的文字外接矩形构成基准文字行,根据该基准文字行推断隆起量。因此,选择最适基准文字行,根据该基准文字行,能合适地推断原稿图像从原稿玻璃台的隆起量。
按照上述本发明(16)的图像补正装置,在上述(13)-(15)任一个图像补正装置中,对包含在上述基准文字行中的上述各文字外接矩形的中心坐标施以Hough变换,推断上述基准文字行的直线部分。因此,即使是直线与曲线混杂场合,也能检测直线部分。
按照上述本发明(17)的图像补正装置,在上述(16)的图像补正装置中,通过最小二乘法用多项式近似上述基准文字行整体的形状。因此,能可靠地抽取曲线部分。
按照上述本发明(18)的图像补正装置,在上述(17)的图像补正装置中,测定上述基准文字行的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。因此,能测定直线往内侧的歪曲量,使三次元形状复原。
按照上述本发明(19)的图像补正装置,在上述(18)的图像补正装置中,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。因此,能推断合适的隆起量。
按照上述本发明(20)的图像补正装置,在上述(11)-(19)的任一个图像补正装置中,上述隆起量推断装置在上述原稿图像的左右页分别独立进行。因此,即使当打开的页接近书籍封面或封底时,书原稿的页装订部的左右隆起量不同场合,也能分别独立地推断隆起量,能得到更良好的补正结果。
按照上述本发明(21)的图像补正装置,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,设有双值化装置,对由上述图像读取手段读取的扫描图像进行双值化处理;格线抽取装置,从上述经双值化装置双值化处理的已双值化的图像,抽取格线;隆起量推断装置,根据由上述格线抽取装置抽取的格线形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正装置,根据由上述隆起量推断装置推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取格线,根据格线形状的变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
按照上述本发明(22)的图像补正装置,在上述(21)的图像补正装置中,上述格线抽取装置对上述双值化图像的黑像素数沿上述图像读取手段的读取图像的副扫描方向进行计数,根据该计数,构成主扫描方向的直方图,根据该直方图的图形抽取上述格线。因此,能抽取副扫描方向的格线。
按照上述本发明(23)的图像补正装置,在上述(22)的图像补正装置中,将直方图上出现细高峰值的部分判定为上述格线。因此,能可靠地抽取副扫描方向的格线。
按照上述本发明(24)的图像补正装置,在上述(22)或(23)的图像补正装置中,在上述隆起量推断装置,从由上述格线抽取装置抽取的格线中选择相对其中最长格线具有所定比率以上长度的格线,再从上述所选择的格线中将最接近图像上端或下端的格线作为基准格线,根据该基准格线推断隆起量。因此,能选择最适基准格线,根据该基准格线,合适地推断原稿图像从原稿玻璃台的隆起量。
按照上述本发明(25)的图像补正装置,在上述(24)的图像补正装置中,对包含在上述基准格线中的各像素坐标施以Hough变换,推断上述基准格线的直线部分。因此,即使是直线与曲线混杂场合,也能检测直线部分。
按照上述本发明(26)的图像补正装置,在上述(25)的图像补正装置中,通过最小二乘法用多项式近似上述基准格线的形状。因此,能可靠地抽取曲线部分。
按照上述本发明(27)的图像补正装置,在上述(26)的图像补正装置中,测定上述基准格线的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。因此,能测定直线往内侧的歪曲量,使得三次元形状复原。
按照上述本发明(28)的图像补正装置,在上述(27)的图像补正装置中,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。因此,能推断合适的隆起量。
按照上述本发明(29)的图像补正装置,在上述(22)-(28)的任一个图像补正装置中,上述隆起量推断装置在上述原稿图像的左右页分别独立进行。因此,即使当打开的页接近书籍封面或封底时,书原稿的页装订部的左右隆起量不同场合,也能分别独立地推断隆起量,能得到更良好的补正结果。
按照上述本发明(30)的程序,由计算机实行,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,使计算机实行以下功能“八”字歪曲角度检测功能,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度;“八”字歪曲补正功能,根据上述“八”字歪曲角度检测功能检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。
因此,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度,根据上述“八”字歪曲角度检测装置检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。这样,即使对“八”字歪曲形状的扫描图像进行三次元形状歪曲补正也能防止发生伴随上述补正而引起的图像质量的劣化。
按照上述本发明(31)的程序,在上述(30)的程序中,上述“八”字歪曲角度检测功能使计算机实行下列功能歪曲区域推断功能,从上述扫描图像的左右页分别检测上述线形状部分的直线部,检测上述直线部与弯曲部的分界处,推断歪曲区域;“八”字歪曲角度计算功能,分别计算上述扫描图像的左右各页的上述直线部与读取图像时的副扫描方向所成的角度。
因此,根据扫描图像的左右各页的线形状部分的直线部与读取图像时的副扫描方向所成的角度计算“八”字歪曲角度。这样,仅仅通过检测线形状部分的直线部,检测上述直线部与弯曲部的分界处,就能计算“八”字歪曲角度,能在短时间里检测“八”字歪曲角度。
按照上述本发明(32)的程序,在上述(30)或(31)的程序中,上述“八”字歪曲补正功能使计算机实行下列功能三次元形状检测功能,检测上述书原稿的三次元形状;主扫描方向歪曲补正功能,根据上述三次元形状检测功能检测而得的书原稿的三次元形状,进行上述扫描图像的主扫描方向的伸长处理;图像回转功能,分割上述已由主扫描方向歪曲补正功能施以主扫描方向伸长处理的扫描图像的左右页,以所定位置为中心,分别回转由上述“八”字歪曲角度检测功能检测而得的各“八”字歪曲角度。
副扫描方向歪曲补正功能,根据经上述图像回转功能回转的图像的三次元形状,在副扫描方向使图像伸长。
因此,能可靠地对扫描图像的“八”字歪曲进行补正后,对扫描图像的副扫描方向的形状歪曲进行补正。
按照上述本发明(33)的程序,由计算机实行,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,使得计算机实行以下功能双值化功能,对由上述图像读取手段读取的扫描图像进行双值化处理;文字外接矩形抽取功能,从上述经双值化功能双值化处理的已双值化的图像,切取文字,抽取各文字的外接矩形;文字行抽取功能,根据由上述文字外接矩形抽取功能抽取的文字外接矩形,抽取文字行;隆起量推断功能,根据由上述文字行抽取功能抽取的文字行形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正功能,根据由上述隆起量推断功能推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取文字行,根据文字行的形状变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
按照上述本发明(34)的程序,在上述(33)的程序中,使得计算机实行文书判别功能,对上述图像读取手段所读取图像的副扫描方向的双值化图像的黑像素数进行计数,根据上述计数,构成主扫描方向的直方图,根据该直方图的图形,判别上述原稿图像是横书文书还是纵书文书。因此,横书文书场合,出现山谷反复形状,纵书文书场合不出现这种形状,通过利用该形状能判别文书是横书文书还是纵书文书。
按照上述本发明(35)的程序,在上述(34)的程序中,得到上述双值化图像的黑像素数多的部分与少的部分交替出现的直方图场合,判别上述原稿图像是横书文书,除此以外场合,判别上述原稿图像是纵书文书。因此,能可靠地判别原稿图像是横书文书还是纵书文书。
按照上述本发明(36)的程序,在上述(34)或(35)的程序中,通过上述文书判别功能,判别上述原稿图像是横书文书场合,在上述隆起量推断功能,从由上述文字行抽取功能抽取的文字行中选择相对其中最长文字行具有所定比率以上长度的文字行,再从上述所选择的文字行中将弯曲量程度最大的文字行作为基准文字行,根据该基准文字行推断隆起量。因此,能选择最适基准文字行,根据该基准文字行,合适地推断原稿图像从原稿玻璃台的隆起量。
按照上述本发明(37)的程序,在上述(36)的程序中,上述弯曲量通过包含在上述文字行中的各文字外接矩形的中心坐标在读取图像的主扫描方向的位置坐标测定,中心坐标的最大值与最小值之间的差越大,看作弯曲量越大。因此,能可靠地将弯曲量最大的文字行作为基准文字行。
按照上述本发明(38)的程序,在上述(34)或(35)的程序中,通过上述文书判别功能,判别上述原稿图像是纵书文书场合,在上述隆起量推断功能,仅选择从由上述文字行抽取功能抽取的若干文字行的最前头行的文字外接矩形,或者末尾行的文字外接矩形构成基准文字行,根据该基准文字行推断隆起量。因此,能选择最适基准文字行,根据该基准文字行,合适地推断原稿图像从原稿玻璃台的隆起量。
按照上述本发明(39)的程序,在上述(36)-(38)的任一个程序中,对包含在上述基准文字行中的上述各文字外接矩形的中心坐标施以Hough变换,推断上述基准文字行的直线部分。因此,即使直线与曲线混杂场合也能检测直线部分。
按照上述本发明(40)的程序,在上述(39)的程序中,通过最小二乘法用多项式近似上述基准文字行整体的形状。因此,能可靠地抽取曲线部分。
按照上述本发明(41)的程序,在上述(40)的程序中,测定上述基准文字行的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。因此,测定直线往内侧的歪曲量,使得三次元形状复原。
按照上述本发明(42)的程序,在上述(41)的程序中,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。因此,能推断合适的隆起量。
按照上述本发明(43)的程序,在上述(34)-(42)的任一个程序中,上述隆起量推断功能在上述原稿图像的左右页分别独立进行。因此,即使当打开的页接近书籍封面或封底时,书原稿的页装订部的左右隆起量不同场合,也能分别独立地推断隆起量,能得到更良好的补正结果。
按照上述本发明(44)的程序,由计算机实行,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,使得计算机实行以下功能双值化功能,对由上述图像读取手段读取的扫描图像进行双值化处理;格线抽取功能,从上述经双值化功能双值化处理的已双值化的图像,抽取格线;隆起量推断功能,根据由上述格线抽取功能抽取的格线形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正功能,根据由上述隆起量推断功能推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取格线,根据格线形状的变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
按照上述本发明(45)的程序,在上述(44)的程序中,上述格线抽取功能对上述双值化图像的黑像素数沿上述图像读取手段的读取图像的副扫描方向进行计数,根据该计数,构成主扫描方向的直方图,根据该直方图的图形抽取上述格线。因此,能抽取副扫描方向的格线。
按照上述本发明(46)的程序,在上述(45)的程序中,将直方图上出现细高峰值的部分判定为上述格线。因此,能可靠地抽取副扫描方向的格线。
按照上述本发明(47)的程序,在上述(45)或(46)的程序中,在上述隆起量推断功能,从由上述格线抽取功能抽取的格线中选择相对其中最长格线具有所定比率以上长度的格线,再从上述所选择的格线中将最接近图像上端或下端的格线作为基准格线,根据该基准格线推断隆起量。因此,能选择最适基准格线,根据该基准格线,合适地推断原稿图像从原稿玻璃台的隆起量。
按照上述本发明(48)的程序,在上述(47)的程序中,对包含在上述基准格线中的各像素坐标施以Hough变换,推断上述基准格线的直线部分。因此,即使直线与曲线混杂场合也能检测直线部分。
按照上述本发明(49)的程序,在上述(48)的程序中,通过最小二乘法用多项式近似上述基准格线的形状。因此,能可靠地抽取曲线部分。
按照上述本发明(50)的程序,在上述(49)的程序中,测定上述基准格线的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。因此,能测定直线往内侧的歪曲量,使得三次元形状复原。
按照上述本发明(51)的程序,在上述(50)的程序中,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。因此,能推定合适的隆起量。
按照上述本发明(52)的程序,在上述(45)-(51)的任一个程序中,上述隆起量推断功能在上述原稿图像的左右页分别独立进行。因此,即使当打开的页接近书籍封面或封底时,书原稿的页装订部的左右隆起量不同场合,也能分别独立地推断隆起量,能得到更良好的补正结果。
按照上述本发明(53)的储存媒体,可由计算机读取,其特征在于,储存上述本发明(30)-(52)中任一个所述的程序。因此,通过将储存在该储存媒体中的程序设置在计算机中,能得到与上述本发明(30)-(52)中任一个程序同样的作用。
按照上述本发明(54)的图像补正方法,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,包括以下步骤“八”字歪曲角度检测工序,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度;“八”字歪曲补正工序,根据上述“八”字歪曲角度检测工序检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。
因此,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度,根据上述“八”字歪曲角度检测装置检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。这样,即使对“八”字歪曲形状的扫描图像进行三次元形状歪曲补正也能防止发生伴随上述补正而引起的图像质量的劣化。
按照上述本发明(55)的图像补正方法,在上述(54)的图像补正方法中,上述“八”字歪曲角度检测工序包括歪曲区域推断工序,从上述扫描图像的左右页分别检测上述线形状部分的直线部,检测上述直线部与弯曲部的分界处,推断歪曲区域;“八”字歪曲角度计算工序,分别计算上述扫描图像的左右各页的上述直线部与读取图像时的副扫描方向所成的角度。
因此,根据扫描图像的左右各页的线形状部分的直线部与读取图像时的副扫描方向所成的角度计算“八”字歪曲角度。这样,仅仅通过检测线形状部分的直线部,检测上述直线部与弯曲部的分界处,就能计算“八”字歪曲角度,能在短时间里检测“八”字歪曲角度。
按照上述本发明(56)的图像补正方法,在上述(54)或(55)的图像补正方法中,上述“八”字歪曲补正工序包括三次元形状检测工序,检测上述书原稿的三次元形状;主扫描方向歪曲补正工序,根据上述三次元形状检测工序检测而得的书原稿的三次元形状,进行上述扫描图像的主扫描方向的伸长处理;图像回转工序,分割上述已由主扫描方向歪曲补正工序施以主扫描方向伸长处理的扫描图像的左右页,以所定位置为中心,分别回转由上述“八”字歪曲角度检测工序检测而得的各“八”字歪曲角度。
副扫描方向歪曲补正工序,根据经上述图像回转工序回转的图像的三次元形状,在副扫描方向使图像伸长。
因此,能可靠地在对扫描图像的“八”字歪曲进行补正后,对扫描图像的副扫描方向的形状歪曲进行补正。
按照上述本发明(57)的图像补正方法,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,包括以下步骤双值化工序,对由上述图像读取手段读取的扫描图像进行双值化处理;
文字外接矩形抽取工序,从上述经双值化工序双值化处理的已双值化的图像,切取文字,抽取各文字的外接矩形;文字行抽取工序,根据由上述文字外接矩形抽取工序抽取的文字外接矩形,抽取文字行;隆起量推断工序,根据由上述文字行抽取工序抽取的文字行形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正工序,根据由上述隆起量推断工序推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取文字行,根据文字行的形状变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
按照上述本发明(58)的图像补正方法,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,包括以下步骤双值化工序,对由上述图像读取手段读取的扫描图像进行双值化处理;格线抽取工序,从上述经双值化工序双值化处理的已双值化的图像,抽取格线;隆起量推断工序,根据由上述格线抽取工序抽取的格线形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正工序,根据由上述隆起量推断工序推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
因此,例如读取书原稿作为原稿场合,对所读取的扫描图像进行双值化处理,抽取格线,根据格线形状的变化,推断书原稿的三次元形状(从原稿玻璃台的隆起量),根据从原稿玻璃台的隆起量对扫描图像的歪曲进行补正。这样,即使是书原稿的页外形在中途断开的所读取的图像,也能通过少的计算量有效地对其歪曲进行补正。
按照上述本发明(59)的图像读取装置,其特征在于,包括读取原稿图像的图像读取手段;对由上述图像读取手段读取的扫描图像进行补正的上述本发明的(1)-(29)中任一个所述的图像补正装置。
因此,能得到具有与上述本发明的(1)-(29)中任一个相同作用的图像读取装置。
按照上述本发明(60)的图像形成装置,其特征在于,包括读取原稿图像的图像读取手段;对由上述图像读取手段读取的扫描图像进行补正的上述本发明(1)-(29)中任一个所述的图像补正装置;根据从上述图像补正装置输出的图像数据将图像印刷在纸上的图像印刷装置。
因此,能得到具有与上述本发明的(1)-(29)中任一个相同作用的图像形成装置。
图1是本发明第一实施例的扫描部构成的纵截正面图;图2是搭载扫描部的数字式复印机的上部部分斜视图;图3是扫描部的控制系统的电气连接方框图;图4是图像处理部的基本内部构成的方框图;图5是主控制部的电气连接方框图;图6是概略表示扫描图像的补正处理的流程图;图7是书原稿载置在扫描部的原稿玻璃台上状态的斜视图;图8是表示输入图像一例的平面图;图9是扫描图像的页装订部附近的说明图;图10是上端存在页外形的扫描图像一例的说明图;图11是图10所示扫描图像的装订部分界线左侧的黑像素直方图(histogram);图12是检测扫描图像的“八”字歪曲角度的说明图;
图13是表示扫描图像的“八”字歪曲角度检测处理的流程图;图14是表示扫描图像的图像歪曲补正处理的流程图;图15是将扫描图像的左右页的页外形的直线部延伸到装订部分界线状态的说明图;图16是线JO,OM上的书籍表面形状的说明图;图17是线KO’,O’N上的书籍表面形状的说明图;图18是与装订部分界线平行的线EE’的形状截面的说明图;图19是与装订部分界线平行的线GH’的形状截面的说明图;图20是主扫描方向的变倍处理手法说明图;图21是扫描透镜的成像关系说明图;图22是像素值的线性插值处理的说明图;图23是对图20的图像分别对左右页进行“八”字歪曲补正后的扫描图像说明图;图24A-C是副扫描方向的伸长处理手法说明图;图25是表示已补正歪曲的图像的平面图;图26是使得书原稿接触原稿玻璃台状态的正面图;图27A-B是概略表示本发明第二实施例的扫描图像的图像补正处理的流程图;图28是图像的黑像素直方图一例;图29是被双值化的扫描图像的文字外接矩形抽取处理及文字行抽取处理结果一例的说明图;图30是表示Hough变换原理的说明图;图31是通过Hough变换抽取图29的直线结果的说明图;图32是通过最小二乘法抽取图29的曲线部分结果的说明图;图33是表示基准文字行的直线部分与基准文字行的曲线部分的距离的说明图;图34是表示书的表面隆起部分的高度;图35是表示图像缩小量的说明图;图36是扫描透镜的成像关系说明图;
图37是文字纵写场合的基准文字行的说明图;图38是表示横方向线的说明图;图39是使得书原稿载置在原稿玻璃台上状态的正面图;图40是发生”八”字歪曲的扫描图像说明图。
具体实施例方式
下面参照附图,详细说明本发明实施例。
先参照图1-图26说明本发明的第一实施例。本实施例的图像补正装置设在作为图像形成装置的数字式复印机中,数字式复印机的扫描部作为图像读取装置。
在此,图1是本发明第一实施例的扫描部1构成的纵截正面图。如图1所示,扫描部1包括载置原稿的原稿玻璃台2,由原稿曝光用曝光灯3及第一反射镜4构成的第一移动体5,由第二反射镜6及第三反射镜7构成的第二移动体8,作为读取原稿图像的摄像元件的CCD(ChargeCoupled Device)9,用于成像在该CCD9上的透镜组件10,成为载置原稿的基准、同时防止原稿玻璃台2偏移或脱落的原稿标度尺11,设置在该原稿标度尺11下侧的明暗度补正用的白基准板12,以及框架14。CCD9形成在传感器板13上。
扫描原稿时,第一移动体5及第二移动体8由步进马达24(参照图3)驱动沿副扫描方向移动。即,第一移动体5及第二移动体8在原稿玻璃台2下移动,用曝光灯3对原稿进行曝光扫描,其反射光经第一反射镜4、第二反射镜6及第三反射镜7反射,通过透镜组件10,成像在CCD9上。在此,实现图像读取装置。
将这种扫描部1搭载在数字式复印机16中,该数字式复印机16设有作为图像印刷装置的打印部(没有图示),根据上述扫描部1读取的原稿图像的图像数据,通过例如电子照相方式在纸上形成图像。图2是搭载扫描部1的数字式复印机16的上部部分斜视图。如图2所示,在扫描部1设有相对原稿玻璃台2开闭自如的压板17,以及用于检测该压板17开闭的开闭传感器18。上述设在数字式复印机16上的打印部除了上述电子照相方式之外,还可以采用喷墨方式,升华型热转印方式,银盐照相方式,直接感热记录方式,熔融型热转印方式等各种印刷方式。其具体构成为人们所公知,详细说明省略。
图3是扫描部1的控制系统的电气连接方框图。如图3所示,在该控制系统中,图像处理部20、移动体控制部21、操作面板22及储存器23与控制扫描部1整体的主控制部19相连接。上述图像处理部20是对CCD9所读取的图像数据施以各种图像处理的电路,上述移动体控制部21是控制第一移动体5及第二移动体8的电路,上述操作面板22接受向数字式复印机16的各种操作,且表示各种信息,上述储存器23储存CCD9所读取的图像数据以及所定数据等。在操作面板22上设有用于宣布复印开始的复印开始键。在移动体控制部21上连接着曝光灯3,用于驱动第一移动体5及第二移动体8的步进马达24,用于检测第一移动体5及第二移动体8是否位于原位的扫描原位传感器(HP传感器)25,以及开闭传感器18。
图4是图像处理部20的基本内部构成的方框图。如图4所示,图像处理部20由模拟视频信号处理部26、明暗补正处理部27、图像数据处理部28及图像补正部29构成。上述模拟视频信号处理部26进行由CCD9读取原稿而得的模拟图像信号的增益处理及数字化变换处理等;上述明暗补正处理部27进行明暗补正处理;上述图像数据处理部28对经明暗补正处理后的数字图像信号进行MTF补正、变倍处理、γ补正等各种图像数据处理,生成扫描图像;上述图像补正部29实现作为本实施例特长功能的扫描图像的图像补正功能。经上述图像处理后的数字图像信号通过主控制部19送向打印部,以便形成图像。
图5是主控制部19的电气连接方框图。如图5所示,主控制部19设有集中控制各部的CPU(Central Processing Unit)31,在该CPU31上通过母线连接着ROM(Read Only Memory)32以及RAM(Random AccessMemory)33,上述ROM32是储存BIOS等的读取专用储存器,上述RAM可重写地储存各种数据,起着作为CPU31的作业区功能,这样构成微型计算机。在母线34上连接着存储控制程序的HDD35,用于读取CD(CompactDisc)-ROM37的CD-ROM驱动器36,以及用于与打印部等通信的接口(I/F)38。
图5所示的CD-ROM37是用于实施本发明的储存媒体,存储所定的控制程序。在CD-ROM驱动器36读取储存在CD-ROM37中的控制程序,设置在HDD35上。这样,主控制部19成为能进行后述各种处理的状态。
作为上述储存媒体,不仅可以使用上述CD-ROM37,还可以使用DVD等各种光盘、各种光磁盘、软盘等各种磁盘,半导体储存器等,各种方式的媒体介质。也可以从因特网等网络下载程序,设置到HDD35中。这种场合,在送信侧的服务器,储存程序的储存装置也是本发明储存媒体。程序既可以是在所定OS(Operating System)上动作的程序,也可以是代替OS实行后述各种处理一部分的程序。另外,也可以包含在构成文字处理软件等所定应用软件或OS等的一组程序文件中作为其一部分。
下面,说明设在主控制部19的CPU31根据控制程序实行各种处理的内容。在此,在CPU31实行的处理中,仅说明作为图像补正装置的图像补正部29的扫描图像的图像补正处理,上述图像补正装置实现作为本实施例的扫描部1具有的特长功能的扫描图像的图像补正功能。
图6是概略表示扫描图像的补正处理的流程图,图7是书原稿载置在扫描部的原稿玻璃台上状态的斜视图,图8是表示输入图像一例的平面图,图9是扫描图像的页装订部附近的说明图。
在此,如图7所示,对书原稿40朝下载置在原稿玻璃台上,使得书原稿40的页装订部41与扫描部1的图像读取的主扫描方向大致平行状态场合进行说明。
在步骤S1,输入从图像数据处理部输出的载置在原稿玻璃台2上的书原稿40的扫描图像。在此,图8表示该输入图像一例。并且,如图9所示,所输入的书原稿40的扫描图像上,在页装订部41的扫描图像41’附近发生歪曲。
接着,进入步骤S2,实行图像补正处理。
在图像补正处理中,先从扫描图像抽取线状部分的页外形(步骤S2-1)。图10是上端存在页外形的扫描图像一例的说明图,图11是图10所示扫描图像的装订部分界线左侧的黑像素直方图。图11所示直方图的x轴表示扫描图像的主扫描方向(图10的上下方向),扫描图像的上端与直方图的左端相对应。页外形存在下端的扫描图像场合,扫描图像下端与直方图的右端相对应。因此,如图10所示,在扫描图像上端存在页外形场合,在扫描图像上部出现黑带,所以,在图11所示的直方图的左端出现高纵向柱。在本实施例中,利用这种特性,判断在扫描图像上是否存在页外形。
更具体地说,如图11所示,从页装订部41的扫描图像41’到扫描图像左端(图10左端)的距离设为AO,直方图纵向柱高度设为BO,其比率k用下式计算k=BO/AO所得比率k比预先设定的阈值大场合,判断为在扫描图像上存在页外形。
在扫描图像上下存在页外形场合,在直方图的左右两端出现高纵向柱,因此,这种场合,根据在直方图的左右两端的高纵向柱,分别判断在扫描图像上是否存在页外形。
在该扫描图像上判断是否存在页外形的处理,每当以扫描图像的装订部分界线为界的左右页场合实行。
通过上述处理,判断在扫描图像上存在页外形场合,抽取在左右页的上下边中某个存在页外形的信息以及页外形,暂时存储在RAM33中。
关于从扫描图像抽取页外形的方法,并不局限于此,也可以使用特开平11-41455号公报中记载的方法等。
另外,预先知道在扫描图像上存在页外形的场合,可以省去判断是否存在页外形的步骤,仅仅抽取页外形。
若从扫描图像抽取页外形,则进入步骤S2-2,检测扫描图像的“八”字歪曲角度(“八”字歪曲角度检测装置)。更具体地说,如图12所示,根据扫描图像的上边的页外形,检测“八”字歪曲角度α,β。
在此,参照图13说明扫描图像的“八”字歪曲角度检测处理的流程。作为扫描图像的“八”字歪曲角度检测处理,先推断在步骤S2-1抽取而得的页外形的直线部(步骤S11)。
接着,检测在上述步骤S11所推定的页外形的直线部与页外形弯曲部的分界处,推定扫描图像的歪曲区域(步骤S12)。即通过步骤S11和S12实行歪曲区域推定手段的功能。图12中,A,B,C,D是页外形的直线部与页外形弯曲部的分界处,由上述A,B,C,D所围区域是歪曲区域。关于页外形的直线部与页外形弯曲部的分界处的判定处理可以使用各种处理方法。例如可以使用专利文献2中记载的方法。概括地说,根据抽取的页外形求取近似直线,将离开该直线成为曲线的部分判定为页外形的直线部与页外形弯曲部的分界处。
在接下来的步骤S13中,计算扫描图像的左右页的页外形的直线部(在图12中,线BK及DN)与图像水平方向(副扫描方向)的水平线所成的角度(“八”字歪曲角度)α,β。关于线斜率的计算有各种公知方法,例如,根据点K及点B的主扫描方向和副扫描方向的各座标值差计算“八”字歪曲角度α,根据点N及点D的主扫描方向和副扫描方向的各座标值差计算“八”字歪曲角度β。在此,实行“八”字歪曲角度计算手段的功能。
通过上述步骤,实行“八”字歪曲角度检测手段的功能,结束步骤S2-2的扫描图像的“八”字歪曲角度检测处理。
若步骤S2-2的扫描图像的“八”字歪曲角度检测处理结束,则进入步骤S2-3,实行扫描图像的图像歪曲补正处理。图14表示扫描图像的图像歪曲补正处理的流程,如图14所示,作为扫描图像的图像歪曲补正处理,先将扫描图像的左右页的页外形的直线部(图12中线BK,线DN,线AJ,线CM)延长到装订部分界线(图12中用O-O’表示的线)(步骤S21)。在图15中,表示将扫描图像的左右页的页外形的直线部(线BK,线DN,线AJ,线CM)延长到装订部分界线(用O-O’表示的线)的状态。
接着,在延长后的各直线部(线KO’,线O’N,线JO,线OM)上的所定位置,在与装订部分界线平行状态下,求取从该所定位置到扫描图像的页外形的弯曲部的距离(步骤S22)。如图15所示,例如,从线JO上的所定位置G引与装订部分界线平行的直线GH,从直线GH求取到页外形的弯曲部的距离GG’。
此后,进入步骤S23,根据从各直线部(线KO’,线O’N,线JO,线OM)上所定位置到页外形的弯曲部的距离,求取各直线上z方向(图15中与纸面垂直的方向)的书籍表面形状。即,通过步骤S21-23,实行隆起形状检测手段的功能。作为求取书籍表面形状的方法,可以使用在专利文献2中记载的方法等,由于是公知方法,说明省略。图16表示线JO,OM上的书籍表面形状,图17表示线KO’,O’N上的书籍表面形状。
下面,求取线AO,OC,BO’,O’D上的歪曲区域内的书籍表面三次元形状(步骤S24线性内插手段)线AB与线CD是书籍表面隆起部分与没有隆起部分的分界线,线AB与线CD的三次元形状的高度为0。即通过求解线AO,OC,BO’,O’D上的书籍表面形状以及线AB,CD上的书籍表面形状,使用这些形状数据,能求得线AO,OC,BO’,O’D上的歪曲区域内的书籍表面三次元形状。
在此,详细说明步骤S24中的求取线AO,OC,BO’,O’D上的歪曲区域内的书籍表面三次元形状的求法。图18表示与装订部分界线(用O-O’表示的线)平行的线EE’的形状截面,线EE’与线AB的交点设为F(参照图15)。如上所述,在点E与点F的形状已知,位于点E与点F之间的三次元形状可以通过在点E与点F的形状值的线性插值求得。即,通过下面式(1),可以计算位于EF间的点X的三次元形状。z(X)=z(E)y(E)-y(F)(y(X)-y(E))+z(E)----(1)]]>同样,图19表示与装订部分界线(用O-O’表示的线)平行的线GH’的形状截面,线GH与线KO’的交点设为H(参照图15)。如上所述,在点G与点H的形状已知,位于点G与点H之间的三次元形状可以通过在点G与点H的形状值的线性插值求得。即,通过下面式(2),可以计算位于GH间的点X的三次元形状。z(X)=z(G)-z(H)y(G)-y(H)(y(X)-y(G))+z(G)----(2)]]>如上所述,通过一列列地求取与装订部分界线平行的直线上的形状,能求得线AO,OC,BO’,O’D上的歪曲区域内的书籍表面三次元形状。在此,实行三次元形状检测手段的功能。
此后,进入步骤S25,进行主扫描方向的变倍处理。主扫描方向的变倍处理如图20所示,在主扫描方向进行变倍处理,以光轴为基准,使得图像在页外形的各直线部(线KO’,线O’N,线JO,线OM)上齐全。在此,实行主扫描方向歪曲补正手段的功能。
具体说明主扫描方向的变倍处理。图21表示扫描透镜的成像关系。OO’是透镜光轴,O是透镜中心。F是从透镜中心O到扫描器表面(原稿玻璃台2)的距离,将其称为扫描器的焦点距离。扫描器表面上的点B在成像面上成像在D点。隆起的本子(书原稿40)的表面上点C成像在E2。它们与成像面中心O的距离分别为E0和E2(由于第一移动体5及第二移动体8沿副扫描方向移动,中心O也移动,其轨迹称为成像中心线)。根据三角形相似关系,能得到下面关系式(3)和(4)。透镜的焦距F是由扫描部1决定的已知量,使用扫描部1的设定值或透镜的校正值d/F=AB/AO’ (3)AB/AO’=(E0-E2)/E2(4)并且,若在步骤S24所求得的作为线AO,线OC,线BO’,线O’D上的歪曲区域内的书籍表面三次元形状的书原稿40的隆起量设为d,则通过上述关系式(3)和(4),变倍率m可通过下面关系式(5)求得m=E0/E2=(d/F)+1(5)即,根据在线AO,线OC,线BO’,线O’D上的歪曲区域内的各像素位置E0的变倍率m,通过下面关系式(6)计算E2的位置E2=E0/m=E0/((d/F)+1)(6)并且,将在E2的像素值拿到E0,在主扫描方向图像伸长。这时,E2的位置有时成为小数,因此,也进行像素的线性插值处理。
在主扫描方向变倍处理一结束,就进入步骤S26,根据在步骤S13计算而得的“八”字歪曲角度α,β,进行扫描图像的“八”字歪曲补正(步骤S26“八”字歪曲补正手段)。扫描图像的“八”字歪曲补正概略地说,在装订部分界线(图20中,用O-O’表示的线)分割扫描图像的左右页,以所定位置(例如,扫描图像的装订部分界线的下端O’)为中心,使得扫描图像的左右页分别回转“八”字歪曲角度α,β。扫描图像的“八”字歪曲补正对于在步骤S24求得的线AO,线OC,线BO’,线O’D上的歪曲区域内的书籍表面三次元形状也用装订部分界线(图20中,用O-0’表示的线)分割,使得扫描图像的左右页分别回转“八”字歪曲角度α,β。在此,实行图像回转手段的功能。
但是,使得扫描图像的左右页回转对“八”字歪曲进行补正时,若仅仅使得扫描图像的左右页回转,则补正图像的像素坐标有时会成为小数,降低“八”字歪曲补正图像的图像质量。于是,在本实施例中,为了解消这个问题,进行像素的线性插值处理。在此,实行像素线性插值手段的功能。
图22是像素值的线性插值处理的说明图。在图22所示坐标(x,y)的像素值f(x,y)是作为其周边方框[i,j],[i+1,j],[i,j+1],[i+1,j+1]的经平滑化处理后的像素值f(i,j),f(i+1,j),f(i,j+1),f(i+1,j+1)的线性插值计算而得的。更具体地说,坐标(x,y)的经线性插值处理后的像素值f(x,y)是通过下面关系式(7)计算的f(x,y)=[f(i,j)*(1-dx)+f(i+1,j)*dx]*(1-dy)+[f(i,j+1)*(1-dx)+f(i+1,j+1)*dx]*dy (7)通过以上处理,根据在步骤S13计算而得的“八”字歪曲角度α,β对扫描图像进行“八”字歪曲补正结束。图23表示对图20的图像分别对左右页进行“八”字歪曲补正后的扫描图像。
若结束对扫描图像的“八”字歪曲补正,则进入步骤S27,进行副扫描方向的伸长处理。在此,实行副扫描方向歪曲补正手段的功能。
具体说明副扫描方向的伸长处理。副扫描方向的伸长处理是对每一行在副扫描方向伸长回转后的图像,可以使用各种处理方法。例如,可以使用在专利文献2中记载的副扫描方向复原处理方法。图24B表示图24A表示的截面TU的伸长处理。如图24B所示,书籍表面V-V1-V2经伸长处理成为V-V1’-V2’,书籍表面W-W1-W2经伸长处理成为W-W1’-W2’。同样,图24C表示图24A表示的截面PQ的伸长处理。如图24C所示,书籍表面R-R1-R2经伸长处理成为R-R1’-R2’,书籍表面S-S1-S2经伸长处理成为S-S1’-S2’。通过以上处理,实行“八”字歪曲补正手段的功能。
接着,在步骤S28中,实行亮度补正处理。在此,实行亮度补正手段的功能。关于亮度补正处理,可以使用各种处理方法。例如,可以使用在特开平11-155070号公报中记载的浓度复原处理方法。
在步骤S29中,实行文字模糊补正处理。在此,实行模糊补正手段的功能。关于文字模糊补正处理,可以使用各种处理方法。例如,可以使用在专利文献2中记载的文字模糊补正处理方法。
通过以上步骤,结束步骤S2的图像补正处理。在此,图25是表示已补正歪曲的图像的平面图。如图25所示,通过以上处理,如图8所示那样的书原稿40的页装订部41的扫描图像41’附近发生的图像歪曲及扫描图像的“八”字歪曲已得到补正。
在此,使用位于扫描图像的主扫描方向上边及下边附近的书原稿40的页外形,检测扫描图像的“八”字歪曲角度α,β,根据该“八”字歪曲角度α,β,对扫描图像的“八”字歪曲进行补正,在上述补正后,对扫描图像的副扫描方向的形状歪曲进行补正。这样,即使对“八”字那样的歪曲形状的扫描图像实行三次元形状歪曲补正,也能防止伴随歪曲补正而发生的图像质量的劣化。
在本实施例中,书原稿40图像面朝下载置于原稿玻璃台上场合,以使书原稿40的页装订部41与扫描部1的图像读取的主扫描方向成为平行,对这种场合进行了说明,但并不局限于此,例如,如图26所示,也可以将书原稿40图像面朝上,从原稿玻璃台2下方相对原稿玻璃台2推压上述书原稿40,使该书原稿40接触原稿玻璃台2。
在本实施例中,将数字式复印机的扫描部1作为图像读取装置,但并不局限于此,也可以使用例如具有自动卷页功能的扫描器等。
在本实施例中,将图像补正装置设于作为图像形成装置的数字式复印机16中,对由数字式复印机16的扫描部1读取的扫描图像施以图像补正处理,但并不局限于此。也可以是例如将设有用于读取原稿图像的图像读取装置的图像扫描器与设有与图5所示主控制部19相同的系统结构的个人计算机相连接,同时,将存储在储存媒体CD-ROM37中的程序设置到上述个人计算机的HDD上,根据该程序使个人计算机的CPU动作,构成图像补正装置,这样,也能得到上述各种同样的作用效果。也可以将存储在储存媒体CD-ROM37中的程序设置到具有与图5所示主控制部19相同的系统结构的个人计算机的HDD上,根据该程序使个人计算机的CPU动作,构成图像补正装置,对预先由图像读取装置读取的扫描图像施以图像补正处理。
下面,参照图27-图38说明本发明第二实施例。与上述第一实施例相同部分标以相同符号,说明省略。本第二实施例与第一实施例相比,扫描图像的图像补正处理不同。概略地说,在第一实施例中,使用页外形作为线形状部分,对扫描图像的“八”字歪曲进行补正,但是,在第二实施例中,对该“八”字歪曲进行补正时,使用文字行或格线(rule)作为线形状部分。
图27是概略表示本发明第二实施例的扫描图像的图像补正处理的流程图。
在步骤S51,输入从图像数据处理部28输出的载置在原稿玻璃台2上的书原稿40的扫描图像,实行书原稿40的扫描图像的最适双值化处理(步骤S52),求取副扫描方向的黑像素数的直方图(步骤S53)。图28表示图像的黑像素直方图一例。
接着,在步骤S54中,等待指定,是利用文字信息进行图像补正处理还是利用格线信息进行图像补正处理。通过操作面板22等宣告利用文字信息进行图像补正处理场合(步骤S54的“否”),进入步骤S55,判别文字是横书还是纵书。文字是横书还是纵书的判别根据在步骤S53求得的横向(副扫描方向)的黑像素数的直方图进行。例如,横书图像场合,在直方图上反复出现山谷形,纵书图像场合,没有该山谷形。通过该特征判别文字是横书还是纵书。在此,实行文书判别手段的功能。
判别文字是横书场合(步骤S55的“是”),进入步骤S56,实行黑像素连续相连的文字单位的矩形抽取处理(文字外接矩形抽取手段),再进入步骤S57,实行文字行的抽取处理,选择最适的基准文字行(文字行抽取手段)。关于文字识别处理,采用公知技术,说明省略。在此,图29是被双值化的扫描图像的文字外接矩形抽取处理及文字行抽取处理结果一例的说明图。在文字外接矩形抽取处理及文字行抽取处理后,能得到许多行,选取其中一定长度以上的行,再选取其中弯曲量最大的行作为最适基准文字行。上述所谓一定长度以上的行例如设为长于最长行的80%的行。另外,书原稿40的页装订部41的分界线的左右侧各选一行。上述弯曲量根据包含在各文字行中的各文字外接矩形的中心坐标在主扫描方向的位置进行测定,中心坐标的最大值与最小值之差越大,看作弯曲量越大。
接着,在步骤S58中,抽取在上述步骤S57中抽取的基准文字行的直线部分。抽取基准文字行的直线部分通过各矩形中心坐标值的Hough变换。
下面表示Hough变换的原理。如图30所示,通过图像上的点P(x,y)的直线满足下面式(8)ρ=x·cosθ+y·sinθ (8)在此,(x,y)是点P的坐标,ρ是原点O与点P之间距离,θ是直线PO与x轴所形成的角度。将矩形中心坐标(xi,yi)向离散化(网格化)的(ρ,θ)参数平面投影。(x,y)平面的一点在(ρ,θ)平面上被投影成一条曲线。对平面上的各网格(meshes),若对曲线通过数进行计数,则通过数多的网格表示有对应的直线。在一文字行只有一条直线,因此,若发现曲线通过最多的网格,可以抽取直线。该方法对噪声非常强,直线与曲线混在场合也能抽取直线部分。图31表示抽取图29直线的结果。
接着,在步骤S59中,求取基准文字行的曲线部分。用下面多项式(9)近似在上述步骤S57中抽取的基准文字行,通过最小二乘法求取多项式的系数。即,步骤S59是用多项式近似行的曲线部分。
y=a0+a1x1+a2x2+……+anxn(9)在此,(x,y)是文字矩形中心的坐标,(a0,a1,a2,……,an)是多项式的系数。抽取的曲线部分的结果表示在图32中。
接着,检测基准文字行的直线部分与基准文字行的曲线部分的分界处,推定扫描图像的歪曲区域(步骤S60)。即,通过上述步骤S58-S60,实行歪曲区域推定手段的功能。关于基准文字行的直线部分与基准文字行的曲线部分的分界处的判断处理可以采用各种方法。例如可以使用专利文献2中记载的方法。概略地说,根据所抽取的基准文字行求取近似直线,将离开该直线成为曲线的部分判定为基准文字行的直线部分与基准文字行的曲线部分的分界处。
接着,在步骤S61中,计算扫描图像的左右页的基准文字行的直线部分与图像水平方向(副扫描方向)的水平线所形成的角度(“八”字歪曲角度)。关于线的倾斜角度计算可参照第一实施例。
然后,在步骤S62中,测定在上述步骤S58中求得的基准文字行的直线部分与在步骤S59中求得的基准文字行的曲线部分之间的距离。在步骤S63中进行三次元形状的复原。图33表示基准文字行的直线部分与基准文字行的曲线部分之间的距离。
扫描器的主扫描方向与书原稿40的页装订部41的分界线平行场合,透镜组件10等的扫描透镜读取书原稿40时,成像系统具有以下特性主扫描方向是中心投影,副扫描方向是平射投影。这里,利用这些特性,进行三次元形状的复原。中心投影场合,如图34和图35所示,书原稿40的表面从原稿玻璃台2表面隆起,成像距离变远,图像的放大倍率变小,因此,外形边缘的直线逐渐向内侧弯曲。若测定图35所示的缩小量AB,则可以计算图34所示的隆起的书表面的高度d。因此,若测定直线内侧的歪曲量,能复原三次元形状(书原稿40从原稿玻璃台2的隆起量)。
在此,假设将书原稿40水平置于原稿玻璃台2上,则三次元形状成为二次元。扫描透镜的成像关系表示在图36。OO’是透镜光轴,O为透镜的中心。F是从透镜中心O到扫描器表面(原稿玻璃台2)的距离,将其称为扫描器的焦点距离。扫描器表面上点B在成像面上成像为D。隆起的本子(书原稿40)的表面上点C成像为E。它们与成像面的中心O的距离分别为y’和y(通过第一移动体5及第二移动体8沿副扫描方向移动,中心O也移动,其轨迹称为成像中心线)。根据三角形相似关系,能得到下面关系式(10)和(11)
d/F=AB/AO’ (10)AB/AO’=(y’-y)/y (11)根据上式(10)和(11),书原稿40的隆起量d能从下面关系式(12)求得d=F×((y’-y)/y)(12)可以明白,根据该式(12),可以从二次元的歪曲量求取三次元形状。在此,从图像求取歪曲量(y’-y)及距离y,但在本实施例中,是从文字行或格线的直线部分曲线部分的距离求取其的。透镜的焦距F是由扫描部1决定的已知量,使用扫描部1的设定值或透镜的校正值。通过上述步骤S58,S59,S62,S63实行隆起量推定手段的功能。
接着,在步骤S64中,根据三次元形状进行图像歪曲补正处理,再在在步骤S65中,进行图像的亮度补正处理,在步骤S66中,进行图像的文字模糊补正处理。
步骤S64的图像歪曲补正处理与第一实施例中步骤S25-S27相同,说明省略。步骤S65的图像亮度补正处理与第一实施例中步骤S28相同,说明省略。步骤S66的图像文字模糊补正处理与第一实施例中步骤S29相同,说明省略。
另一方面,判别文字是纵书场合(步骤S55的“否”),进入步骤S67,实行抽取矩形以及纵向行的抽取处理。在步骤S67,如图37所示,求取行的最上或最下的矩形,将其作为基准文字行,求取纵行的外形。
在接下来的步骤S58-S66中,使用构成该基准文字行的各矩形的中心坐标,进行图像歪曲补正处理。
另外,宣告利用格线信息进行歪曲补正处理场合(步骤S54的“是”),进入步骤S68,抽取横向(副扫描方向)的格线(格线抽取手段)。在步骤S68,使用在步骤S53所求得的横方向(副扫描方向)的黑像素数的直方图。如图38所示,存在横向格线场合,在直方图上出现细高峰值,利用该特征抽取格线,从其中选择一定长度以上的格线。所谓一定长度以上的格线例如可以设为长于最长格线的80%的格线。并且,在所选择的格线中选择最接近图像上端或下端的格线作为基准格线。另外,书原稿40的页装订部41的分界线的左右侧各选一格线。
在接下来的步骤S58-S66中,由于与利用文字信息场合基本相同,说明省略。
上面参照
了本发明的实施例,但本发明并不局限于上述实施例。在本发明技术思想范围内可以作种种变更,它们都属于本发明的保护范围。
权利要求
1.一种图像补正装置,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,设有“八”字歪曲角度检测装置,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度;“八”字歪曲补正装置,根据上述“八”字歪曲角度检测装置检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。
2.根据权利要求1中所述的图像补正装置,其特征在于,上述“八”字歪曲角度检测装置包括歪曲区域推断装置,从上述扫描图像的左右页分别检测上述线形状部分的直线部,检测上述直线部与弯曲部的分界处,推断歪曲区域;“八”字歪曲角度计算装置,分别计算上述扫描图像的左右各页的上述直线部与读取图像时的副扫描方向所成的角度。
3.根据权利要求1或2中所述的图像补正装置,其特征在于,上述“八”字歪曲补正装置包括三次元形状检测装置,检测上述书原稿的三次元形状;主扫描方向歪曲补正装置,根据上述三次元形状检测装置检测而得的书原稿的三次元形状,进行上述扫描图像的主扫描方向的伸长处理;图像回转装置,分割上述已由主扫描方向歪曲补正装置施以主扫描方向伸长处理的扫描图像的左右页,以所定位置为中心,分别回转由上述“八”字歪曲角度检测装置检测而得的各“八”字歪曲角度;副扫描方向歪曲补正装置,根据经上述图像回转装置回转的图像的三次元形状,在副扫描方向使图像伸长。
4.根据权利要求1-3中任一个所述的图像补正装置,其特征在于,上述三次元形状检测装置包括隆起形状检测装置,将上述扫描图像的左右各页的直线部延长到装订部分界线,根据从上述延长直线到上述线形状部分的弯曲部的距离,检测上述扫描图像的从原稿玻璃台的隆起形状值;线性插值装置,在与上述装订部分界线平行的各直线上,分别选择两点,根据该两点的由上述隆起形状检测装置检测而得的上述扫描图像从原稿玻璃台的隆起形状值,进行各直线的线性插值处理。
5.根据权利要求4所述的图像补正装置,其特征在于,上述隆起形状检测装置推断上述书原稿隆起的歪曲区域与没有歪曲区域的分界处,将该分界处的隆起形状值设为0。
6.根据权利要求1-5中任一个所述的图像补正装置,其特征在于,上述“八”字歪曲补正装置包括像素线性插值装置,对于经上述图像回转装置回转后的上述扫描图像的各像素值,根据邻接四区域的各像素值,进行线性插值处理。
7.根据权利要求3所述的图像补正装置,其特征在于,上述主扫描方向歪曲补正装置根据以上述图像读取手段的光轴为基准检测的各像素的伸长率,使图像在主扫描方向伸长。
8.根据权利要求1-7中任一个所述的图像补正装置,其特征在于,设有对图像施以亮度补正处理的亮度补正装置。
9.根据权利要求1-8中任一个所述的图像补正装置,其特征在于,设有对图像施以模糊补正处理的模糊补正装置。
10.一种图像补正装置,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,设有双值化装置,对由上述图像读取手段读取的扫描图像进行双值化处理;文字外接矩形抽取装置,从上述经双值化装置双值化处理的已双值化的图像,切取文字,抽取各文字的外接矩形;文字行抽取装置,根据由上述文字外接矩形抽取装置抽取的文字外接矩形,抽取文字行;隆起量推断装置,根据由上述文字行抽取装置抽取的文字行形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正装置,根据由上述隆起量推断装置推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
11.根据权利要求10所述的图像补正装置,其特征在于,设有文书判别装置,对上述图像读取手段所读取图像的副扫描方向的双值化图像的黑像素数进行计数,根据上述计数,构成主扫描方向的直方图。根据该直方图的图形,判别上述原稿图像是横书文书还是纵书文书。
12.根据权利要求11所述的图像补正装置,其特征在于,得到上述双值化图像的黑像素数多的部分与少的部分交替出现的直方图场合,判别上述原稿图像是横书文书,除此以外场合,判别上述原稿图像是纵书文书。
13.根据权利要求11或12所述的图像补正装置,其特征在于,通过上述文书判别装置,判别上述原稿图像是横书文书场合,在上述隆起量推断装置,从由上述文字行抽取装置抽取的文字行中选择相对其中最长文字行具有所定比率以上长度的文字行,再从上述所选择的文字行中将弯曲量程度最大的文字行作为基准文字行,根据该基准文字行推断隆起量。
14.根据权利要求13所述的图像补正装置,其特征在于,上述弯曲量通过包含在上述文字行中的各文字外接矩形的中心坐标在读取图像的主扫描方向的位置坐标测定,中心坐标的最大值与最小值之间的差越大,看作弯曲量越大。
15.根据权利要求11或12所述的图像补正装置,其特征在于,通过上述文书判别装置,判别上述原稿图像是纵书文书场合,在上述隆起量推断装置,仅选择从由上述文字行抽取装置抽取的若干文字行的最前头行的文字外接矩形,或者末尾行的文字外接矩形构成基准文字行,根据该基准文字行推断隆起量。
16.根据权利要求13-15中任一个所述的图像补正装置,其特征在于,对包含在上述基准文字行中的上述各文字外接矩形的中心坐标施以Hough变换,推断上述基准文字行的直线部分。
17.根据权利要求16所述的图像补正装置,其特征在于,通过最小二乘法用多项式近似上述基准文字行整体的形状。
18.根据权利要求17所述的图像补正装置,其特征在于,测定上述基准文字行的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。
19.根据权利要求18所述的图像补正装置,其特征在于,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。
20.根据权利要求11-19中任一个所述的图像补正装置,其特征在于,上述隆起量推断装置在上述原稿图像的左右页分别独立进行。
21.一种图像补正装置,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,设有双值化装置,对由上述图像读取手段读取的扫描图像进行双值化处理;格线抽取装置,从上述经双值化装置双值化处理的已双值化的图像,抽取格线;隆起量推断装置,根据由上述格线抽取装置抽取的格线形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正装置,根据由上述隆起量推断装置推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
22.根据权利要求21所述的图像补正装置,其特征在于,上述格线抽取装置对上述双值化图像的黑像素数沿上述图像读取手段的读取图像的副扫描方向进行计数,根据该计数,构成主扫描方向的直方图,根据该直方图的图形抽取上述格线。
23.根据权利要求22所述的图像补正装置,其特征在于,将直方图上出现细高峰值的部分判定为上述格线。
24.根据权利要求22或23所述的图像补正装置,其特征在于,在上述隆起量推断装置,从由上述格线抽取装置抽取的格线中选择相对其中最长格线具有所定比率以上长度的格线,再从上述所选择的格线中将最接近图像上端或下端的格线作为基准格线,根据该基准格线推断隆起量。
25.根据权利要求24所述的图像补正装置,其特征在于,对包含在上述基准格线中的各像素坐标施以Hough变换,推断上述基准格线的直线部分。
26.根据权利要求25所述的图像补正装置,其特征在于,通过最小二乘法用多项式近似上述基准格线的形状。
27.根据权利要求26所述的图像补正装置,其特征在于,测定上述基准格线的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。
28.根据权利要求27所述的图像补正装置,其特征在于,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。
29.根据权利要求22-28中任一个所述的图像补正装置,其特征在于,上述隆起量推断装置在上述原稿图像的左右页分别独立进行。
30.一种程序,由计算机实行,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,使计算机实行以下功能“八”字歪曲角度检测功能,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度;“八”字歪曲补正功能,根据上述“八”字歪曲角度检测功能检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。
31.根据权利要求30中所述的程序,其特征在于,上述“八”字歪曲角度检测功能使计算机实行下列功能歪曲区域推断功能,从上述扫描图像的左右页分别检测上述线形状部分的直线部,检测上述直线部与弯曲部的分界处,推断歪曲区域;“八”字歪曲角度计算功能,分别计算上述扫描图像的左右各页的上述直线部与读取图像时的副扫描方向所成的角度。
32.根据权利要求30或31中所述的程序,其特征在于,上述“八”字歪曲补正功能使计算机实行下列功能三次元形状检测功能,检测上述书原稿的三次元形状;主扫描方向歪曲补正功能,根据上述三次元形状检测功能检测而得的书原稿的三次元形状,进行上述扫描图像的主扫描方向的伸长处理;图像回转功能,分割上述已由主扫描方向歪曲补正功能施以主扫描方向伸长处理的扫描图像的左右页,以所定位置为中心,分别回转由上述“八”字歪曲角度检测功能检测而得的各“八”字歪曲角度。副扫描方向歪曲补正功能,根据经上述图像回转功能回转的图像的三次元形状,在副扫描方向使图像伸长。
33.一种程序,由计算机实行,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,使得计算机实行以下功能双值化功能,对由上述图像读取手段读取的扫描图像进行双值化处理;文字外接矩形抽取功能,从上述经双值化功能双值化处理的已双值化的图像,切取文字,抽取各文字的外接矩形;文字行抽取功能,根据由上述文字外接矩形抽取功能抽取的文字外接矩形,抽取文字行;隆起量推断功能,根据由上述文字行抽取功能抽取的文字行形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正功能,根据由上述隆起量推断功能推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
34.根据权利要求33所述的程序,其特征在于,使得计算机实行文书判别功能,对上述图像读取手段所读取图像的副扫描方向的双值化图像的黑像素数进行计数,根据上述计数,构成主扫描方向的直方图,根据该直方图的图形,判别上述原稿图像是横书文书还是纵书文书。
35.根据权利要求34所述的程序,其特征在于,得到上述双值化图像的黑像素数多的部分与少的部分交替出现的直方图场合,判别上述原稿图像是横书文书,除此以外场合,判别上述原稿图像是纵书文书。
36.根据权利要求34或35所述的程序,其特征在于,通过上述文书判别功能,判别上述原稿图像是横书文书场合,在上述隆起量推断功能,从由上述文字行抽取功能抽取的文字行中选择相对其中最长文字行具有所定比率以上长度的文字行,再从上述所选择的文字行中将弯曲量程度最大的文字行作为基准文字行,根据该基准文字行推断隆起量。
37.根据权利要求36所述的程序,其特征在于,上述弯曲量通过包含在上述文字行中的各文字外接矩形的中心坐标在读取图像的主扫描方向的位置坐标测定,中心坐标的最大值与最小值之间的差越大,看作弯曲量越大。
38.根据权利要求34或35所述的程序,其特征在于,通过上述文书判别功能,判别上述原稿图像是纵书文书场合,在上述隆起量推断功能,仅选择从由上述文字行抽取功能抽取的若干文字行的最前头行的文字外接矩形,或者末尾行的文字外接矩形构成基准文字行,根据该基准文字行推断隆起量。
39.根据权利要求36-38中任一个所述的程序,其特征在于,对包含在上述基准文字行中的上述各文字外接矩形的中心坐标施以Hough变换,推断上述基准文字行的直线部分。
40.根据权利要求39所述的程序,其特征在于,通过最小二乘法用多项式近似上述基准文字行整体的形状。
41.根据权利要求40所述的程序,其特征在于,测定上述基准文字行的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。
42.根据权利要求41所述的程序,其特征在于,在上述图像读取手段读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。
43.根据权利要求34-42中任一个所述的程序,其特征在于,上述隆起量推断功能在上述原稿图像的左右页分别独立进行。
44.一种程序,由计算机实行,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,使得计算机实行以下功能双值化功能,对由上述图像读取手段读取的扫描图像进行双值化处理;格线抽取功能,从上述经双值化功能双值化处理的已双值化的图像,抽取格线;隆起量推断功能,根据由上述格线抽取功能抽取的格线形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正功能,根据由上述隆起量推断功能推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
45.根据权利要求44所述的程序,其特征在于,上述格线抽取功能对上述双值化图像的黑像素数沿上述图像读取手段的读取图像的副扫描方向进行计数,根据该计数,构成主扫描方向的直方图,根据该直方图的图形抽取上述格线。
46.根据权利要求45所述的程序,其特征在于,将直方图上出现细高峰值的部分判定为上述格线。
47.根据权利要求45或46所述的程序,其特征在于,在上述隆起量推断功能,从由上述格线抽取功能抽取的格线中选择相对其中最长格线具有所定比率以上长度的格线,再从上述所选择的格线中将最接近图像上端或下端的格线作为基准格线,根据该基准格线推断隆起量。
48.根据权利要求47所述的程序,其特征在于,对包含在上述基准格线中的各像素坐标施以Hough变换,推断上述基准格线的直线部分。
49.根据权利要求48所述的程序,其特征在于,通过最小二乘法用多项式近似上述基准格线的形状。
50.根据权利要求49所述的程序,其特征在于,测定上述基准格线的直线部分向曲线部分侧延长的延长部分与曲线部分之间的距离,并且测定上述图像读取手段的成像中心线与曲线部分之间的距离,求取(延长部分与曲线部分之间的距离)/(成像中心线与曲线部分之间的距离),对于上述比值,乘以从上述图像读取手段的透镜中心到上述原稿玻璃台的距离,将所得的值看作上述原稿图像从上述原稿玻璃台的隆起量。
51.根据权利要求50所述的程序,其特征在于,在上述图像读取装置读取图像的副扫描方向的若干位置,推断上述原稿图像从上述原稿玻璃台的隆起量。
52.根据权利要求45-51中任一个所述的程序,其特征在于,上述隆起量推断功能在上述原稿图像的左右页分别独立进行。
53.一种储存媒体,可由计算机读取,其特征在于,储存权利要求30-52中任一个所述的程序。
54.一种图像补正方法,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,包括以下步骤“八”字歪曲角度检测工序,利用包含在上述书原稿的扫描图像中的线形状部分,检测上述扫描图像的“八”字歪曲角度;“八”字歪曲补正工序,根据上述“八”字歪曲角度检测工序检测而得的“八”字歪曲角度,对上述扫描图像的“八”字歪曲进行补正后,对上述扫描图像的副扫描方向的形状歪曲进行补正。
55.根据权利要求54中所述的图像补正方法,其特征在于,上述“八”字歪曲角度检测工序包括歪曲区域推断工序,从上述扫描图像的左右页分别检测上述线形状部分的直线部,检测上述直线部与弯曲部的分界处,推断歪曲区域;“八”字歪曲角度计算工序,分别计算上述扫描图像的左右各页的上述直线部与读取图像时的副扫描方向所成的角度。
56.根据权利要求54或55中所述的图像补正方法,其特征在于,上述“八”字歪曲补正工序包括三次元形状检测工序,检测上述书原稿的三次元形状;主扫描方向歪曲补正工序,根据上述三次元形状检测工序检测而得的书原稿的三次元形状,进行上述扫描图像的主扫描方向的伸长处理;图像回转工序,分割上述已由主扫描方向歪曲补正工序施以主扫描方向伸长处理的扫描图像的左右页,以所定位置为中心,分别回转由上述“八”字歪曲角度检测工序检测而得的各“八”字歪曲角度;副扫描方向歪曲补正工序,根据经上述图像回转工序回转的图像的三次元形状,在副扫描方向使图像伸长。
57.一种图像补正方法,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,包括以下步骤双值化工序,对由上述图像读取手段读取的扫描图像进行双值化处理;文字外接矩形抽取工序,从上述经双值化工序双值化处理的已双值化的图像,切取文字,抽取各文字的外接矩形;文字行抽取工序,根据由上述文字外接矩形抽取工序抽取的文字外接矩形,抽取文字行;隆起量推断工序,根据由上述文字行抽取工序抽取的文字行形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正工序,根据由上述隆起量推断工序推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
58.一种图像补正方法,通过图像读取手段读取与原稿玻璃台上面或下面接触的书原稿,对上述所读取的扫描图像进行补正,其特征在于,包括以下步骤双值化工序,对由上述图像读取手段读取的扫描图像进行双值化处理;格线抽取工序,从上述经双值化工序双值化处理的已双值化的图像,抽取格线;隆起量推断工序,根据由上述格线抽取工序抽取的格线形状,推断上述原稿图像的从原稿玻璃台的隆起量;图像补正工序,根据由上述隆起量推断工序推断的隆起量,对上述扫描图像或上述双值化图像施以补正处理。
59.一种图像读取装置,其特征在于,包括读取原稿图像的图像读取手段;对由上述图像读取手段读取的扫描图像进行补正的上述权利要求1-29中任一个所述的图像补正装置。
60.一种图像形成装置,其特征在于,包括读取原稿图像的图像读取手段;对由上述图像读取手段读取的扫描图像进行补正的上述权利要求1-29中任一个所述的图像补正装置;根据从上述图像补正装置输出的图像数据将图像印刷在纸上的图像印刷装置。
全文摘要
本发明涉及图像补正装置,程序,储存媒体,图像补正方法,图像读取装置及图像形成装置。利用位于扫描图像主扫描方向上边及下边附近的书原稿的页外形,检测扫描图像的“八”字歪曲角度α,β,根据该“八”字歪曲角度α,β,对扫描图像的“八”字歪曲进行补正后,对扫描图像的副扫描方向的形状歪曲进行补正。即使对“八”字歪曲形状的扫描图像进行三次元形状歪曲补正也能防止发生伴随上述补正而引起的图像质量的劣化。
文档编号H04N1/107GK1437156SQ0310319
公开日2003年8月20日 申请日期2003年2月8日 优先权日2002年2月8日
发明者关海克, 荒木祯史 申请人:株式会社理光