Nothing Special   »   [go: up one dir, main page]

JP2018115877A - Surface color and texture management system and management method - Google Patents

Surface color and texture management system and management method Download PDF

Info

Publication number
JP2018115877A
JP2018115877A JP2017005253A JP2017005253A JP2018115877A JP 2018115877 A JP2018115877 A JP 2018115877A JP 2017005253 A JP2017005253 A JP 2017005253A JP 2017005253 A JP2017005253 A JP 2017005253A JP 2018115877 A JP2018115877 A JP 2018115877A
Authority
JP
Japan
Prior art keywords
distribution
product
color
texture
xyz
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017005253A
Other languages
Japanese (ja)
Other versions
JP6501315B2 (en
Inventor
加藤 誠
Makoto Kato
誠 加藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
PaPaLab Co Ltd
Original Assignee
PaPaLab Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by PaPaLab Co Ltd filed Critical PaPaLab Co Ltd
Priority to JP2017005253A priority Critical patent/JP6501315B2/en
Publication of JP2018115877A publication Critical patent/JP2018115877A/en
Application granted granted Critical
Publication of JP6501315B2 publication Critical patent/JP6501315B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Spectrometry And Color Measurement (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

PROBLEM TO BE SOLVED: To appropriately utilize nonstandard products which are not compliant with standards, to suitably perform the matching of color and texture, to reduce production cost, and to achieve effective use of resources.SOLUTION: A management server 6 includes: a product distribution calculation unit 9 for storing coordinates corresponding to a color space of an XYZ calorimetric system from three band visual sensitivity images S1i, S2i and S3i of a product W, partitioning the coordinates with lattices, accumulating the number of pixels of an inspection plane to which each lattice belongs, creating color space histogram distribution of the XYZ calorimetric system and storing the color space histogram distribution; and a texture distribution index computing unit 10 for comparing the distribution of nonstandard products with that of the product W to calculate a texture distribution index.SELECTED DRAWING: Figure 3

Description

本発明は、インターネット上で、表面色・質感のデータを管理する表面色・質感管理システム及び管理方法に関する。   The present invention relates to a surface color / texture management system and management method for managing surface color / texture data on the Internet.

特許文献1の着色評価装置及び着色評価方法によれば、異種材料を組み立てる場合のメタリック感やパールのキラメキ等の質感を明確に簡単に定量化し、塗装工程を合理化することが提案されている。   According to the coloring evaluation apparatus and the coloring evaluation method of Patent Document 1, it has been proposed to clearly and easily quantify the metallic feeling and the texture such as pearl glitter when assembling different materials, thereby rationalizing the painting process.

部品工場1で工業製品の部品Aを製造し同一色で塗装し、部品工場2で工業製品の部品Bを製造し、これらを同一色で、それぞれ、塗装し、部品A,Bごとにその部品には、固有情報、例えば、部品番号、製造工場名、製造日時等が記憶されたICタグが、内蔵又は装着等により取り付けられ、部品工場で、塗装後の部品A,Bを、着色評価装置で色分布等の色情報を計測し、記憶させ、色情報をICタグに部品番号に関連づけて記憶され、製造番号と色情報のデータを、コンピュータでマッチングし、部品の組み合わせのテーブルを作成し、ICタグから情報を読み取って塗装部品をラインに流し、テーブルに基づいた最適な部品の組み合わせで工業製品を組み立てる。   Manufacture part A of an industrial product at parts factory 1 and paint it with the same color, manufacture part B of an industrial product at part factory 2 and paint these parts with the same color. In particular, an IC tag storing unique information, for example, part number, manufacturing factory name, manufacturing date and time, etc. is attached by built-in or mounting, etc., and coloring evaluation apparatus for parts A and B after painting at the parts factory Color information such as color distribution is measured and stored, and the color information is stored in the IC tag in association with the part number. The serial number and color information data are matched by a computer to create a table of component combinations. Reads information from IC tags, flows painted parts to the line, and assembles industrial products with the optimal combination of parts based on the table.

特開2016−161297号公報Japanese Patent Laid-Open No. 2006-161297

しかしながら、色のマッチング検査で不合格となる検査不合格部品は、基本的には、廃棄することになる。   However, parts that fail the color matching inspection are basically discarded.

そのため、例えば、マンション業界では、マンションの台所の壁面、又は、外壁等に貼り付けたタイルの一部が割れたり破損したり、汚損し、交換したというニーズがあるが、そこに、新品のタイルを交換で嵌め込んでも、経年劣化等で色彩の変化した周囲のタイルとは色が合わないという状況になる。タイルは焼物であり、オーダーメイドのタイルを製造するのは非常に難しい作業であり、マンション業界は対策に苦慮している。自動車業界では、新型車両であっても、使用により、表面が日焼けして、部品であるバンパーが破損した場合、後で、新品のバンパーに取り換えたいというとき、車の塗装面や質感が色ずれ、質感ずれしているので、ずれていった塗装面と同じようなバンパーが要望されても、純正のバンパーでは適合しないことがある。実質、新たに色付けしたオーダーメイドのバンパーを製造することはコストが高くなってしまう。同様の問題は、電機業界、医薬品業界等でも生じている。   For this reason, for example, in the condominium industry, there is a need for a part of tiles affixed to the wall of an apartment kitchen or an outer wall to be cracked, damaged, fouled, or replaced. Even if it is replaced, the color will not match the surrounding tiles that have changed color due to deterioration over time. Tile is a pottery, making custom tiles is a very difficult task, and the condominium industry is struggling with countermeasures. In the automobile industry, even if it is a new model vehicle, if the surface becomes tanned due to use and the bumper that is a part is damaged, when you want to replace it with a new bumper later, the painted surface and texture of the car will be miscolored. Because the texture is shifted, even if a bumper similar to the shifted painted surface is required, a genuine bumper may not fit. In fact, it would be expensive to produce a newly colored custom made bumper. Similar problems occur in the electrical industry, the pharmaceutical industry, and the like.

そこで、本発明の課題は、規格に不適合となった規格外品を活用し、色・質感の適切なマッチングを行い、製造コストを削減するとともに、資源の有効活用を達成することを課題とする。   Therefore, an object of the present invention is to use a non-standard product that is incompatible with the standard, perform an appropriate color / texture matching, reduce manufacturing costs, and achieve effective use of resources. .

本発明の第1発明は、図1に示す通り、CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第1撮像部により、規格外品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、記憶する記憶部と、
前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、XYZ表色系の色空間に対応する座標を記憶し、前記座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、データベースに、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布演算部と、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第2撮像部により、実施品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、前記実施品の3バンド視覚感度画像S1i,S2i,S3iから、XYZ表色系の色空間に対応する座標を記憶し、前記座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、該色空間ヒストグラム分布を記憶する実施品分布演算部と、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算部と、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、出力する出力部と、を備え、
前記記憶部、規格外品分布演算部、実施品分布演算部、色・質感演算部、及び前記出力部のデータ通信をインターネットを介して行うことを特徴とする色・質感管理システム。
As shown in FIG. 1, the first invention of the present invention has three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) that are linearly converted equivalently to the CIE XYZ color matching functions. A storage unit for acquiring and storing three-band visual sensitivity images S1i, S2i, S3i having three spectral sensitivities from a non-standard product by an imaging unit;
The coordinates corresponding to the color space of the XYZ color system are stored from the non-standard three-band visual sensitivity images S1i, S2i, S3i, the coordinates are partitioned by grids, and the number of pixels of the inspection surface belonging to each grid is determined. A non-standard product distribution calculation unit that creates a color space histogram distribution of the XYZ color system by integrating, and stores the color space histogram distribution and the product-specific information corresponding to the database in association with each other;
The second imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from the actual product. Band visual sensitivity images S1i, S2i, and S3i are acquired, coordinates corresponding to the color space of the XYZ color system are stored from the three-band visual sensitivity images S1i, S2i, and S3i of the above-described product, and the coordinates are partitioned by a grid. Then, by integrating the number of pixels of the inspection surface belonging to each grid, to create a color space histogram distribution of the XYZ color system and store the color space histogram distribution,
A texture distribution index calculation unit that compares and determines the distribution of the non-standard product and the distribution of the implementation product and calculates a texture distribution index;
An output unit that refers to the texture distribution index and identifies and outputs the product-specific information of a non-standard product that approximates the color / texture to the implementation product,
A color / texture management system, wherein data communication of the storage unit, non-standard product distribution calculation unit, implementation product distribution calculation unit, color / texture calculation unit, and output unit is performed via the Internet.

ここでいう「規格外品」とは、目視、センサ、検査装置等により、検査の結果、規格を満たさなかった製品をいう。「実施品」とは、製造され規格を満たし、市場に流通し、使用された製品である。   The “non-standard product” here refers to a product that does not satisfy the standard as a result of inspection by visual inspection, a sensor, an inspection device, or the like. An “implemented product” is a product that is manufactured, meets the standards, is distributed in the market, and is used.

「撮像部」は単数でも複数でも良い。撮像部を固定して撮像しても、移動させて撮像してもよい。撮像部が複数の場合、撮像角度に対応する場所にそれぞれ設置できる。XYZ系の2次元色彩計が例示される。   The “imaging unit” may be singular or plural. The imaging unit may be fixed or imaged, or moved and imaged. When there are a plurality of imaging units, they can be installed at locations corresponding to imaging angles. An XYZ two-dimensional colorimeter is exemplified.

本発明における撮像部は、3つの分光感度(S1(λ)、S2(λ)、S3(λ))により、すなわち、観測対象物を3つのチャンネルに分けて撮像することが好ましいが、その手段としては、これらの分光感度を得るために設定された光学フィルタ又はダイクロイックミラーもしくはダイクロイックプリズム等のいずれであるかを問わず用いることができる。   The image pickup unit in the present invention preferably picks up an image of an observation target by dividing it into three channels by means of three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)). Can be used regardless of whether it is an optical filter, a dichroic mirror, a dichroic prism, or the like set to obtain these spectral sensitivities.

「撮像部」の分光感度(S1(λ)、S2(λ)、S3(λ))は、CIE XYZ分光特性から負の値を持たない、単独ピークを持つ山形であり、それぞれの分光感度曲線のピーク値が等しく、かつ分光感度の曲線の重なりは最小限にするという条件から等価変換したものであって、分光特性S1のカーブは、ピーク波長が582nmであり、半値幅が523〜629nmであり、1/10幅が491〜663nmである。分光特性S2のカーブは、ピーク波長が543nmであり、半値幅が506〜589nmであり、1/10幅が464〜632nmである。分光特性S3のカーブは、ピーク波長が446nmであり、半値幅が423〜478nmであり、1/10幅が409〜508nmである。   The spectral sensitivity (S1 (λ), S2 (λ), S3 (λ)) of the “imaging unit” is a mountain shape having a single peak that has no negative value from the CIE XYZ spectral characteristics, and each spectral sensitivity curve. Are equivalently converted under the condition that the peak values of the spectral characteristics are equal and the overlap of spectral sensitivity curves is minimized. The curve of the spectral characteristic S1 has a peak wavelength of 582 nm and a half-value width of 523 to 629 nm. 1/10 width is 491 to 663 nm. The curve of the spectral characteristic S2 has a peak wavelength of 543 nm, a full width at half maximum of 506 to 589 nm, and a 1/10 width of 464 to 632 nm. The curve of the spectral characteristic S3 has a peak wavelength of 446 nm, a full width at half maximum of 423 to 478 nm, and a 1/10 width of 409 to 508 nm.

2次元色彩計はイメージセンサによる多点同時測定方式を採用し、色・質感の評価を可能とすることが好ましく、自動車業界、家電業界、化粧品業界、印刷業界及び建材業界等で活用できる。   The two-dimensional colorimeter adopts a multi-point simultaneous measurement method using an image sensor, and preferably enables color / texture evaluation, and can be used in the automobile industry, the home appliance industry, the cosmetics industry, the printing industry, the building materials industry, and the like.

「色空間」とは、3つの独立な量で指定できる大きさを3つの軸方向の原点からの距離で表すと、色を空間の1点の座標として指定できるものである。   The “color space” is a color that can be designated as the coordinates of one point in the space when the size that can be designated by three independent quantities is represented by the distance from the origin in the three axial directions.

「XYZ表色系」は他のCIE系表色系を含む広義のものを意味し、実施形態では、狭義のものを意味する。狭義のXYZ表色系とは、RGB表色系を単純な一次変換で負の値が現れないように定めたものであり、他のCIE表色系、例えば、Yxy、XYZ、Lab、Luv等のCIE表色系の基礎となり、2次元色度図又は3次元色空間を含む概念である。従って、広義のXYZ表色系は、狭義のXYZ表色系と該XYZ表色系から発展させた他のCIE表色系を含む。   “XYZ color system” means a broad meaning including other CIE color systems, and in the embodiment means a narrow meaning. The XYZ color system in the narrow sense is an RGB color system defined so that negative values do not appear by simple primary conversion, and other CIE color systems such as Yxy, XYZ, Lab, Luv, etc. This is a concept including a two-dimensional chromaticity diagram or a three-dimensional color space. Therefore, the XYZ color system in a broad sense includes a XYZ color system in a narrow sense and other CIE color systems developed from the XYZ color system.

狭義のXYZ表色系とは、RGB表色系を単純な一次変換で負の値が現れないように、CIEが1931年にRGB表色系と同時に定めたものである。   The XYZ color system in a narrow sense is defined by CIE in 1931 at the same time as the RGB color system so that negative values do not appear in the RGB color system by simple primary conversion.

xyY表色系(Yxy表色系ともいう)とは、XYZ表色系では数値と色の関連がわかりにくいので、XYZ表色系から絶対的な色合いを表現するために定められたものである。   The xyY color system (also referred to as the Yxy color system) is defined in order to express an absolute hue from the XYZ color system because the relationship between numerical values and colors is difficult to understand in the XYZ color system. .

Luv表色系とは、CIEが1976年に定めた均等色空間のひとつであり、CIELは光の波長を基礎に、XYZ表色系のxy色度図の波長間隔の均等性を改善したものである。日本ではJIS Z8518に規定されている。 The Luv color system is one of the uniform color spaces established by the CIE in 1976, and CIE L * u * v * is based on the wavelength of light, and the wavelength interval of the XY chromaticity diagram of the XYZ color system is equal. Improved. In Japan, it is specified in JIS Z8518.

Lab表色系とは、CIELであり、XYZ表色系から知覚と装置の違いによる色差ΔEを測定するために派生したものである。日本ではJIS Z 8729に規定されている。 The Lab color system is CIEL * a * b *, which is derived from the XYZ color system in order to measure the color difference ΔE due to the difference between perception and device. In Japan, it is specified in JIS Z 8729.

「XYZ表色系」には、2次元座標と3次元座標で規定される色空間が含まれる。色空間の代表例としては、と、XYZ色空間と、Lab色空間等の構成例がある。2次元の色空間の場合、例えば、Yxy色空間、Luv色空間の場合、2次元平面であるxy色度図(Yxy色空間で正規化したxy色度値(平面))、uv色度図、u’v’色度図が挙げられる。平面上での2次元色度図の画素の密度として表現されるxy色度ヒストグラム分布又はLuv色度ヒストグラム分布等が対応する。3次元の色空間の場合、例えば、XYZ色空間、Lab色空間の場合、3次元空間であるXYZ色空間、Lab色空間が挙げられる。3次元での色空間上の画素の密度として表現されるXYZ色空間ヒストグラム、又はLab色空間ヒストグラム分布等が対応する。   The “XYZ color system” includes a color space defined by two-dimensional coordinates and three-dimensional coordinates. As typical examples of the color space, there are configuration examples such as an XYZ color space and a Lab color space. In the case of a two-dimensional color space, for example, in the case of a Yxy color space or a Luv color space, an xy chromaticity diagram that is a two-dimensional plane (xy chromaticity value (plane) normalized in the Yxy color space), uv chromaticity diagram , U′v ′ chromaticity diagram. An xy chromaticity histogram distribution or a Luv chromaticity histogram distribution expressed as the density of pixels in a two-dimensional chromaticity diagram on a plane corresponds. In the case of a three-dimensional color space, for example, in the case of an XYZ color space or a Lab color space, an XYZ color space or a Lab color space that is a three-dimensional space may be mentioned. An XYZ color space histogram expressed as a density of pixels in a three-dimensional color space, a Lab color space histogram distribution, or the like corresponds.

2次元のxy色度平面、uv色度図、u’v’色度図での色と質感の分離に対して、他のXYZ色空間とLab色空間等は3次元色空間上で色と質感の分離となる。従って、用語として、xy色度ヒストグラムに対して、XYZ色空間ヒストグラム、Lab色空間ヒストグラム等のように、区別して定義している。   In contrast to the separation of color and texture on the two-dimensional xy chromaticity plane, uv chromaticity diagram, and u'v 'chromaticity diagram, other XYZ color spaces and Lab color spaces have colors in the three-dimensional color space. It becomes the separation of the texture. Therefore, the terms are defined separately from the xy chromaticity histogram, such as an XYZ color space histogram and a Lab color space histogram.

XYZ色空間ヒストグラムとLab色空間ヒストグラムは、それぞれ、別のものであり、Lab色空間での質感分布指標演算は、XYZ色データをLab色度データに変換して、この変換したデータより、計算するものである。   The XYZ color space histogram and the Lab color space histogram are different from each other, and the texture distribution index calculation in the Lab color space is performed by converting the XYZ color data into Lab chromaticity data and calculating from the converted data. To do.

「近接させるようにシフト」する態様について、例えば、ヒストグラム分布の所定の位置、例えば、中心を一致させる、所定の位置、例えば中心同士を所定範囲内まで近接させる、座標軸と平行に移動させることで近接させる、中心から他の中心まで直線方向に近接させる等、適切な指標を得られる程度であれば、シフト量、シフト方向等は適宜設定が可能であり、種々なる態様でシフトの実施が可能である。   For the mode of “shifting closer”, for example, a predetermined position of the histogram distribution, for example, the centers are matched, a predetermined position, for example, the centers are moved close to each other within a predetermined range, and moved in parallel with the coordinate axis. The shift amount, the shift direction, etc. can be set as appropriate as long as an appropriate index can be obtained, such as close proximity or proximity from the center to another center. It is.

3バンド視覚感度画像S1i,S2i,S3iに基づくXYZ表色系の色空間にそれぞれ対応する座標を格子で区画し、各格子に属する前記規格外品と実施品の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、前記規格外品と実施品の2つの色空間ヒストグラム分布の中心を特定し、いずれか一方の色空間ヒストグラム分布の中心を他の色空間ヒストグラム分布の中心に近接するようにシフトさせることにより、色空間ヒストグラム分布の広がりの差を示す質感分布指標を演算することが好ましい。   By dividing the coordinates corresponding to the color space of the XYZ color system based on the three-band visual sensitivity images S1i, S2i, S3i with grids, and integrating the number of pixels of the non-standard product and the implemented product belonging to each grid, Create a color space histogram distribution of the XYZ color system, identify the centers of the two color space histogram distributions of the non-standard product and the implementation product, and use one of the color space histogram distributions as the other color space histogram distribution It is preferable to calculate a texture distribution index indicating a difference in the spread of the color space histogram distribution by shifting so as to be close to the center of the color space.

本発明の第1撮像部と第2撮像部の撮影環境である色温度が相違する場合、色温度で分光感度を補正することが好ましい。CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する2次元色彩計により、標準光源下で、複数の実施品を撮像した複数の3バンド視覚感度画像S1i,S2i,S3iを記憶する記憶ステップと、リモート照明光下で、色温度測定センサーにより色温度を測定する色温度測定部と、前記3バンド視覚感度画像S1i,S2i,S3iを、前記色温度測定センサーの測定値に基づいて、色温度補正がなされた補正画像に変換する照明色変換補正部と、を備えることが好ましい。   When the color temperature that is the imaging environment of the first imaging unit and the second imaging unit of the present invention is different, it is preferable to correct the spectral sensitivity with the color temperature. With a two-dimensional colorimeter having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalent to the CIE XYZ color matching functions, a plurality of products can be obtained under a standard light source. A storage step for storing a plurality of captured three-band visual sensitivity images S1i, S2i, S3i, a color temperature measurement unit that measures a color temperature with a color temperature measurement sensor under remote illumination light, and the three-band visual sensitivity image S1i , S2i, and S3i are preferably provided with an illumination color conversion correction unit that converts the color temperature correction image into a corrected image based on the measurement value of the color temperature measurement sensor.

2次元色彩計には、XYZ系の色彩計のほか、メガネに表示部を有するウェアラブルグラス、又は、ヘッドマウントディスプレイを有するXYZ系のウェアラブル装置などが挙げられる。   Examples of the two-dimensional colorimeter include an XYZ colorimeter, a wearable glass having a display unit in glasses, or an XYZ wearable device having a head-mounted display.

指標には、指数、グラフ、絵図、又は、これらの組み合わせで示すもの等、平面、立体にかぎらず、種々なる態様が可能である。   The index can be in various forms, not limited to a plane or a solid, such as an index, a graph, a picture, or a combination thereof.

本発明の第2発明は、CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第1撮像部により、規格外品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、該3バンド視覚感度画像S1i,S2i,S3iの各画素のXYZ値、又は、該XYZ値より正規化されたxy値を記憶する記憶部と、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布演算部と、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第2撮像部により、実施品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を演算する実施品分布演算部と、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算部と、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、出力する出力部と、を備え、
前記記憶部、規格外品分布演算部、実施品分布演算部、色・質感演算部、及び前記出力部のデータ通信をインターネットを介して行うことを特徴とする色・質感管理システムである。
The second invention of the present invention is a non-standard by the first imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function. Three-band visual sensitivity images S1i, S2i, S3i having three spectral sensitivities are obtained from the product, and the three-band visual sensitivity images S1i, S2i, S3i are obtained from the non-standard three-band visual sensitivity images S1i, S2i, S3i. A storage unit for storing the XYZ values of the respective pixels or the xy values normalized from the XYZ values;
xy chromaticity histogram distribution, XYZ color created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the nonstandard product belonging to each grid A non-standard product distribution calculation unit that stores a degree histogram three-dimensional distribution or a Lab chromaticity histogram three-dimensional distribution in the database of the management server in association with the product-specific information corresponding to the color space histogram distribution;
The second imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from the actual product. Band visual sensitivity images S1i, S2i, S3i are acquired, and the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram are partitioned by a grid, and the number of pixels of the nonstandard product belonging to each grid is integrated. An actual product distribution calculation unit that calculates the xy chromaticity histogram distribution, the XYZ chromaticity histogram three-dimensional distribution, or the Lab chromaticity histogram three-dimensional distribution created by
A texture distribution index calculation unit that compares and determines the distribution of the non-standard product and the distribution of the implementation product and calculates a texture distribution index;
An output unit that refers to the texture distribution index and identifies and outputs the product-specific information of a non-standard product that approximates the color / texture to the implementation product,
A color / texture management system that performs data communication of the storage unit, nonstandard product distribution calculation unit, implementation product distribution calculation unit, color / texture calculation unit, and output unit via the Internet.

本発明の第3発明は、データベースを有し、色・質感を管理する管理サーバーと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する撮像部が、規格外品から取得した3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを記憶し、インターネットを介して前記管理サーバーに送信する第1クライアントと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する撮像部が、実施品から取得した3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを記憶し、インターネットを介して前記管理サーバーに送信する第2クライアントと、
インターネットを介して前記第1及び第2クライアントから3バンド視覚感度画像S1i,S2i,S3iを受信し、データベースに記憶する管理サーバーと、
を備え、
前記規格外品と、実施品の3バンド視覚感度画像S1i,S2i,S3iから、それぞれ、前記3バンド視覚感度画像S1i,S2i,S3iの各画素のXYZ値、又は、該XYZ値より正規化されたxy値を記憶し、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品と実施品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに記憶し、
前記規格外品の前記分布については、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶し、
前記規格外品の前記分布と、前記実施品に係る分布を比較判定し、質感分布指標を演算し、
該指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を前記第1クライアントから出力する、
ことが好ましい。
A third invention of the present invention comprises a management server having a database and managing color and texture;
An imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities acquired from non-standard products. A first client that stores the three-band visual sensitivity images S1i, S2i, S3i and transmits them to the management server via the Internet;
An imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities acquired from the product 3 A second client for storing the band visual sensitivity images S1i, S2i, S3i and transmitting the images to the management server via the Internet;
A management server for receiving three-band visual sensitivity images S1i, S2i, S3i from the first and second clients via the Internet and storing them in a database;
With
The non-standard product and the three-band visual sensitivity images S1i, S2i, and S3i of the product are normalized by the XYZ values of the respective pixels of the three-band visual sensitivity images S1i, S2i, and S3i, or the XYZ values, respectively. Store the xy value,
An xy chromaticity histogram distribution created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the non-standard product and the implemented product belonging to each grid. , XYZ chromaticity histogram three-dimensional distribution, or Lab chromaticity histogram three-dimensional distribution is stored in the database of the management server,
For the distribution of the non-standard product, store the color space histogram distribution and the corresponding product specific information in association with each other,
Compare and determine the distribution of the non-standard product and the distribution related to the implementation product, calculate a texture distribution index,
With reference to the index, the product-specific information of a non-standard product whose color / texture approximates the implementation product is output from the first client.
It is preferable.

前記管理サーバーで前記分布の演算をすることに代えて、前記第1クライアントと第2クライアントが、前記3バンド視覚感度画像S1i,S2i,S3i、及び、該画像から演算された前記分布を、インターネットを介して、当該データを前記管理サーバーに送信することが好ましい。   Instead of calculating the distribution at the management server, the first client and the second client may use the three-band visual sensitivity images S1i, S2i, S3i and the distribution calculated from the images as Internet It is preferable to transmit the data to the management server via

前記規格外品にタグを付設し、該タグに前記規格外品の前記分布と、前記製品固有情報を記憶させることが好ましい。   Preferably, a tag is attached to the non-standard product, and the distribution of the non-standard product and the product-specific information are stored in the tag.

「タグ」は、ICタグ、バーコード、QRコード(登録商標)等、適宜のものを選択できる。   As the “tag”, an appropriate tag such as an IC tag, a barcode, a QR code (registered trademark), or the like can be selected.

前記タグに記憶され、読み出された規格外品に属する分布と、前記実施品に係る分布を比較判定し、色・質感が前記実施品に近似する前記規格外品の製品固有情報を前記第2クライアントに送信することが好ましい。   The distribution belonging to the non-standard product stored in the tag and read out is compared with the distribution related to the implementation product, and the product-specific information of the non-standard product whose color / texture approximates the implementation product is determined. It is preferable to send to two clients.

前記第1クライアントが、
第1色温度測定センサーにより色温度を測定する色温度測定部を備え、
前記第2クライアントが、
第2色温度測定センサーにより色温度を測定する色温度測定部を備え、
前記第1及び第2色温度測定センサーの測定値に基づいて、前記規格外品と前記実施品の3バンド視覚感度画像S1i,S2i,S3iについて、色温度補正がなされた補正画像に変換する照明色変換補正部と、
を備えたことが好ましい。
The first client is
A color temperature measuring unit for measuring the color temperature by the first color temperature measuring sensor;
The second client is
A color temperature measuring unit for measuring the color temperature by the second color temperature measuring sensor;
Illumination that converts the three-band visual sensitivity images S1i, S2i, and S3i of the non-standard product and the practical product into corrected images that have undergone color temperature correction based on the measurement values of the first and second color temperature measurement sensors. A color conversion correction unit;
It is preferable to have provided.

本発明の第4発明は、CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第1撮像部により、規格外品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し記憶する記憶ステップと、
前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、XYZ表色系の色空間に対応する座標を記憶し、前記座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、データベースに、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布演算ステップと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第2撮像部により、実施品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、前記実施品の3バンド視覚感度画像S1i,S2i,S3iから、XYZ表色系の色空間に対応する座標を記憶し、前記座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、該色空間ヒストグラム分布を記憶する実施品分布演算ステップと、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算ステップと、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、出力する出力ステップと、を備え、
前記記憶部、規格外品分布演算部、実施品分布演算部、色・質感演算部、及び前記出力部のデータ通信をインターネットを介して行うことを特徴とする色・質感管理方法。
According to a fourth aspect of the present invention, the first imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), and S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function is used. A storage step of acquiring and storing three-band visual sensitivity images S1i, S2i, S3i having three spectral sensitivities from the product;
The coordinates corresponding to the color space of the XYZ color system are stored from the non-standard three-band visual sensitivity images S1i, S2i, S3i, the coordinates are partitioned by grids, and the number of pixels of the inspection surface belonging to each grid is determined. A non-standard product distribution calculation step of creating a color space histogram distribution of the XYZ color system by integrating and storing the color space histogram distribution and product-specific information corresponding to the database in association with each other;
The second imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from the actual product. Band visual sensitivity images S1i, S2i, and S3i are acquired, coordinates corresponding to the color space of the XYZ color system are stored from the three-band visual sensitivity images S1i, S2i, and S3i of the above-described product, and the coordinates are partitioned by a grid. Then, by integrating the number of pixels of the inspection surface belonging to each grid, to create a color space histogram distribution of the XYZ color system, and to store the color space histogram distribution, an implementation product distribution calculation step,
A texture distribution index calculation step of comparing and determining the distribution of the non-standard product and the distribution of the implementation product and calculating a texture distribution index;
An output step of identifying and outputting the product-specific information of a non-standard product whose color / texture approximates the implemented product with reference to the texture distribution index,
A color / texture management method, wherein data communication of the storage unit, non-standard product distribution calculation unit, implementation product distribution calculation unit, color / texture calculation unit, and output unit is performed via the Internet.

本発明の第5発明は、CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第1撮像部により、規格外品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、該3バンド視覚感度画像S1i,S2i,S3iの各画素のXYZ値、又は、該XYZ値より正規化されたxy値を記憶する記憶ステップと、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布演算ステップと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第2撮像部により、実施品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を演算する実施品分布演算ステップと、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算ステップと、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、出力する出力ステップと、を備え、
前記記憶、規格外品分布演算、実施品分布演算、色・質感演算、及び出力部のデータ送受信をインターネットを介して行うステップと、を備えたことを特徴とする色・質感管理システムである。
According to a fifth aspect of the present invention, the first imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function is used. Three-band visual sensitivity images S1i, S2i, S3i having three spectral sensitivities are obtained from the product, and the three-band visual sensitivity images S1i, S2i, S3i are obtained from the non-standard three-band visual sensitivity images S1i, S2i, S3i. A storage step of storing the XYZ value of each of the pixels or the xy value normalized from the XYZ value;
xy chromaticity histogram distribution, XYZ color created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the nonstandard product belonging to each grid A non-standard product distribution calculation step of storing a color histogram histogram three-dimensional distribution or a Lab chromaticity histogram three-dimensional distribution in the management server database in association with the product-specific information corresponding to the color space histogram distribution;
The second imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from the actual product. Band visual sensitivity images S1i, S2i, S3i are acquired, and the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram are partitioned by a grid, and the number of pixels of the nonstandard product belonging to each grid is integrated. A product distribution calculation step for calculating the xy chromaticity histogram distribution, the XYZ chromaticity histogram three-dimensional distribution, or the Lab chromaticity histogram three-dimensional distribution created by
A texture distribution index calculation step of comparing and determining the distribution of the non-standard product and the distribution of the implementation product and calculating a texture distribution index;
An output step of identifying and outputting the product-specific information of a non-standard product whose color / texture approximates the implemented product with reference to the texture distribution index,
A color / texture management system comprising: storing, non-standard product distribution calculation, implementation product distribution calculation, color / texture calculation, and data transmission / reception of an output unit via the Internet.

本発明の第6発明は、CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する撮像部が、規格外品から取得した3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを記憶し、インターネットを介して、第1クライアントから管理サーバーに送信する第1送信ステップと、
前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、該3バンド視覚感度画像S1i,S2i,S3iの各画素のXYZ値、又は、該XYZ値より正規化されたxy値を記憶する記憶ステップと、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布記憶ステップと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する撮像部が、実施品から取得した3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを記憶し、インターネットを介して、第2クライアントから管理サーバーに送信する第2送信ステップと、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに記憶する実施品記憶ステップと、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算ステップと、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、前記第1クライアントから出力する出力ステップと、
を備えることを特徴とする色・質感管理方法である。
According to a sixth aspect of the present invention, there is provided an imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function from a nonstandard product. A first transmission step of storing the acquired three-band visual sensitivity images S1i, S2i, S3i having the three spectral sensitivities and transmitting them from the first client to the management server via the Internet;
From the non-standard three-band visual sensitivity images S1i, S2i, S3i, the XYZ values of the pixels of the three-band visual sensitivity images S1i, S2i, S3i, or the xy values normalized from the XYZ values are stored. A memory step;
xy chromaticity histogram distribution, XYZ color created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the nonstandard product belonging to each grid A non-standard product distribution storage step of storing the color space histogram distribution and the product specific information corresponding to the color space histogram distribution in the database of the management server;
An imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities acquired from the product 3 A second transmission step of storing the band visual sensitivity images S1i, S2i, S3i, and transmitting them from the second client to the management server via the Internet;
xy chromaticity histogram distribution, XYZ color created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the nonstandard product belonging to each grid An implementation product storage step of storing the degree histogram three-dimensional distribution or the Lab chromaticity histogram three-dimensional distribution in the database of the management server;
A texture distribution index calculation step of comparing and determining the distribution of the non-standard product and the distribution of the implementation product and calculating a texture distribution index;
Referring to the texture distribution index, specifying the product-specific information of a non-standard product whose color / texture approximates the implemented product, and outputting from the first client;
A color / texture management method characterized by comprising:

前記管理サーバーで前記分布の演算をすることに代えて、前記第1クライアントと第2クライアントが、前記3バンド視覚感度画像S1i,S2i,S3i、及び、該画像から演算された前記分布を、インターネットを介して、当該データを前記管理サーバーに送信するステップを備えることを特徴とする。   Instead of calculating the distribution at the management server, the first client and the second client may use the three-band visual sensitivity images S1i, S2i, S3i and the distribution calculated from the images as Internet And transmitting the data to the management server via the network.

前記規格外品記憶ステップが、
前記規格外品にタグを付設し、該タグに前記規格外品の前記分布と、前記製品固有情報を記憶させるタグ情報記憶ステップを備え、
前記出力ステップが、
前記タグに記憶された規格外品の前記分布と、前記実施品の前記分布を比較判定し、色・質感が前記実施品に近似する前記規格外品の製品固有情報を出力するタグ出力ステップと、を備えることが好ましい。
The non-standard product storage step includes:
A tag information storing step of attaching a tag to the non-standard product, and storing the distribution of the non-standard product and the product-specific information in the tag;
The output step comprises:
A tag output step of comparing and determining the distribution of non-standard products stored in the tag and the distribution of the implementation products, and outputting product-specific information of the non-standard products whose color / texture approximates the implementation products; Are preferably provided.

前記第1送信ステップが、
第1色温度測定センサーにより色温度を測定する色温度測定ステップを備え、
前記第2送信ステップが、
第2色温度測定センサーにより色温度を測定する色温度測定ステップを備え、
前記第1及び第2色温度測定センサーの測定値に基づいて、前記規格外品と前記実施品の3バンド視覚感度画像S1i,S2i,S3iについて、色温度補正がなされた補正画像に変換する照明色変換補正ステップと、
を備えたことが好ましい。
The first transmission step includes
A color temperature measurement step of measuring the color temperature by the first color temperature measurement sensor;
The second transmission step includes
A color temperature measuring step of measuring a color temperature by a second color temperature measuring sensor;
Illumination that converts the three-band visual sensitivity images S1i, S2i, and S3i of the non-standard product and the practical product into corrected images that have undergone color temperature correction based on the measurement values of the first and second color temperature measurement sensors. A color conversion correction step;
It is preferable to have provided.

本発明は、規格に不適合となった規格外品を活用し、色・質感の適切なマッチングを行い、製造コストを削減するとともに、資源の有効活用を達成することができる。   The present invention makes it possible to use a non-standard product that does not conform to the standard, perform an appropriate color / texture matching, reduce the manufacturing cost, and achieve effective use of resources.

本発明の色・質感管理システムのブロック図である。It is a block diagram of the color / texture management system of the present invention. 本発明実施形態1の色・質感管理システム1のブロック図である。1 is a block diagram of a color / texture management system 1 according to Embodiment 1 of the present invention. FIG. 本発明実施形態1の色・質感管理システム1を適用した住宅用色・質感管理システムの説明図である。It is explanatory drawing of the color / texture management system for houses which applied the color / texture management system 1 of Embodiment 1 of this invention. 本発明実施形態1の2次元色彩計の接続ブロック図である。It is a connection block diagram of the two-dimensional colorimeter of Embodiment 1 of the present invention. 本発明実施形態1におけるXYZ表色系カメラである2次元色彩計2の分光感度を示す関数である。It is a function which shows the spectral sensitivity of the two-dimensional colorimeter 2 which is an XYZ color system camera in Embodiment 1 of this invention. 本発明実施形態1において三つの分光感度(S1(λ)、S2(λ)、S3(λ))に従って画像を取得する方式の具体例である。(a)はダイクロイックミラーを用いる場合の説明図である。(b)はフィルタターレットを用いる場合の説明図である。(c)は光学フィルタ22a、22b、22cを撮像素子23に微視的に貼着した場合の説明図である。This is a specific example of a method for acquiring an image according to three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) in Embodiment 1 of the present invention. (A) is explanatory drawing in the case of using a dichroic mirror. (B) is explanatory drawing in the case of using a filter turret. (C) is explanatory drawing at the time of attaching optical filter 22a, 22b, 22c to the image pick-up element 23 microscopically. 本発明実施形態1の色・質感管理システム1の管理サーバー6のブロック図である。It is a block diagram of the management server 6 of the color and texture management system 1 of Embodiment 1 of this invention. 本発明実施形態1の2次元色彩計2におけるフローチャートである。It is a flowchart in the two-dimensional color meter 2 of Embodiment 1 of this invention. 本発明実施形態1の演算部62におけるフローチャートである。It is a flowchart in the calculating part 62 of this invention Embodiment 1. FIG. 本発明実施形態1の演算部62におけるサブーチャートである。It is a sub chart in the calculating part 62 of this invention Embodiment 1. FIG. 本発明実施形態1の演算部62における、xy座標空間におけるシフト処理を示す説明図である。It is explanatory drawing which shows the shift process in xy coordinate space in the calculating part 62 of this invention Embodiment 1. FIG. (a)は発明実施形態1の演算部62における検査領域Tを示す説明図、(b)は検査領域Tに対応する色度図上の検査領域Kを示すxy色度図、(c)は格子Gで区画された検査領域Kの説明図、(d)はxy2次元色度図上での色度の重なりの様子を示す模式図、(e)はミニマム分布を示す説明図、(f)はxy色度ヒストグラム分布の一例を示す説明図である。(A) is explanatory drawing which shows the test | inspection area | region T in the calculating part 62 of invention Embodiment 1, (b) is xy chromaticity diagram which shows the test | inspection area K on the chromaticity diagram corresponding to the test | inspection area T, (c) is. An explanatory diagram of the inspection region K partitioned by the grid G, (d) is a schematic diagram showing the state of chromaticity overlapping on the xy two-dimensional chromaticity diagram, (e) is an explanatory diagram showing a minimum distribution, (f) FIG. 6 is an explanatory diagram illustrating an example of an xy chromaticity histogram distribution. (a)は表面の粗さ度を示す説明図、(b)はxy色度ヒストグラム分布図、(c)はxy色度ヒストグラム分布の立体イメージ図である。(A) is explanatory drawing which shows the roughness of the surface, (b) is an xy chromaticity histogram distribution diagram, (c) is a three-dimensional image diagram of the xy chromaticity histogram distribution. 本発明実施形態2の色・質感管理システムの演算部62におけるフローチャート(XYZ色空間分布)である。It is a flowchart (XYZ color space distribution) in the calculating part 62 of the color and texture management system of Embodiment 2 of this invention. 本発明実施形態2の色・質感管理システムの演算部62におけるフローチャート(Lab色空間分布)である。It is a flowchart (Lab color space distribution) in the calculating part 62 of the color and texture management system of Embodiment 2 of this invention. 本発明実施形態3の色・質感管理システムのxy座標空間におけるシフト処理を示す説明図である。It is explanatory drawing which shows the shift process in xy coordinate space of the color and texture management system of Embodiment 3 of this invention. 本発明実施形態3の色・質感管理システムのLab座標空間におけるシフト処理を示す説明図である。It is explanatory drawing which shows the shift process in the Lab coordinate space of the color and texture management system of Embodiment 3 of this invention. 本発明実施形態4の色・質感管理システムの説明図1である。It is explanatory drawing 1 of the color and texture management system of Embodiment 4 of this invention. 本発明実施形態4の色・質感管理システムの説明図2である。It is explanatory drawing 2 of the color and texture management system of Embodiment 4 of this invention. 本発明実施形態5の色・質感管理システムの微小光学系による色補正を行う場合の構成図である。It is a block diagram in the case of performing the color correction by the micro optical system of the color / texture management system of Embodiment 5 of the present invention. 本発明実施形態6の色・質感管理システムの管理サーバーにおけるフローチャートである。It is a flowchart in the management server of the color and texture management system of Embodiment 6 of this invention. 本発明実施形態6の照明色変換補正部の処理のフローチャートである。It is a flowchart of a process of the illumination color conversion correction | amendment part of Embodiment 6 of this invention. 本発明実施形態6の照明色変換補正部の処理の説明図である。It is explanatory drawing of the process of the illumination color conversion correction | amendment part of Embodiment 6 of this invention. 本発明実施形態6の照明色変換補正部の処理の説明図である。It is explanatory drawing of the process of the illumination color conversion correction | amendment part of Embodiment 6 of this invention. 本発明実施形態7の色・質感管理システム1のブロック図である。It is a block diagram of the color and texture management system 1 of Embodiment 7 of this invention. 本発明実施例1の検査結果の説明図である。It is explanatory drawing of the test result of this invention Example 1. FIG. 本発明実施例2の検査結果の説明図である。It is explanatory drawing of the test result of this invention Example 2. FIG.

本発明の好適な実施形態1による色・質感管理システム1は、住宅JのタイルTの色・質感管理に適用した例であるので、図2〜図17を参照して説明する。   The color / texture management system 1 according to the preferred embodiment 1 of the present invention is an example applied to the color / texture management of the tile T of the house J, and will be described with reference to FIGS.

色・質感管理システム1は、図2に示す通り、IE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する2次元色彩計2により、規格外品NGから3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3i(以下、画像Aと略すことがある。)を取得し、記憶する記憶部3を有し、該画像を管理サーバー6に送信する、コンピュータである第1クライアント4を備える。   As shown in FIG. 2, the color / texture management system 1 is a two-dimensional image having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) that are linearly converted equivalent to the IE XYZ color matching functions. The colorimeter 2 has a storage unit 3 for acquiring and storing three-band visual sensitivity images S1i, S2i, and S3i (hereinafter abbreviated as image A) having three spectral sensitivities from a nonstandard product NG. The first client 4 which is a computer for transmitting the image to the management server 6 is provided.

色・質感管理システム1は、規格外品NGの3バンド視覚感度画像S1i,S2i,S3iから、XYZ表色系の色空間に対応する座標を記憶する前記座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、データベースDBに、当該色空間ヒストグラム分布と対応する製品固有情報IDと、を関連づけて記憶する規格外品分布演算部5を有する管理サーバー6を備える。   The color / texture management system 1 divides the coordinates for storing the coordinates corresponding to the color space of the XYZ color system from the three-band visual sensitivity images S1i, S2i, S3i of the non-standard product NG with each grid. By adding up the number of pixels of the inspection surface to which it belongs, a color space histogram distribution of the XYZ color system is created and stored in the database DB in association with the product unique information ID corresponding to the color space histogram distribution A management server 6 having a product distribution calculation unit 5 is provided.

第1クライアント4により、タグ15にも、規格外品NGの3バンド視覚感度画像S1i,S2i,S3i(XYZ値でもよい)、及び/又は、作成された色空間ヒストグラム分布、及び/又は、対応する製品固有情報IDを記憶する。   By the first client 4, the tag 15 also has a non-standard NG three-band visual sensitivity image S 1 i, S 2 i, S 3 i (XYZ values may be used) and / or a created color space histogram distribution and / or correspondence The product unique information ID to be stored is stored.

ここでいう規格外品NGは、タイルメーカーの製造工場Mで製造され、検査工程で規格に適合するかどうか、検査した結果、不合格とされたものである。   The non-standard product NG here is manufactured at a manufacturing factory M of a tile maker, and is rejected as a result of inspection as to whether it conforms to the standard in the inspection process.

CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する2次元色彩計7により、実施品Wから3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、第2クライアント8に記憶し、該3バンド視覚感度画像S1i,S2i,S3iを第2クライアント8が管理サーバー6に送信する。   The two-dimensional colorimeter 7 having three spectral sensitivities (S1 (λ), S2 (λ), and S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function is used to obtain three spectral sensitivities from the product W. The three-band visual sensitivity images S1i, S2i, and S3i are acquired and stored in the second client 8, and the second client 8 transmits the three-band visual sensitivity images S1i, S2i, and S3i to the management server 6.

管理サーバー6は、実施品Wの3バンド視覚感度画像S1i,S2i,S3i(以下、画像をBと略すことがある。)から、XYZ表色系の色空間に対応する座標を記憶する。当該座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、該色空間ヒストグラム分布を記憶する実施品分布演算部9を有する。   The management server 6 stores coordinates corresponding to the color space of the XYZ color system from the three-band visual sensitivity images S1i, S2i, S3i (hereinafter, the image may be abbreviated as B) of the implementation product W. An actual product distribution calculation unit 9 that creates a color space histogram distribution of the XYZ color system by storing the coordinates by dividing the coordinates with a grid and integrating the number of pixels of the inspection surface belonging to each grid, and stores the color space histogram distribution. Have

管理サーバー6は、前記規格外品の前記分布と、実施品Wの前記分布を比較判定し、質感分布指数を演算する質感分布指数演算部10を有する。   The management server 6 includes a texture distribution index calculation unit 10 that compares and determines the distribution of the non-standard product and the distribution of the implementation product W and calculates a texture distribution index.

色・質感管理システム1は、前記質感分布指数を参照して、前記実施品Wに色・質感が近似する規格外品NGの前記製品固有情報IDを特定する出力部11を有するコンピュータである第3クライアント12を備える。第3クライアント12は物流倉庫会社が有している。   The color / texture management system 1 is a computer having an output unit 11 that identifies the product-specific information ID of a nonstandard product NG whose color / texture approximates the implementation product W with reference to the texture distribution index. 3 clients 12 are provided. The third client 12 is owned by a distribution warehouse company.

色・質感管理システム1は、第1クライアント4、管理サーバー6、第2クライアント8、及び第3クライアント12のデータ通信をインターネットIを介して行うことを特徴とする。   The color / texture management system 1 is characterized in that data communication of the first client 4, the management server 6, the second client 8, and the third client 12 is performed via the Internet I.

2次元色彩計2の分光感度はルータ条件を満たすものであって、その分光感度(S1(λ)、S2(λ)、S3(λ))は、図5に示す通り、XYZ等色関数から、負の値を持たず、単独ピークを持つ山形であり、それぞれの分光感度曲線のピーク値が等しく、かつ分光感度の曲線の重なりはできるだけ少なくするという条件から等価変換したものである。分光感度(S1(λ)、S2(λ)、S3(λ))は具体的には以下の特性を持つ。

ピーク波長 半値幅 1/10幅
S1 582nm 523〜629nm 491〜663nm
S2 543nm 506〜589nm 464〜632nm
S3 446nm 423〜478nm 409〜508nm
The spectral sensitivity of the two-dimensional colorimeter 2 satisfies the router condition, and the spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) are obtained from XYZ color matching functions as shown in FIG. This is a mountain shape having no negative value and having a single peak, and is equivalently converted from the condition that the peak values of the respective spectral sensitivity curves are equal and the overlapping of spectral sensitivity curves is minimized. Specifically, the spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) have the following characteristics.
Peak wavelength Half width 1/10 width S1 582nm 523-629nm 491-663nm
S2 543nm 506-589nm 464-632nm
S3 446 nm 423-478 nm 409-508 nm

上記の分光特性S1のピーク波長を580±4nm、分光特性S2のピーク波長を543±3nm、分光特性S3のピーク波長を446±7nmとして取り扱うこともできる。   The peak wavelength of the spectral characteristic S1 can be handled as 580 ± 4 nm, the peak wavelength of the spectral characteristic S2 is 543 ± 3 nm, and the peak wavelength of the spectral characteristic S3 can be handled as 446 ± 7 nm.

三つの分光感度(S1(λ)、S2(λ)、S3(λ))は次の数式1を用いて求められるものである。分光特性自体についての詳細は特開2005−257827号公報等を参照されたい。
The three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) are obtained using the following Equation 1. For details on the spectral characteristics themselves, refer to Japanese Patent Application Laid-Open No. 2005-257827.

2次元色彩計2の仕様は、例えば、有限会社パパラボの2次元色彩計RC-500であり、有効頻度値約500万画素、有効面積9.93mm×8.7mm、画像サイズ3.45μm×3.45μm、ビデオ出力12Bit、カメラインターフェイスGigE、フレーム数(ピント調整時)3〜7フレーム/Sec、シャッタースピード1/15,600Sec〜1/15Sec、積算時間3秒まで、S/N比60dB以上、レンズマウントFマウント、動作温度0℃〜40℃、動作湿度20%〜80%である。   The specifications of the two-dimensional color meter 2 are, for example, the two-dimensional color meter RC-500 of the limited company Paparabo, effective frequency value of about 5 million pixels, effective area 9.93mm × 8.7mm, image size 3.45μm × 3.45μm, video Output 12Bit, camera interface GigE, number of frames (during focus adjustment) 3 to 7 frames / Sec, shutter speed 1 / 15,600Sec to 1 / 15Sec, integration time up to 3 seconds, S / N ratio 60dB or more, lens mount F mount, The operating temperature is 0 ° C to 40 ° C and the operating humidity is 20% to 80%.

2次元色彩計2は、図4に示すように、撮影レンズ21と、この撮影レンズ21の後方に配置された三つの光学フィルタ22a、22b、22cと、光学フィルタ22a、22b、22cの後方に配置された撮像素子23(CCD、CMOSなど)と、を備えている。2次元色彩計2の三つの分光感度(S1(λ)、S2(λ)、S3(λ))は、光学フィルタ22a、22b、22cの分光透過率と撮像素子23の分光感度との積により与えられるものである。図4における光学フィルタ22a、22b、22cと撮像素子23との配列的関係は模式的に示したものにすぎない。三つの分光感度(S1(λ)、S2(λ)、S3(λ))に従って画像を取得する方式について以下に具体例を挙げるが、本実施形態1ではこれらのうちいずれをも採ることができ、また、その他の方式を採ることもできる。   As shown in FIG. 4, the two-dimensional colorimeter 2 has a photographing lens 21, three optical filters 22a, 22b, and 22c arranged behind the photographing lens 21, and a rear of the optical filters 22a, 22b, and 22c. And an image pickup device 23 (CCD, CMOS, etc.) arranged. The three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) of the two-dimensional colorimeter 2 are obtained by multiplying the spectral transmittances of the optical filters 22a, 22b, 22c and the spectral sensitivity of the image sensor 23. Is given. The arrangement relationship between the optical filters 22a, 22b, and 22c and the image sensor 23 in FIG. 4 is merely schematically shown. Specific examples of methods for acquiring images according to the three spectral sensitivities (S1 (λ), S2 (λ), and S3 (λ)) will be given below. In the first embodiment, any of these can be adopted. Also, other methods can be adopted.

図6(a)に示すものはダイクロイックミラーを用いる方式である。これはダイクロイックミラー22c´により特定の波長の光を反射し、透過した残りの光について、さらに別のダイクロイックミラー22a´により別の特定の波長の光を反射して分光し、撮像素子23a、23b、23cを三つ並列にして読み出す方式である。ここでは、ダイクロイックミラー22a´が光学フィルタ22a、22bに相当し、ダイクロイックミラー22c´が光学フィルタ22cに相当する。撮影レンズ21から入射する光はダイクロイックミラー22c´により分光感度S3に従う光が反射され、残りの光は透過する。ダイクロイックミラー22c´により反射された光を反射鏡26により反射して撮像素子23cにより分光感度S3を得る。一方、ダイクロイックミラー22c´を透過した光は、ダイクロイックミラー22a´において、分光感度S1に従う光が反射され、残りの分光感度S2に従う光は透過するため、それぞれ撮像素子23a、撮像素子23bにより撮像して分光感度S1、S2を得る。ダイクロイックミラーに代えて同様な特性を有するダイクロイックプリズムを用いて三つに分光し、それぞれの光が透過する位置に撮像素子23a、23b、23cを接着することとしてもよい。   FIG. 6A shows a system using a dichroic mirror. This is because light of a specific wavelength is reflected by the dichroic mirror 22c ′, and the remaining light that has been transmitted is further reflected by another dichroic mirror 22a ′ to be spectrally separated, and the image pickup devices 23a, 23b. , 23c are read in parallel. Here, the dichroic mirror 22a ′ corresponds to the optical filters 22a and 22b, and the dichroic mirror 22c ′ corresponds to the optical filter 22c. Light incident from the photographic lens 21 is reflected by the dichroic mirror 22c ′ according to the spectral sensitivity S3, and the remaining light is transmitted. The light reflected by the dichroic mirror 22c ′ is reflected by the reflecting mirror 26, and the spectral sensitivity S3 is obtained by the imaging device 23c. On the other hand, the light transmitted through the dichroic mirror 22c ′ is reflected by the dichroic mirror 22a ′, and the light according to the spectral sensitivity S1 is reflected, and the remaining light according to the spectral sensitivity S2 is transmitted. Therefore, the light is captured by the image sensor 23a and the image sensor 23b, respectively. To obtain the spectral sensitivities S1 and S2. Instead of the dichroic mirror, a dichroic prism having the same characteristics may be used to split the light into three, and the image sensors 23a, 23b, and 23c may be bonded to the positions where each light is transmitted.

図6(b)に示すものはフィルタターレット27を用いる方式である。撮影レンズ21からの入射光と同じ方向を回転軸に持つフィルタターレット27に光学フィルタ22a、22b、22cを設けてこれらを機械的に回転させ、順次透過する光について撮像素子23により三つの分光感度S1、S2、S3を得るものである。   FIG. 6B shows a system using a filter turret 27. Optical filters 22a, 22b, and 22c are provided on a filter turret 27 having the same direction as the incident light from the photographing lens 21 as a rotation axis, and these are mechanically rotated. S1, S2, and S3 are obtained.

図6(c)に示すものは光学フィルタ22a、22b、22cを撮像素子23に微視的に貼着する方式である。撮像素子23上における光学フィルタ22a、22b、22cは、ベイヤー配列型に設けられる。この配列は、格子状に分けた撮像素子23上の領域のうち半分に光学フィルタ22bを設け、残りの半分の領域に光学フィルタ22aと光学フィルタ22cとをそれぞれ均等に配置するものである。すなわち、配置量は光学フィルタ22a:光学フィルタ22b:光学フィルタ22c=1:2:1となる。光学フィルタ22a、22b、22cの配列をベイヤー配列以外のものとすることは本実施形態1において特に妨げられない。一つ一つの光学フィルタ22a、22b、22cは非常に微細であるため、印刷により撮像素子23に貼着される。ただし、本発明はこの配列に意味があるのではなく、分光感度(S1(λ)、S2(λ)、S3(λ))の特性のフィルタを撮像素子に貼着することにある。   FIG. 6C shows a system in which the optical filters 22 a, 22 b, and 22 c are microscopically attached to the image sensor 23. The optical filters 22a, 22b, and 22c on the image sensor 23 are provided in a Bayer array type. This arrangement is such that the optical filter 22b is provided in half of the area on the image sensor 23 divided into a grid, and the optical filter 22a and the optical filter 22c are equally arranged in the remaining half of the area. That is, the arrangement amount is optical filter 22a: optical filter 22b: optical filter 22c = 1: 2: 1. The arrangement of the optical filters 22a, 22b, and 22c other than the Bayer arrangement is not particularly hindered in the first embodiment. Each of the optical filters 22a, 22b, and 22c is very fine and is attached to the image sensor 23 by printing. However, in the present invention, this arrangement is not meaningful, but a filter having characteristics of spectral sensitivity (S1 (λ), S2 (λ), S3 (λ)) is attached to the image sensor.

管理サーバー6は、第1クライアント4、第2クライアント8、及び第3クライアント12とインターネットを介して通信する。基本的には双方向の通信であるが適宜一方向通信とすることも可能である。管理サーバー6は、図7に示す通り、入出力インタフェース61と、演算部62と、記憶部63と、表示部64と、バスライン65と、を備えている。演算部62は前述の実施品分布演算部9、質感分布指数演算部10、規格外品分布演算部5を備える。演算部62はCPU,ROM,RAM,入出力インタフェース等を備えている。記憶部63は、ハードディスクから構成される。   The management server 6 communicates with the first client 4, the second client 8, and the third client 12 via the Internet. Basically, the communication is bi-directional, but it is possible to make one-way communication as appropriate. As illustrated in FIG. 7, the management server 6 includes an input / output interface 61, a calculation unit 62, a storage unit 63, a display unit 64, and a bus line 65. The calculation unit 62 includes the above-described implementation product distribution calculation unit 9, texture distribution index calculation unit 10, and nonstandard product distribution calculation unit 5. The calculation unit 62 includes a CPU, a ROM, a RAM, an input / output interface, and the like. The storage unit 63 is composed of a hard disk.

2次元色彩計2は分光感度(S1(λ)、S2(λ)、S3(λ))により取得した画像Aを演算部62に送信し、演算部62でXYZ表色系における三刺激値X、Y、Zに変換し、取得した三刺激値X、Y、Zによる画像Aを変換処理による演算処理を行い、視覚化処理された画像を表示する表示装置(図示略)を備える。2次元色彩計7も同様の構成であるので、説明は援用する。   The two-dimensional colorimeter 2 transmits the image A acquired by the spectral sensitivity (S1 (λ), S2 (λ), S3 (λ)) to the calculation unit 62, and the calculation unit 62 uses the tristimulus value X in the XYZ color system. , Y, Z, and a display device (not shown) that performs an arithmetic process by the conversion process on the image A obtained by the tristimulus values X, Y, Z and displays the visualized image. Since the two-dimensional colorimeter 7 has the same configuration, the description is incorporated.

演算部62は2次元色彩計2、7により、それぞれ、取得した画像A,Bの任意の位置における輝度、色度等を演算し視覚化処理するものである。規格外品NG、実施品Wの表面の斜めから照明を照射し、xy、XYZ、又は、Lab色度分布データ同士を比較して指数化する。   The calculation unit 62 calculates the luminance, chromaticity, and the like at arbitrary positions of the acquired images A and B by the two-dimensional colorimeters 2 and 7, respectively, and performs a visualization process. Illumination is applied from obliquely on the surface of the non-standard product NG and the implementation product W, and xy, XYZ, or Lab chromaticity distribution data are compared and indexed.

2次元色彩計2、7で、それぞれ、規格外品NG、実施品Wの表面を、通常、1ヶ所で撮像し、必要に応じて、2次元色彩計2が移動して、他の別の角度で撮像する。ここでは、例えば、正面、左右45度の3箇所(適宜数の箇所でも良い)で撮影することもできる。   With the two-dimensional colorimeters 2 and 7, the surfaces of the non-standard product NG and the implementation product W are usually imaged at one place, and the two-dimensional colorimeter 2 moves as necessary to make another Image at an angle. Here, for example, it is possible to shoot at three locations (an appropriate number of locations may be used) at 45 degrees on the front and left and right.

照明源はキセノンランプ(擬似太陽光)を採用する。照明部はキセノンランプのほかに、フレネルレンズ・アセンブリを備えている。キセノンランプは規格外品NG、実施品Wの表面の斜め上から均一に照らすものとする。キセノンランプ以外にLEDの人工太陽灯でもよい。   The illumination source is a xenon lamp (pseudo sunlight). The lighting unit has a Fresnel lens assembly in addition to the xenon lamp. The xenon lamp is illuminated uniformly from above the surface of the non-standard product NG and the implementation product W. In addition to xenon lamps, LED artificial solar lights may be used.

第1クライアント4の動作について具体例を挙げつつ説明する。図4に示す通り、2次元色彩計2と、管理サーバー6とをインターネットで接続することにより動作する。接続方法は有線・無線を問わず選択できる。2次元色彩計2におけるフローチャートを図8に、演算部62におけるフローチャートを図9に、それぞれ示す。2次元色彩計7も2次元色彩計2と同様な動作を行うので、動作の説明は援用する。   The operation of the first client 4 will be described with a specific example. As shown in FIG. 4, it operates by connecting the two-dimensional colorimeter 2 and the management server 6 via the Internet. The connection method can be selected regardless of wired or wireless. A flowchart in the two-dimensional colorimeter 2 is shown in FIG. 8, and a flowchart in the calculation unit 62 is shown in FIG. Since the two-dimensional colorimeter 7 performs the same operation as the two-dimensional colorimeter 2, the description of the operation is cited.

2次元色彩計2の電源が入ると、図8に示す通り、初期化をする(初期化S1)。つぎに、分光感度(S1(λ)、S2(λ)、S3(λ))により規格外品NGの表面を撮像し(撮像処理S2)、その後、撮像された画像Aを撮像素子23により入力し(S3)、演算部62にて三刺激値X、Y、Zに変換する(変換処理S4)。分光感度(S1(λ)、S2(λ)、S3(λ))は表示装置に送信される(S5)。画像Aが動画である場合には、撮像処理S2からデータ送信S5の一連の処理が連続的に行われる。画像Aは画像表示装置(図示略)に表示される。上記変換処理S4は管理サーバー6の規格外品分布演算部5で行ってもよい。この場合、第1クライアント4は画像AをインターネットIを介して管理サーバ−に送信する。   When the power of the two-dimensional color meter 2 is turned on, initialization is performed as shown in FIG. 8 (initialization S1). Next, the surface of the nonstandard product NG is imaged by the spectral sensitivity (S1 (λ), S2 (λ), S3 (λ)) (imaging processing S2), and then the captured image A is input by the image sensor 23. (S3), and the arithmetic unit 62 converts it into tristimulus values X, Y, and Z (conversion process S4). Spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) are transmitted to the display device (S5). When the image A is a moving image, a series of processes from the imaging process S2 to the data transmission S5 are continuously performed. The image A is displayed on an image display device (not shown). The conversion process S4 may be performed by the non-standard product distribution calculation unit 5 of the management server 6. In this case, the first client 4 transmits the image A to the management server via the Internet I.

撮像処理S2では、規格外品NGの表面を測定する例が挙げられているが、撮像位置が相違する特定領域について、相違する角度にて2次元色彩計2で規格外品NG、実施品Wの表面を撮像する。撮像箇所は複数個所であり、適宜数を選択できる。ここでは、正面(0度)、左45度、右45度の3方向から測定する。また、測定の場所は、2次元色彩計2の0度の光軸は規格外品NGの表面に垂直になる。また、照明は、太陽光と同じく斜め上からの照明である。   In the imaging process S2, an example of measuring the surface of the non-standard product NG is given, but the non-standard product NG and the practical product W are measured with the two-dimensional colorimeter 2 at different angles for specific areas with different imaging positions. Imaging the surface of There are a plurality of imaging locations, and the number can be selected as appropriate. Here, the measurement is made from three directions of front (0 degree), left 45 degrees, and right 45 degrees. In addition, the measurement location is such that the 0-degree optical axis of the two-dimensional colorimeter 2 is perpendicular to the surface of the nonstandard product NG. Moreover, illumination is illumination from diagonally upward like sunlight.

三刺激値X、Y、ZからY´xy表色系への変換式を数式2、3に挙げる。ここでは2次元色彩計2とともに輝度計(図示略)を使用し、Yは輝度計の値(nt)により校正してY´としたものである。色空間の変換式は慣用されているものであるため、その他の詳しい式については割愛する。   Expressions for converting the tristimulus values X, Y, Z to the Y′xy color system are shown in Formulas 2 and 3, respectively. Here, a luminance meter (not shown) is used together with the two-dimensional colorimeter 2, and Y is Y ′ calibrated by the luminance meter value (nt). Since color space conversion formulas are commonly used, other detailed formulas are omitted.

XYZ表色系は、現在CIE標準表色系として各表色系の基礎となっている。光の三原色(R=赤、G=緑、B=青紫)の加法混色の原理に基づいて発展したもので、色度図を使って色をYxyの3つの値で表わす。Yが反射率で明度に対応し、xyが色度になる。
The XYZ color system is currently the basis of each color system as the CIE standard color system. It was developed based on the principle of additive color mixing of the three primary colors of light (R = red, G = green, B = blue-violet), and the color is represented by three values of Yxy using a chromaticity diagram. Y corresponds to lightness by reflectance, and xy becomes chromaticity.

撮像処理S2は、三つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する2次元色彩計2によって規格外品NGの表面を撮像する工程である(図4、図8参照)。分光感度(S1(λ)、S2(λ)、S3(λ))は上記の数式1に従って与えられるものである。撮影レンズ21と光学フィルタ22a、22b、22cと撮像素子23により撮像されると同時に入力処理S3が連続的に行われる。   The imaging process S2 is a process of imaging the surface of the nonstandard product NG with the two-dimensional colorimeter 2 having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) (FIG. 4, FIG. 4). 8). Spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) are given according to the above formula 1. Input processing S3 is continuously performed at the same time as imaging is performed by the imaging lens 21, the optical filters 22a, 22b, and 22c, and the imaging device 23.

入力された画像Aは分光感度(S1(λ)、S2(λ)、S3(λ))に従った値であるため、2次元色彩計2の演算部62における変換処理S4によって、撮像された画像Aを三刺激値X、Y、Zに変換する。この変換は数式1に従って行われる。すなわち、数式1における係数の逆行列を乗じて三刺激値X、Y、Zを得ることとなる。なお、2次元色彩計2からは分光感度(S1(λ)、S2(λ)、S3(λ))に従った値のまま演算部62にインターネットにより送信する。   Since the input image A has values according to the spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)), the image A was captured by the conversion process S4 in the calculation unit 62 of the two-dimensional colorimeter 2. The image A is converted into tristimulus values X, Y, and Z. This conversion is performed according to Equation 1. That is, the tristimulus values X, Y, and Z are obtained by multiplying the inverse matrix of the coefficients in Equation 1. The two-dimensional colorimeter 2 transmits the values according to the spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) to the calculation unit 62 via the Internet.

管理サーバー6に電源が入ると、図9に示す通り、初期化をする(初期化S110)。第1クライアント4及び/又は第2クライアント8から送信された画像A,Bを受信する(S120)。既に変換された三刺激値X、Y、Zを受信していれば、変換は行わず、受信していなければ、受信した画像A,Bから三刺激値X、Y、Zに変換する(S140)。受信の順序は、通常、第1クライアント4が先で、第2クライアント8が後である。そのデータを表示装置(図示略)に送信する(表示処理S150)。2次元色彩計2からS120に従い、変換処理S130から表示処理S150の一連の処理が連続的に行われる。   When the management server 6 is powered on, initialization is performed as shown in FIG. 9 (initialization S110). The images A and B transmitted from the first client 4 and / or the second client 8 are received (S120). If the converted tristimulus values X, Y, and Z have been received, the conversion is not performed. If not, the received images A and B are converted into the tristimulus values X, Y, and Z (S140). ). The order of reception is usually the first client 4 first and the second client 8 later. The data is transmitted to a display device (not shown) (display process S150). In accordance with the two-dimensional colorimeter 2 to S120, a series of processing from the conversion processing S130 to the display processing S150 is continuously performed.

演算処理S140は、実施品Wと規格外品NGの画像A,BのLab平均値及びxy質感分布指数を演算し視覚化処理する工程であり、表示装置に表示するために必要な場合は、色情報をRGB等に変換処理する。   The calculation process S140 is a step of calculating and visualizing the Lab average value and the xy texture distribution index of the images A and B of the implementation product W and the nonstandard product NG, and when necessary to display on the display device, The color information is converted into RGB or the like.

前記の表示処理S150は、視覚化処理された質感分布指数を画像表示装置に表示する工程であり、処理をリターンする。   The display process S150 is a process of displaying the visualized texture distribution index on the image display device, and the process returns.

図10のS140のサブフローチャートを説明する。タイルTの規格外品NGの画像Aを撮像し、記憶し、次に、タイルTの実施品Wの画像Bを撮像し、記憶する。次に、感分布指数を順次計算する。質感を分離した質感分布指数により、質感の類似性を判定する。   A sub-flowchart of S140 in FIG. 10 will be described. The image A of the non-standard product NG of the tile T is captured and stored, and then the image B of the implementation product W of the tile T is captured and stored. Next, the feeling distribution index is sequentially calculated. The similarity of the texture is determined by the texture distribution index from which the texture is separated.

撮像した画像A、Bについて検査したい領域T(図8(a)参照)に対応する検査領域K(図20(b)参照)を設定する(ステップS141)。大きさや場所を自由に設定することができる。   An inspection region K (see FIG. 20B) corresponding to a region T (see FIG. 8A) to be inspected for the captured images A and B is set (step S141). Size and place can be set freely.

色度xyを演算し、色度Yxyを求める(S142)。   The chromaticity xy is calculated to obtain the chromaticity Yxy (S142).

撮像した規格外品NGの画像Aから切り出した領域Kのxy色度ヒストグラム分布を作成する(S143)。この色度ヒストグラム分布は、図12(c)に示す、2つのヒストグラム分布の重なり領域Dに属する画素をカウントした積算数である。   An xy chromaticity histogram distribution of the region K cut out from the image A of the imaged nonstandard product NG is created (S143). This chromaticity histogram distribution is an integrated number obtained by counting pixels belonging to the overlapping region D of two histogram distributions shown in FIG.

xy色度ヒストグラム分布は、上記各単位格子に属数する画素の積算数を示す立体ヒストグラムであり、図12(d)に重なり領域Dを示す。   The xy chromaticity histogram distribution is a three-dimensional histogram showing the cumulative number of pixels belonging to each unit cell, and an overlapping region D is shown in FIG.

図12(c)に示す通り、xy座標の位置での比較対象の色分布を平面的に書いたものであり、検査領域Kを格子Gで区画し、その区画のxy値を有する画素を積算しz軸とするヒストグラム分布を作成する。xy座標を、特定の幅のグリッド(立体マス目)、例えば、xyをそれぞれ1/1000(1000個の線)で切った平面格子とする。ヒストグラムの端から端までスキャンしてゆき、格子Gに区画した領域ごとに、これに属する画素数を同じxy面でそれぞれスキャンしz方向に積算してゆく。また、検査領域Kでxy座標の特定範囲だけを演算すれば、演算時間が短縮できる。グリッドのマス目を細かくすれば精度は上がるが、演算時間が長くなるので、適宜のマス目とする。   As shown in FIG. 12 (c), the color distribution to be compared at the position of the xy coordinates is written in a plane, and the inspection area K is partitioned by the grid G, and the pixels having the xy values of the sections are integrated. Then, a histogram distribution with the z axis is created. Let xy coordinates be a grid (solid grid) of a specific width, for example, a plane lattice obtained by cutting xy by 1/1000 (1000 lines). The histogram is scanned from end to end, and for each region partitioned into the grid G, the number of pixels belonging to this is scanned on the same xy plane and integrated in the z direction. Further, if only the specific range of the xy coordinates is calculated in the inspection region K, the calculation time can be shortened. If the grid cells are made finer, the accuracy will be improved, but the calculation time will be longer.

S143と同様に、タイルTの画像Bのxy色度ヒストグラム分布を作成する(S144)。xy色度ヒストグラム分布は、xy軸がxy色度、z軸が画素の積算数であり、図12(d)に平面的な重なり領域Dを示す。   Similarly to S143, an xy chromaticity histogram distribution of the image B of the tile T is created (S144). In the xy chromaticity histogram distribution, the xy axis is the xy chromaticity, the z axis is the integrated number of pixels, and a planar overlapping region D is shown in FIG.

Labのa軸、b軸、L軸について、それぞれ独立に検査領域Kのすべての画素の総和を取り、その画素数にて、それぞれのL値、a値、b値の総和を割って、Lab色度分布の平均L値、平均a値、平均b値を計算する(S145)。   For the Lab's a-axis, b-axis, and L-axis, the sum of all the pixels in the inspection region K is taken independently, and the sum of the L value, a value, and b value is divided by the number of pixels, and Lab The average L value, average a value, and average b value of the chromaticity distribution are calculated (S145).

下記の数式4により変換したLab空間のLab値を算出する。Lab色空間は補色空間の一種で、明度を意味する次元Lと補色次元のA及びBを持ち、CIEXYZ色空間の座標を非線形に圧縮したものに基づいている。正規化する前のXYZ値からLab値に数式4により変換する。XYZ色空間上での分布に対して、Lab色空間の分布は、明るさ方向も加味した分布が得られる。
The Lab value converted in Lab space is calculated according to Equation 4 below. The Lab color space is a kind of complementary color space, and has a dimension L indicating lightness and complementary color dimensions A and B, and is based on nonlinearly compressed coordinates of the CIEXYZ color space. The XYZ value before normalization is converted into the Lab value by Equation 4. In contrast to the distribution in the XYZ color space, the distribution in the Lab color space can be obtained in consideration of the brightness direction.

数4で、関数fの括弧の中のX,Y,Z の値がそれぞれ白色点の座標Xn,Yn,Znで割ってあるのは,最大値を1に揃えるためである。 In Equation 4, the values of X, Y, and Z in the parentheses of the function f are divided by the white point coordinates X n , Y n , and Z n , respectively, in order to make the maximum value equal to 1.

規格外品NG及び実施品Wの平均値の差分を取り色の相違の判断材料とする。   The difference between the average values of the non-standard product NG and the implementation product W is taken as a material for judging the color difference.

図10に示す通り、xy色度分布の中心座標C、Cを特定する(S146)。ここでは中心座標は図心(重心位置)とする。 As shown in FIG. 10, the center coordinates C 1 and C 2 of the xy chromaticity distribution are specified (S146). Here, the center coordinate is the centroid (center of gravity position).

図10に示す通り、2つのxyヒストグラム分布H(x,y)、H(x,y)のいずれか一方の中心座標を他の中心座標に一致するように、中心座標の偏差ΔF分だけ、xy色度分布全体をシフト(写像)処理する(S147)。いずれか一方の分布を他の分布にシフトさせないと、色成分の差も計算してしまう。グラフ上でも計算だけでもできる。シフト量は適宜設定可能である。例えば、一方の中心から他の中心へのシフトに代えて、一方の中心から他の中心の所定範囲内へのシフトでも同様の効果がある。要は、質感が把握できる適宜のシフト量で接近させればよい。 As shown in FIG. 10, the deviation ΔF of the center coordinates is set so that one of the two xy histogram distributions H 1 (x, y) and H 2 (x, y) matches the other center coordinates. Therefore, the entire xy chromaticity distribution is shifted (mapped) (S147). If one of the distributions is not shifted to the other distribution, the difference between the color components is also calculated. You can do it on the graph or just by calculation. The shift amount can be set as appropriate. For example, the same effect can be obtained by shifting from one center to another center instead of shifting from one center to the other center. In short, it is only necessary to approach with an appropriate shift amount that allows the texture to be grasped.

空間的な広がり度差分を示す質感分布指数と、色差ΔE等の色指数も演算する(S148)。これにより単純にメタリック感の違いだけ抽出して、色度の類似性と、メタリック感の程度を分離して判定し、これを定量化できる。xy色度分布の2次元空間の中で広がり度を演算し、その広がり度の違いを、色のことは除いた、光輝材のキラメキ感の違いとして把握できるので、色と質感とを確実に分離して検出できる。   A texture distribution index indicating a spatial spread difference and a color index such as a color difference ΔE are also calculated (S148). Thus, only the difference in metallic feeling is simply extracted, and the similarity of chromaticity and the degree of metallic feeling are separated and determined, and this can be quantified. The spread degree is calculated in the two-dimensional space of the xy chromaticity distribution, and the difference in the spread degree can be grasped as the difference in glittering feeling of the glittering material, excluding the color. It can be detected separately.

質感分布指数は、下式により計算する。xy色度ヒストグラム分布は、画素の積算数であり、図12(d)に重なり領域D、図12(e)にミニマム分布を示す。
質感分布指数=重なり領域Dに属する画素の積算数/検査領域Kの全体の画素数×100(%)
The texture distribution index is calculated by the following formula. The xy chromaticity histogram distribution is the cumulative number of pixels. FIG. 12D shows the overlap region D, and FIG. 12E shows the minimum distribution.
Texture distribution index = total number of pixels belonging to overlapping region D / total number of pixels in inspection region K × 100 (%)

画像A,Bの2次元空間上での広がり度ヒストグラムを計算し、その配列の同じ位置同士のミニマム値を取ったものが、重なり合い頻度となるため、全体のヒストグラム総和カウントで、この値を割ったもので計算される。   Since the spread degree histogram of the images A and B in the two-dimensional space and the minimum value of the same position in the array is taken is the overlap frequency, this value is divided by the total histogram total count. Calculated with

図12(d)(e)は図12(c)をS−S断面で切り取った1つの断面図であり、xy座標で同じライン上で見た場合には重なり合いがある。立体的に描く代わりに、便宜上、平面で描いている。またヒストグラムであるから、微小な階段形状の分布になっている。図12(d)の積算数Hと積算数Hはそれぞれ画像A、画像Bに対応する。二つのヒストグラム分布を比較すると、重なり領域Dが存在する。 FIGS. 12D and 12E are cross-sectional views of FIG. 12C taken along the line SS, and there is an overlap when viewed on the same line in the xy coordinates. Instead of drawing in three dimensions, it is drawn in a plane for convenience. Moreover, since it is a histogram, it has a minute staircase distribution. Figure 12 (d) of cumulative number H 1 and the accumulated number of H 2 Each image A, corresponding to the image B. When the two histogram distributions are compared, an overlap region D exists.

図12(e)に示す通り、H(x、y)を規格外品NGのxy色度ヒストグラム分布の積算数、H2(x、y)を規格外品NGのxy色度ヒストグラム分布の積算数とすると、重なり合った左側領域ではH>Hで、中央でH=Hとなり、右側ではH<Hである。H,Hのうち、小さい方の積算数(画素頻度)を取ると、左側ではH、右側ではHとなり、階段状のヒストグラム曲線であるミニマム分布が特定できる。これを利用し、重なり領域Dの全体領域に対する割合が演算できる。 As shown in FIG. 12E, H 1 (x 1 , y 1 ) is the cumulative number of xy chromaticity histogram distributions of the nonstandard product NG, and H 2 (x 2 , y 2 ) is the xy color of the nonstandard product NG. When the accumulated number of degrees histogram distribution, in the overlapping left area H 1> H 2, centrally H 1 = H 2, and the on the right side is a H 1 <H 2. If the smaller integrated number (pixel frequency) of H 1 and H 2 is taken, it becomes H 1 on the left side and H 2 on the right side, and a minimum distribution which is a step-like histogram curve can be specified. By using this, the ratio of the overlapping region D to the entire region can be calculated.

このミニマム分布で小さな方の積算値を特定する。HとHのうち、少ない方の積算数を加算演算すれば、重なり領域Dの積算数が演算でき、全体の画素数に対する割合が特定できる。検査領域Kの全体の画素数は決まっており、規格外品NGとタイルTでは、ともに総画素数は同一値である。この割合の演算は全部の格子Gについて3次元的に積算してもよいし、例えば、図12(c)に示す通り、S−S軸に沿って検査領域Kを切り、yが所定値でxが端から端まで変化する場合での画素の積算数の分布を2次元的に積算する。図12(f)が積算結果のxy座標上での2次元マップである。検査領域Kにおいて分布がなく画素数がゼロの場合には演算から除外する。 The smaller integrated value is specified by this minimum distribution. If the smaller integrated number of H 1 and H 2 is added and calculated, the integrated number of the overlapping region D can be calculated, and the ratio to the total number of pixels can be specified. The total number of pixels in the inspection area K is determined, and the non-standard product NG and the tile T both have the same total number of pixels. The calculation of this ratio may be integrated three-dimensionally for all the lattices G. For example, as shown in FIG. 12C, the inspection region K is cut along the SS axis, and y is a predetermined value. The distribution of the cumulative number of pixels when x changes from end to end is two-dimensionally integrated. FIG. 12F is a two-dimensional map on the xy coordinates of the integration result. If there is no distribution in the inspection region K and the number of pixels is zero, it is excluded from the calculation.

最後に、表示・保存処理、送信処理を行い(S149)、処理をリターンする。   Finally, display / save processing and transmission processing are performed (S149), and the processing returns.

例えば、検査領域Kに属する画素を縦100画素×横100画素=10,000画素とする。同じ検査領域Kで画像A,Bを切り取るので、画像Aと画像Bの全体の画素数はともに10,000画素である。xy色度ヒストグラムから、重なり領域Dの画素数を積算し、積算数が5,000個であった場合、質感分布指数は50%となる。質感分布指数が100%を下回るほど質感の相違度が大きくなる。xy値の分布が完全に一致していれば100%となる。これにより、一定以上の数値であると判定された場合に、質感について適合すると判定することができる。   For example, the pixels belonging to the inspection region K are assumed to be 100 vertical pixels × 100 horizontal pixels = 10,000 pixels. Since the images A and B are cut out in the same inspection area K, the total number of pixels of the images A and B is 10,000 pixels. From the xy chromaticity histogram, the number of pixels in the overlapping region D is integrated, and when the integrated number is 5,000, the texture distribution index is 50%. As the texture distribution index falls below 100%, the degree of difference in texture increases. If the distribution of the xy values is completely coincident, 100% is obtained. Thereby, when it determines with it being a numerical value more than fixed, it can determine with matching about a texture.

画像A,Bについて、第1次的に得られる色情報はXYZ等色関数と等価な関数による三つの分光感度(S1(λ)、S2(λ)、S3(λ))であるため、RGBにより取得する場合と比べて人の眼の感度に忠実で高精度である。分光感度(S1(λ)、S2(λ)、S3(λ))の重なり合いは小さく、S/N比も十分にとれ、分光感度の曲線におけるカーブも自然に変化するため、測色における誤差は最低限に留められる。   For the images A and B, the color information obtained primarily is the three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) by a function equivalent to the XYZ color matching function. Compared with the case of acquiring by means of high accuracy and faithful to the sensitivity of the human eye. Since the overlap of spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) is small, the S / N ratio is sufficient, and the curve in the spectral sensitivity curve changes naturally, so the error in colorimetry is Minimized.

画像A,Bの質感を色とは分離してヒストグラム分布で把握できるため、表面の光沢、つや、凹凸、粗さ等の違いを反映することにより、微妙な色合いの違いまで判定できる。   Since the textures of the images A and B are separated from the colors and can be grasped by a histogram distribution, it is possible to determine even a subtle difference in hue by reflecting differences in surface gloss, gloss, unevenness, roughness, and the like.

例えば、図13(a)〜(c)に示す通り、規格外品NGの粗さ度が小さいものから大きなものまで3種類を比較した場合の例を説明する。粗さ度の小さなものを「1」とし、粗さ度の中程度を「2」とし、粗さ度の大きなものを「3」とする。まず、規格外品NG1〜3を前記の処理を行った後のxyz色度図上での分布を作成すると、図13(b)のxy色度図に示す通り、ハイライト部分が積算されたデータである。積算数を明暗で示してあり、色の明るいほど積算数は大きい。図13(c)は実施品Wと規格外品NGの3次元で積算数を模式的に表したものである。xy軸は色度、z軸は積算数である。基本的には、粗さ度が大きいほど、低く広がった山形となり、粗さ度が細かいほど、尖った山形になる。「1」、「2」又は「3」について、実施品Wのヒストグラム分布を比較することで、重なりの度合いを示す質感分布指数を演算する。具体例は後述の実施例で示す。   For example, as shown in FIGS. 13A to 13C, an example will be described in which three types of non-standard products NG are compared from a small roughness to a large roughness. A low roughness is “1”, a medium roughness is “2”, and a high roughness is “3”. First, when the distribution on the xyz chromaticity diagram after the non-standard products NG1 to NG3 were subjected to the above-described processing was created, as shown in the xy chromaticity diagram of FIG. It is data. The accumulated number is shown in light and dark. The brighter the color, the larger the accumulated number. FIG. 13C schematically shows the integrated number in three dimensions of the implementation product W and the nonstandard product NG. The xy axis is chromaticity, and the z axis is the cumulative number. Basically, the larger the roughness, the lower the mountain shape, and the finer the roughness, the sharper mountain shape. For “1”, “2”, or “3”, the texture distribution index indicating the degree of overlap is calculated by comparing the histogram distributions of the implementation product W. Specific examples will be shown in Examples described later.

次の本実施形態2の規格外品NG、実施品Wの表面の色・質感管理システムを図14、図15を参照して説明する。図14はXYZ色空間座標を用い、図15はLab色空間座標を用いるものであり、対応する同様なステップについては200番台及び300番台として説明を援用し、主として、相違点を説明する。   Next, the color / texture management system for the surface of the non-standard product NG and the implementation product W according to the second embodiment will be described with reference to FIGS. FIG. 14 uses XYZ color space coordinates, and FIG. 15 uses Lab color space coordinates. The corresponding steps are referred to as the 200s and 300s, and the differences are mainly described.

図14は2つの画像A、Bから色度ヒストグラム分布の比較による質感分布指数を演算するフローチャートである。プログラムが起動すると、画像Aから検査領域Kを切り出し特定し、設定する(S201)。画像Bから画像Aと同様の検査領域Kを切り出し特定し、設定する(S202)。画像A,Bより色度値XYZの演算を行う(S203)。検査領域Kにおいて、規格外品NGと実施品WのXYZ色度ヒストグラム分布をそれぞれ演算し、作成する(S204)。XYZ値の平均値を演算する(S205)。XYZ色空間分布の中心座標を特定する(S206)。中心座標へのXYZ色空間分布をシフト処理する(S207)。シフト処理後、XYZ色空間分布の中心座標を特定する(S208)。シフト処理後の中心座標の適否の確認のためである。ここで中心座標の再調整が可能である。XYZ色度ヒストグラム分布のミニマム分布を特定し、重なり領域DでのXYZ色度ヒストグラム分布の積算数を演算する(S209)。質感分布指数=(重なり領域Dに属する画素の積算数/検査領域Kの全体の画素数)×100(%)である。重なり領域Dでの積算数はTとTのうち、少ない方の積算数を加算演算する。質感分布指数を演算し、色差ΔE等の色指数も演算し(S210)、リターンする。 FIG. 14 is a flowchart for calculating a texture distribution index based on a comparison of chromaticity histogram distributions from two images A and B. When the program is activated, the inspection area K is cut out from the image A, specified, and set (S201). An inspection area K similar to the image A is cut out from the image B, specified, and set (S202). The chromaticity values XYZ are calculated from the images A and B (S203). In the inspection region K, the XYZ chromaticity histogram distributions of the non-standard product NG and the implementation product W are calculated and created (S204). An average value of the XYZ values is calculated (S205). The center coordinates of the XYZ color space distribution are specified (S206). The XYZ color space distribution to the center coordinates is shifted (S207). After the shift process, the center coordinates of the XYZ color space distribution are specified (S208). This is to confirm the suitability of the center coordinates after the shift process. Here, the center coordinates can be readjusted. The minimum distribution of the XYZ chromaticity histogram distribution is specified, and the integrated number of the XYZ chromaticity histogram distribution in the overlapping region D is calculated (S209). Texture distribution index = (integrated number of pixels belonging to overlapping region D / total number of pixels in inspection region K) × 100 (%). Cumulative number of in the overlapping area D of T 1 and T 2, adds calculates the cumulative number of lesser. The texture distribution index is calculated, the color index such as the color difference ΔE is also calculated (S210), and the process returns.

なお、検査領域Kに対応するXYZ分布の演算の場合、指数の演算は、X軸、Y軸、Z軸の3次元空間での分布により行う。規格外品NGと実施品WでのXYZ空間座標でのXYZ値を、図16(a)(b)に示す通り、それぞれ、T(L,a,b)、T(L,a,b)とする。XYZの色空間であるとヒストグラム分布は地球儀のような形状になっており、2つのヒストグラム分布が立体的に重なり合っている場合と分離している場合がある。これをシフト処理し、中心座標を近づける。3次元空間の検査領域Kを格子で区画し、3次元でのT(X,Y,Z)、T(X,Y,Z)の色度ヒストグラム分布とミニマム分布を求め、同様な指数の演算を行う。格子の積算数を平面上に投影し、その面内で同様な積算で格子上の重なり合いの領域の積算数を演算してもよい。XYZ色度の場合には、明るさの情報がないため、XYZ空間では、画像A,Bの明るさが変わってもヒストグラム分布は変化しない。 In the case of the calculation of the XYZ distribution corresponding to the inspection region K, the calculation of the exponent is performed by the distribution in the three-dimensional space of the X axis, the Y axis, and the Z axis. As shown in FIGS. 16A and 16B, the XYZ values in the XYZ space coordinates of the non-standard product NG and the implementation product W are T 1 (L, a, b) and T 2 (L, a, b). In the XYZ color space, the histogram distribution has a globe-like shape, and the two histogram distributions may be three-dimensionally overlapped or separated. This is shifted to bring the center coordinates closer. The inspection area K in the three-dimensional space is partitioned by a grid, and the chromaticity histogram distribution and minimum distribution of T 1 (X, Y, Z) and T 2 (X, Y, Z) in three dimensions are obtained, and similar indices are obtained. Perform the operation. The accumulated number of grids may be projected on a plane, and the accumulated number of overlapping regions on the grid may be calculated by the same accumulation within the plane. In the case of XYZ chromaticity, since there is no brightness information, the histogram distribution does not change even if the brightness of the images A and B changes in the XYZ space.

XYZ色空間ヒストグラムに代えてLab色空間ヒストグラムを質感判定に用いる場合には、図15のフローチャートを用いる。図15の説明は図14の上記説明を援用する。S205では領域の平均Lab値の計算と画像Bの検査領域Kの平均Lab値の演算となる。Lab色度の場合には、明るさの情報があるため、Lab空間では、画像A,Bの明るさが変わると、ヒストグラム分布が変化する。   When the Lab color space histogram is used for texture determination instead of the XYZ color space histogram, the flowchart of FIG. 15 is used. The description of FIG. 15 uses the above description of FIG. In S205, the average Lab value of the area and the average Lab value of the inspection area K of the image B are calculated. In the case of Lab chromaticity, since there is brightness information, the histogram distribution changes when the brightness of the images A and B changes in the Lab space.

次に本実施形態3の色・質感管理システムにつき図17を参照して説明する。対応する同様な要素については説明を援用し、主として、相違点を説明する。   Next, a color / texture management system according to the third embodiment will be described with reference to FIG. For corresponding similar elements, the description is incorporated, and the differences are mainly described.

検査領域Kに対応するLab空間における色度ヒストグラム分布の演算の場合、XYZ値からLabへ変換を行う。指数の演算は、L軸、a軸、b軸の3次元空間での分布により行う。Lab色度分布は立体楕円形状である。規格外品NGと実施品WでのLab空間座標でのLab値を、図17(a)(b)に示す通り、それぞれ、U(L,a,b)、U(L,a,b)とする。Labの色空間であるとヒストグラム分布は地球儀のような形状になっており、2つのヒストグラム分布が立体的に重なり合っている場合と分離している場合がある。3次元空間の検査領域Kを格子で区画し、3次元でのU(L,a,b)、U(L,a,b)の色度ヒストグラム分布とミニマム分布を求め、同様な指数の演算を行う。格子の積算数を平面上に投影し、その面内で同様な積算で格子上の重なり合いの領域の積算数を演算する。Lab色度の場合には、明るさの情報があるため、Lab空間では、画像A,Bの明るさが変わると、L値が変化して、一致度の分布U、UがLab空間内で位置がずれるため、明暗を考慮に入れた判定が可能である。画像A,Bの明るさが違えば分布の位置がずれるからである。例えば、Lab色度ヒストグラム分布は、暗くなれば下方にずれ、明るくなれば上方にずれる。 In the case of calculation of the chromaticity histogram distribution in the Lab space corresponding to the inspection area K, the XYZ value is converted to Lab. The exponent is calculated by the distribution in the three-dimensional space of the L axis, a axis, and b axis. The Lab chromaticity distribution is a solid elliptical shape. As shown in FIGS. 17A and 17B, Lab values of the non-standard product NG and the implementation product W are expressed as U 1 (L, a, b), U 2 (L, a, b). In the Lab color space, the histogram distribution has a globe-like shape, and the two histogram distributions may be three-dimensionally overlapped or separated. The inspection area K in the three-dimensional space is partitioned by a grid, and the chromaticity histogram distribution and minimum distribution of U 1 (L, a, b) and U 2 (L, a, b) in three dimensions are obtained, and similar indices are obtained. Perform the operation. The accumulated number of grids is projected on a plane, and the accumulated number of overlapping areas on the grid is calculated by the same accumulation within the plane. In the case of Lab chromaticity, since there is brightness information, when the brightness of the images A and B changes in the Lab space, the L value changes, and the distributions U 1 and U 2 of the matching degrees are in the Lab space. Since the position is shifted, the determination in consideration of light and dark is possible. This is because if the brightness of the images A and B is different, the position of the distribution is shifted. For example, the Lab chromaticity histogram distribution shifts downward when dark and shifts upward when bright.

次に、本実施形態1の色・質感管理方法について、図3等を参照して説明する。住宅施工に伴う色・質感管理方法であるが、マンション等の他の建築物にも適用が可能である。   Next, the color / texture management method of the first embodiment will be described with reference to FIG. Although it is a color / texture management method for housing construction, it can also be applied to other buildings such as condominiums.

(1)製造工場Mの検査工程において、検査を行い、規格外品NGを選別する。   (1) In the inspection process of the manufacturing factory M, inspection is performed and non-standard product NG is selected.

(2)規格外品NGを2次元色彩計2で撮像し、規格外品NGから取得した3つの分光感度を有する画像Aを第1クライアント4の記憶部3に記憶する。   (2) The non-standard product NG is imaged by the two-dimensional colorimeter 2, and the image A having three spectral sensitivities acquired from the non-standard product NG is stored in the storage unit 3 of the first client 4.

(3)タグ15に製品固有情報IDと規格外品NGの画像Aを記憶させ、第3クライアント12を所有する物流倉庫会社にタグ15を付着させた規格外品NGを保管しておく。   (3) The product specific information ID and the image A of the non-standard product NG are stored in the tag 15, and the non-standard product NG with the tag 15 attached to the distribution warehouse company that owns the third client 12 is stored.

(4)タグ15に製品固有情報IDと画像Aを第1クライアント4から管理サーバー6にインターネットIで送信する。   (4) The product unique information ID and the image A are transmitted to the tag 15 from the first client 4 to the management server 6 over the Internet I.

(5)工務店Xが施工した住宅Jが、年月の経過により、色褪せする。そして、タイルTの一部である実施品Wが破損し、実施品Wを取り替える必要が生じたので、住宅主は、工務店Xに連絡し、工務店Xが2次元色彩計7で破損した実施品Wを撮像し、第2クライアント8からインターネットIで管理サーバー6に送信する。   (5) The house J constructed by the construction company X fades with the passage of time. And since the implementation product W which is a part of the tile T was damaged and it was necessary to replace the implementation product W, the landlord contacted the construction shop X, and the construction shop X was damaged by the two-dimensional colorimeter 7. The implementation product W is imaged and transmitted from the second client 8 to the management server 6 over the Internet I.

実施品Wそのものを撮像する代わりに、その周辺部分の色・質感とマッチングさせるため、その破損したところ以外の周辺を撮像し、色分布データを演算してもよい。   Instead of imaging the execution product W itself, in order to match the color and texture of the peripheral portion, the periphery other than the damaged portion may be imaged and the color distribution data may be calculated.

(6)管理サーバー6で実施品Wに近似する規格外品NGを検索するため、既にデータベースDBに記憶されたうちで、同一の製品固有情報IDを有する規格外品NGと実施品Wのヒストグラム分布を比較し、質感分布指数を演算し、そのうち、値の高い候補を特定し、色差ΔEなど、色の情報とともに、もっとも、色・質感の近似する、適切な規格外品NGを選択する。第2クライアント8はインターネットIでこの選択結果を受信し、工務店Xが確認する。必要に応じて住宅Jで現物を見ながら画像A,Bを確認してもよい。工務店Xの確認後、工務店Xは物流倉庫会社に該当する規格外品NGに対応する製品固有情報IDをインターネットで送信し(管理サーバー6から送信してもよい)、第3クライアント12の出力部11で該当する規格外品NGを、タグ15を用いて、自動出荷システムで、自動的に倉庫内で捜索、例えば、数千枚ないし数万枚の規格外品NGのデーPから出荷する。   (6) Since the management server 6 searches for the non-standard product NG that approximates the implementation product W, the histogram of the non-standard product NG having the same product unique information ID and the implementation product W is stored in the database DB. Compare the distributions, calculate the texture distribution index, identify a candidate with a high value, and select an appropriate nonstandard product NG that approximates the color / texture together with color information such as the color difference ΔE. The second client 8 receives this selection result on the Internet I, and the construction shop X confirms it. The images A and B may be confirmed while viewing the actual product at the house J as necessary. After confirming the construction shop X, the construction shop X transmits the product specific information ID corresponding to the nonstandard product NG corresponding to the distribution warehouse company over the Internet (may be transmitted from the management server 6), and the third client 12 The output unit 11 uses the tag 15 to search for the corresponding nonstandard product NG in the warehouse automatically, for example, ships from the data P of thousands to tens of thousands of nonstandard product NG. To do.

製品固有情報IDに加えて、送り先の工務店Xの住所を結合した情報を送信すれば、物流倉庫会社ではそのIDと住所・名称を参照できるので、より高効率的になる。   In addition to the product unique information ID, if the combined information of the address of the construction company X of the destination is transmitted, the distribution warehouse company can refer to the ID, address and name, so that it becomes more efficient.

(7)工務店Xは住宅Jに出向き、実施品Wに近似する規格外品NGに取り替える。以上の一連の処理は終了する。   (7) The construction shop X goes to the house J and replaces it with a nonstandard product NG that approximates the product W. The above series of processing ends.

以上、説明した通り、規格外品NGの色空間ヒストグタム分布を作成し、製品固有情報とともにデータベースDBと、タグ15に記憶させ、タグ15を規格外品NGに1枚毎に貼り付け、それを物流倉庫会社に保管する。そのタグ15を利用することで、対応する適切な色・質感の規格外品NGを交換品として出荷できる。   As described above, a color space histogram distribution of non-standard product NG is created, stored in the database DB and the tag 15 together with product specific information, and the tags 15 are pasted to the non-standard product NG one by one. Store in a distribution warehouse company. By using the tag 15, a corresponding non-standard product NG having appropriate color and texture can be shipped as a replacement.

本実施形態は、規格外品NGの再利用を主眼とし、従来は廃棄して捨ててしまっている規格外品NGを廃棄せずに保管しておいて、活用する仕組みである。   The present embodiment is a mechanism for reusing non-standard products NG, and storing and utilizing non-standard products NG that have been discarded and discarded in the past.

これをオーダーメイドで作ろうとする場合と対比して、コストが著しく低減できる。実施品Wの経年劣化で交換する場合、汚れは取れるとしても、色がそれにピタッと適合するものを製造することは事実上不可能である。これにより、様々なクレームを回避できる。特に、タイルは、焼き物であるので、実際に焼成してみないと本来わからず、少なからず、ばらつきがあるので、検査に通らない焼き物は破棄されることから、廃棄物が非常に多くなるが、このような無駄を回避できる。   Compared with the case where this is made by order, the cost can be significantly reduced. When the product W is replaced due to aging, it is practically impossible to manufacture a product that has a color that fits perfectly even though the stain can be removed. Thereby, various claims can be avoided. In particular, since tiles are baked goods, they are not known unless they are actually baked, and there are not a few variations, so baked goods that do not pass inspection are discarded. Such waste can be avoided.

たとえば、他の業界である自動車業界のバンパー等の部品にも適用できる。たとえば、バンパーメーカーは、塗料を塗って、色を測色する。バンパーの規格外品NGは、破棄せず、保管しておいて、なるべく、色・質感の近似するバンパーを選び出すことができる。   For example, the present invention can be applied to parts such as bumpers in other industries such as the automobile industry. For example, a bumper maker applies paint and measures color. Bumper non-standard NG can be stored without being discarded, and a bumper with similar color and texture can be selected as much as possible.

例えば、本システムを利用することで、廃車になった車のバンパーを規格外品NGとして登録し、他のバンパーの交換品として活用でき、製品に付加価値を付与できる。   For example, by using this system, it is possible to register a bumper of a car that has been scrapped as a non-standard product NG and use it as a replacement for another bumper, thereby adding value to the product.

次に本発明実施形態4を図18、図19を参照して説明する。本実施形態4は、タイルTに代えて自動車部品であるバンパー、インストルパネル、シート、ドアパネルに適用した例であり、他は実施形態1〜3と共通するので、説明は援用する。   Next, Embodiment 4 of the present invention will be described with reference to FIGS. The fourth embodiment is an example applied to a bumper, an instrument panel, a seat, and a door panel that are automobile parts instead of the tile T, and others are common to the first to third embodiments.

次に実施形態5の色・質感管理システムについて図20を参照して説明する。   Next, a color / texture management system according to the fifth embodiment will be described with reference to FIG.

図20に示す通り、ウェアラブル端末503に組み込まれた、RGBカラーディスプレイであるRGB表示部502の微少光学系で、候補となるRGB各色・質感データを表示して、RGB各チャンネルでの信号のリニアリティー特性、色発色・質感特性を測定し、さらにこの混色での色・質感データのクロストーク等補正項の算出を行う。また、同時に、微小光学系読み取り分光器(小型高精度分光器)509でのXYZ色空間測定を行い、高精度なXYZ補正データを取得する。管理サーバー506では小型高精度分光器509からのXYZデータを色・質感補正部511により補正し、補正データを記憶部512に記憶する。管理サーバー506から信号パターン発生器513に信号を出力され、この信号がRGB表示部502に送信される。   As shown in FIG. 20, the RGB color display of the RGB display unit 502 that is an RGB color display incorporated in the wearable terminal 503 displays candidate RGB color / texture data, and linearity of signals in each RGB channel. Characteristics, color development / texture characteristics are measured, and correction terms such as crosstalk of color / texture data in this mixed color are calculated. At the same time, XYZ color space measurement is performed by a micro-optical system reading spectroscope (small high-precision spectroscope) 509 to acquire highly accurate XYZ correction data. The management server 506 corrects the XYZ data from the small high-precision spectrometer 509 by the color / texture correction unit 511 and stores the correction data in the storage unit 512. A signal is output from the management server 506 to the signal pattern generator 513, and this signal is transmitted to the RGB display unit 502.

実施形態6の色・質感管理システムは、上記実施形態1〜4の2次元色彩計2、7の撮影環境の1つである色温度が相違するので、色温度で分光感度を補正するものである。実施形態6を図21〜図24を参照して説明する。格外品NGと、実施品Wとについて、それぞれの環境下で、2次元色彩計2、7で撮像する場合、それぞれ対応する色温度測定センサーE,Fにより色温度を測定する色温度測定部Rと、画像A,Bを、色温度測定センサーE,Fの測定値に基づいて、色温度補正がなされた補正画像に変換する照明色変換補正部Qと、を備える。またタイルに代えて、車のバンパーの色・質感管理の場合に適用したものである。   The color / texture management system according to the sixth embodiment corrects the spectral sensitivity based on the color temperature because the color temperature which is one of the photographing environments of the two-dimensional colorimeters 2 and 7 according to the first to fourth embodiments is different. is there. A sixth embodiment will be described with reference to FIGS. Color image measuring unit R that measures the color temperature with the corresponding color temperature measuring sensors E and F when the non-standard product NG and the implementation product W are imaged with the two-dimensional colorimeters 2 and 7 in the respective environments. And an illumination color conversion correction unit Q that converts the images A and B into corrected images subjected to color temperature correction based on the measurement values of the color temperature measuring sensors E and F. Also, instead of tiles, it is applied to the case of car bumper color / texture management.

色温度測定センサーE,Fは、マイクロ分光器を備え、この分光器の測定データから色温度を演算し出力するものである。このマイクロ分光器は、例えば、浜松フォトニクス社製のC12666MAが例示できる。これは、MEMS技術とイメージセンサ技術を融合した指先大の超小型分光器へッドで、感度波長範囲は340〜780nm、波長分解能は15nm maxである。対象物をマイクロ色温度測定センサーE,Fで撮像し、分光感度特性、つまり、感度波長範囲の波長に対するスペクトルの出力値である相対感度(%)が得られる。   The color temperature measuring sensors E and F include a micro-spectrometer, and calculate and output a color temperature from the measurement data of the spectroscope. An example of the micro-spectrometer is C12666MA manufactured by Hamamatsu Photonics. This is a fingertip-sized micro-spectrometer head that combines MEMS technology and image sensor technology, and has a sensitivity wavelength range of 340 to 780 nm and a wavelength resolution of 15 nm max. The object is imaged by the micro color temperature measuring sensors E and F, and the spectral sensitivity characteristic, that is, the relative sensitivity (%) that is the output value of the spectrum with respect to the wavelength in the sensitivity wavelength range is obtained.

管理サーバー6の演算部62が色温度測定部Rを有し、2次元色彩計2が規格外品NGを撮像し、温度センサ−Eで色温度を計測し、一方、2次元色彩計7により、実施品Wを撮像し、温度センサ−Fで色温度を計測し、管理サーバー6の記憶部63に3バンド視覚感度画像S1i,S2i,S3i(T=6500K)(i=1〜m、mは画素数である。)を記録する。実施品W側の環境下はT=6500Kとし、規格外品NG側の環境下はT=2900Kとし、照明色変換補正部Qで環境光の色温度の差異に基づき3バンド視覚感度画像S1i,S2i,S3iの補正を行う。   The calculation unit 62 of the management server 6 has a color temperature measurement unit R, the two-dimensional color meter 2 images a non-standard product NG, measures the color temperature with the temperature sensor-E, while the two-dimensional color meter 7 The actual product W is imaged, the color temperature is measured by the temperature sensor-F, and the three-band visual sensitivity images S1i, S2i, S3i (T = 6500K) (i = 1 to m, m) are stored in the storage unit 63 of the management server 6. Is the number of pixels). The environment of the implementation product W side is T = 6500K, the environment of the non-standard product NG side is T = 2900K, and the illumination color conversion correction unit Q determines the 3-band visual sensitivity image S1i, S2i and S3i are corrected.

管理サーバー6におけるフローチャートを図9、図10に、それぞれ示す。   The flowcharts in the management server 6 are shown in FIGS. 9 and 10, respectively.

図9に示す通り、初期化をする(S510)。2次元色彩計2、7からそれぞれ送信された規格外品NG及び/又は実施品Wに関する複数の3バンド視覚感度画像S1i,S2i,S3i(T=6500K、T=2900K)を受信し、記憶部63に3バンド視覚感度画像S1i,S2i,S3iとして記録する(S520)。画像が動画である場合には、一連の処理が連続的に行われる。   As shown in FIG. 9, initialization is performed (S510). A plurality of three-band visual sensitivity images S1i, S2i, and S3i (T = 6500K, T = 2900K) relating to the nonstandard product NG and / or the implementation product W respectively transmitted from the two-dimensional colorimeters 2 and 7 are received, and the storage unit 63 is recorded as 3-band visual sensitivity images S1i, S2i, S3i (S520). When the image is a moving image, a series of processing is continuously performed.

ICタグ515の製品固有情報ID(製品種等)に対応する、色・質感情報の登録されている3バンド視覚感度画像S1i,S2i,S3iを読み出し、照明色変換補正部Qに送信する(S530)。   The three-band visual sensitivity images S1i, S2i, S3i in which color / texture information is registered corresponding to the product unique information ID (product type, etc.) of the IC tag 515 are read and transmitted to the illumination color conversion correction unit Q (S530). ).

登録要求を受信したかどうかを判定する(S540)。YESならS550に移行し、NOなら表示処理に移行する(S560)。   It is determined whether a registration request has been received (S540). If YES, the process proceeds to S550, and if NO, the process proceeds to a display process (S560).

2次元色彩計2、7からの画像の登録要求を受信すると、2次元色彩計2、7で撮像し、記録した3バンド視覚感度画像S1i,S2i,S3iを新たに登録又は更新する(S550)。   When receiving an image registration request from the two-dimensional colorimeters 2 and 7, the three-dimensional visual sensitivity images S1i, S2i, and S3i imaged and recorded by the two-dimensional colorimeters 2 and 7 are newly registered or updated (S550). .

管理サーバー6の表示部に登録に係る処理を表示する(S560)。   Processing related to registration is displayed on the display unit of the management server 6 (S560).

処理を終了するかどうかを判定し、処理が終了出ない場合には、S520に戻り、処理が終了の場合には、リターンとなる(S570)。   It is determined whether to end the process. If the process does not end, the process returns to S520. If the process ends, the process returns (S570).

照明色変換補正部Qの処理について、図10を参照して説明する。環境光による色温度の補正処理を車のバンパーの色・質感管理の場合に適用したものである。   The processing of the illumination color conversion correction unit Q will be described with reference to FIG. Color temperature correction processing using ambient light is applied to the color and texture management of car bumpers.

受信した3バンド視覚感度画像S1i,S2i,S3i(T=6500K)を、演算部62において、各画素について、温度補正を行い、三刺激値XYZに変換し、XYZ−RGB変換によりRGB画像を第1クライアント4、第2クライアント8、及び/又は第3クライアント12に送信する。XYZ変換は、実施品W側では数式2により行われるが、実施品W側と環境の相違する規格外品NG側では、温度補正の関係で、式3に従って補正を考慮した変換が行われる。XYZ色忠実画像の三刺激値XYZは、式3に示す通り、補正されて三刺激値X’、Y’、Z’となり、この補正値に基づいて実施品W側の画像、規格外品NG側の画像が表示される。   The received three-band visual sensitivity images S1i, S2i, S3i (T = 6500K) are subjected to temperature correction for each pixel in the calculation unit 62, converted into tristimulus values XYZ, and RGB images are converted by XYZ-RGB conversion. Transmit to one client 4, second client 8, and / or third client 12. The XYZ conversion is performed according to Equation 2 on the implementation product W side, but on the non-standard product NG side where the environment is different from that of the implementation product W side, the conversion is performed in consideration of the correction according to Equation 3 because of temperature correction. The tristimulus values XYZ of the XYZ color faithful image are corrected to tristimulus values X ′, Y ′, and Z ′ as shown in Equation 3, and based on these correction values, the image on the implementation product W side, the nonstandard product NG The side image is displayed.

ここで、下記数式2のXYZ−S1,S2,S3の変換式で出てくる分光感度S1,S2,S3の曲線の頭が揃うように、T=6500Kでのマトリクスの係数補正を行っておく。詳しくは技術文献のIEICE TRANS.INF.& SYST.,VOL.E93-D,No.3 MAR 2010 copy rght 2010 The Institute of Electronics, Information and CommunicationEngineers, Development of an XYZ Digital Camera with Enbedded Color Calibration System for Accurate Color Acquisition, Maciej KRETKOWSKI,Ryszard JABLONSKI,SHIMODAIRA P651-653に従ってホワイトバランスと色校正を行うので、参照されたい。
Here, the matrix coefficient correction at T = 6500K is performed so that the heads of the curves of the spectral sensitivities S1, S2, and S3 appearing in the conversion formula of XYZ-S1, S2, and S3 of the following formula 2 are aligned. . For details, see IEICE TRANS.INF. & SYST., VOL.E93-D, No.3 MAR 2010 copy rght 2010 The Institute of Electronics, Information and Communication Engineers, Development of an XYZ Digital Camera with Embedded Color Calibration System for Accurate Refer to Color Acquisition, Maciej KRETKOWSKI, Ryszard JABLONSKI, SHIMODAIRA P651-653 for white balance and color calibration.

この照明色変換補正部Qは、実施品W側と規格外品NG側での環境光補正を行うものである。たとえば実施品W側の環境下でT=6500K、規格外品NG側の環境下では、例えば、環境色温度は説明のため仮にT=5000Kとするが、マイクロ色温度測定センサーE,Fで実測するため特に色温度は関係ないのであるが、温度差による補正を行い、色・質感データの精度を高める趣旨である。規格外品NG側の照明色変換補正部Q、及び、これと接続可能で、小型分光器たとえばマイクロ分光器を備えた色温度測定センサーE,Fの構成を用いている。以下、図10〜図12を参照して説明する。   The illumination color conversion correction unit Q performs ambient light correction on the implementation product W side and the nonstandard product NG side. For example, T = 6500K in the environment on the implementation product W side, and in the environment on the non-standard product NG side, for example, the environmental color temperature is assumed to be T = 5000K for explanation, but is actually measured by the micro color temperature measurement sensors E and F. Therefore, the color temperature is not particularly relevant, but the purpose is to perform correction based on the temperature difference to improve the accuracy of the color / texture data. The illumination color conversion correction unit Q on the non-standard product NG side, and the configuration of the color temperature measuring sensors E and F, which can be connected to the illumination color conversion correction unit Q and provided with a small spectroscope, for example, a microspectrometer, are used. Hereinafter, a description will be given with reference to FIGS.

色温度測定センサーE,Fで計測した実在する照明の色温度を用いる場合、それらのスペクトルは、必ずしも一致しない(色彩工学 大田登著 (東京電気大学 出版局)が、等色温度線を引いて色温度を定義すればよい。色温度からの黒体輻射よりのS1,S2,S3の分光感度から導かなくても、実施品W側、規格外品NG側の照明光の3つの数値は、S1,S2,S3の分光感度と実施品W側、規格外品NG側で測定した照明のスペクトルを掛け合わせた3つの数値を用いてS1gain,S3gainを計算できる。これは、色温度からの理想的スペクトルと、スペクトル実測については、実施品W側、規格外品NG側それぞれ任意に選ぶことができる。実施品W側照明のS123の分光特性と規格外品NG側照明のS123の分光特性出力の比を求めることが特徴である。   When using the color temperature of the actual lighting measured by the color temperature measuring sensors E and F, their spectra do not necessarily match (Color Engineering, Noboru Ota (Tokyo Denki University Press)) Even if it is not derived from the spectral sensitivity of S1, S2, S3 from the black body radiation from the color temperature, the three numerical values of the illumination light on the implementation product W side and non-standard product NG side are: S1gain and S3gain can be calculated using the three values obtained by multiplying the spectral sensitivity of S1, S2, and S3 by the illumination spectrum measured on the product W side and non-standard product NG side. The actual spectrum and the actual spectrum measurement can be arbitrarily selected for the implementation product W side and the nonstandard product NG side, respectively, and the spectral characteristics output of the implementation product W side illumination S123 and the nonstandard product NG side illumination S123. It is the characteristic to obtain | require ratio of.

照明色変換補正部Qは、図10〜図12に示す通り、管理サーバー6で記録された規格外品NGと実施品Wの3バンド視覚感度画像S1i,S2i,S3i(T=6500K)について、T=6500KからT=5000Kへの温度の補正を行い、演算処理された画像を2次元色彩計3に送信するものである。   As shown in FIGS. 10 to 12, the illumination color conversion correction unit Q is configured for the three-band visual sensitivity images S1i, S2i, S3i (T = 6500K) of the nonstandard product NG and the implementation product W recorded by the management server 6. The temperature is corrected from T = 6500K to T = 5000K, and the calculated image is transmitted to the two-dimensional colorimeter 3.

照明色変換補正部Qで行う処理を説明する。S600において、規格外品NG側は、実施品W側で車を2次元色彩計207で撮像して得られた3バンド視覚感度画像S1i,S2i,S3i(T=6500K)を実施品W側から受信する。実施品W側では、図11に示す通り、6500Kの照明スペクトルの出力値と分光感度S1,S2,S3(数1、図5参照)とを掛け算すると、斜線で示すような掛算値S1,S2,S3が求まる。これらをそれぞれ積分して斜線に示す曲線範囲内の積分値IS1,IS2,IS3を演算し、これらの積分値を調整、たとえば、IS1=IS2=IS3となるように、2次元色彩計2、7のゲインを調整し、これを2次元色彩計2、7の規格化感度とする。   Processing performed by the illumination color conversion correction unit Q will be described. In S600, the non-standard product NG side displays the 3-band visual sensitivity images S1i, S2i, and S3i (T = 6500K) obtained by imaging the vehicle on the implementation product W side with the two-dimensional colorimeter 207 from the implementation product W side. Receive. On the implementation product W side, as shown in FIG. 11, when the output value of the illumination spectrum of 6500K is multiplied by the spectral sensitivities S1, S2, and S3 (see Equation 1 and FIG. 5), the multiplied values S1 and S2 as shown by diagonal lines. , S3 is obtained. These are integrated to calculate the integral values IS1, IS2, IS3 within the curve range indicated by the oblique lines, and these integral values are adjusted, for example, two-dimensional colorimeters 2, 7 so that IS1 = IS2 = IS3 The gain is adjusted to be the normalized sensitivity of the two-dimensional colorimeters 2 and 7.

S610において、規格外品NG側の色温度測定センサーE,Fにより、T=5000KでのS1gain、S2gain(これを相対的に1とする)、S3gainを演算する。図12に示す通り、規格外品NG側のT=5000K(5000Kは例示であり他の温度でもよい)の照明スペクトルの出力値を、規格化感度S1,S2,S3(数1、図5参照)で掛け算し、これらをそれぞれ積分して斜線に示す曲線範囲内の積分値I03,I02,I01を演算し、S1gain=I01/I02、S3gain=I03/I02を求める。この演算により、次の規格外品NG側での演算で求めるゲイン値の計算が簡単なものとなる。ここでのゲイン調整をしなくても、その時の変換式であるS1gain = (IO1/IO2)/(IS1/IS2),S3gain = (IO3/IO2)/(IS3/IS2)を設定し、次の規格外品NG側でのゲイン計算が実施品W側での積分値を規格外品NG側に伝えることにすれば、それに基づいて規格外品NG側の計算が可能となる。前述の通り数式2で述べたマトリクスの係数補正のように、S1,S2,S3の頭を揃えるための、事前準備のための、より多くの演算をする必要はないため、このようなゲイン調整をしておくことにより、前述の数式2のS1,S2,S3-XYZ変換式が実施品W側での照明と関連づけられることとなる。   In S610, S1gain, S2gain (which is relatively 1) and S3gain at T = 5000K are calculated by the color temperature measurement sensors E and F on the non-standard product NG side. As shown in FIG. 12, the output value of the illumination spectrum of T = 5000K on the non-standard product NG side (5000K is an example and other temperatures may be used) is normalized sensitivity S1, S2, S3 (see Equation 1, FIG. 5). ), And integrating these values to calculate integral values I03, I02, I01 within the curve range indicated by diagonal lines, and obtain S1gain = I01 / I02 and S3gain = I03 / I02. This calculation simplifies the calculation of the gain value obtained by the next calculation on the nonstandard product NG side. Even if you do not adjust the gain, set S1gain = (IO1 / IO2) / (IS1 / IS2), S3gain = (IO3 / IO2) / (IS3 / IS2) If the gain calculation on the non-standard product NG side transmits the integral value on the implementation product W side to the non-standard product NG side, the calculation on the non-standard product NG side becomes possible based on that. As described above, since it is not necessary to perform more calculations for preparation in advance to align the heads of S1, S2, and S3 like the matrix coefficient correction described in Equation 2, such gain adjustment is performed. By doing so, the S1, S2, and S3-XYZ conversion formulas of the above-described formula 2 are associated with the illumination on the implementation product W side.

S620において、S600で取得した3バンド視覚感度画像S1i,S2i,S3i(T=6500K)をS610で演算したS1gainとS3gainによりS1iとS3iを補正し、3バンド視覚感度画像S1i5000k,S2i5000k(S2iと同じ),S3i5000k(T=5000K)を導く。数式3と同様の要領の演算である。   In S620, the three-band visual sensitivity images S1i, S2i, S3i (T = 6500K) acquired in S600 are corrected by S1gain and S3gain calculated in S610, and S1i and S3i are corrected, and the three-band visual sensitivity images S1i5000k, S2i5000k (same as S2i) ), S3i5000k (T = 5000K). This is the same calculation as in Equation 3.

S630において、色温度測定センサーE,Fの光入射部(スリット)を、表示部の画面上に表示されている画像に押し当てて、画像を取り込み、Rデータ(例えばR=255:8ビット)値とのひも付け、GデータとXg,Yg,Zg、BデータとXb,Yb,Zbとのひも付けを行い、XYZ値からRGB値に変換するための変換テーブル(変換マトリクスでもよい)を作成する。この処理は、規格外品NG側の環境光を色温度測定センサーE,Fを介して照明色変換補正部Qに取り込み、色温度測定センサーE,Fで規格外品NG側の環境光のスペクトルをXYZ−RGB変換に正確に反映させる趣旨であり、色温度測定センサーE,FでRGBのそれぞれのデータを表示して、それぞれに対するスペクトルを取得する。これにより、Rに対するXR,YR,ZRが求まるので、同様にGとBを求めると、Gに対してXG,YG,ZG、Bに対してXB,YB,ZBが求める。このようにして、XYZからRGBへの変換テーブルが求まる。Sステップ630については、予め処理を行い、プログラム化しておいてもよい。 In S630, the light incident portions (slits) of the color temperature measuring sensors E and F are pressed against the image displayed on the screen of the display portion to capture the image, and R data (for example, R = 255: 8 bits) Create a conversion table (can be a conversion matrix) to convert from XYZ values to RGB values by linking with values, linking G data with Xg, Yg, Zg, B data with Xb, Yb, Zb. To do. This process takes ambient light on the nonstandard NG side into the illumination color conversion correction unit Q via the color temperature measurement sensors E and F, and the ambient light spectrum on the nonstandard NG side on the color temperature measurement sensors E and F. Is accurately reflected in the XYZ-RGB conversion, and the RGB data is displayed by the color temperature measuring sensors E and F, and the spectrum for each is acquired. As a result, X R , Y R , and Z R for R are obtained. Similarly, when G and B are obtained, X G , Y G , Z G for G and X B , Y B , Z for B B asks. In this way, a conversion table from XYZ to RGB is obtained. About S step 630, you may process and program beforehand.

S640において、S620で求めた分光相対ゲインS1gain,S2gain,S3gain(T=5000K)を掛け合わせたS1i5000k,S2i5000k,S3i5000k(i=1〜m、mは画素数)からそれぞれの画像の5000kの正確なXYZ値(T=5000K)を求める。前述した数式2により演算する。   In S640, the accurate relative 5000k of each image is obtained from S1i5000k, S2i5000k, and S3i5000k (i = 1 to m, m is the number of pixels) obtained by multiplying the spectral relative gains S1gain, S2gain, and S3gain (T = 5000K) obtained in S620. The XYZ value (T = 5000K) is obtained. The calculation is performed according to Equation 2 described above.

S650において、S640で求めたXYZ値(T=5000K)をXYZ−RGB変換テーブルを用い、対応するRGB値(T=5000K)を求める。上記の色温度の補正演算により、RGBモニターに画像を環境変化に対応して正確に表示することができる。   In S650, the XYZ value (T = 5000K) obtained in S640 is used to obtain the corresponding RGB value (T = 5000K) using the XYZ-RGB conversion table. By the above color temperature correction calculation, an image can be accurately displayed on the RGB monitor in accordance with the environmental change.

S660において、S650で求めたRGB値(T=5000K)を第1クライアント4、第2クライアント8、又は第3クライアント12に送信し、表示部にRGB値に対応する画像が表示される。   In S660, the RGB value (T = 5000K) obtained in S650 is transmitted to the first client 4, the second client 8, or the third client 12, and an image corresponding to the RGB value is displayed on the display unit.

以上説明した実施形態6によれば、照明色変換補正部Qで色・質感の環境補正がされているので、品質において高い優位性を持ち、実施品W側と規格外品NG側で色・質感の共有化を図ることができる。色・質感判定に関して熟練度の低い労働者でもすぐに色・質感判定に関する高度な検査を行える利点がある。   According to the sixth embodiment described above, the color / texture environment correction is performed by the illumination color conversion correction unit Q, so that the color / texture has a high advantage in quality, and the color / color on the implementation product W side and the non-standard product NG side. You can share the texture. There is an advantage that a worker with a low level of skill in color / texture judgment can immediately perform advanced inspections on color / texture judgment.

色・質感合わせ工程の効率化によるコストダウン、色・質感修正の無駄の減少によるコストダウンが可能である。また、導入コストが低く、高精度で安定している。   Costs can be reduced by improving the efficiency of the color / texture matching process, and cost can be reduced by reducing waste of color / texture correction. In addition, the introduction cost is low, and it is stable with high accuracy.

完成車工場での車へのバンパーの交換組み付け工程に適用した例を挙げたが、部品工場でのバンパー交換にも適用できることは無論である。   Although the example applied to the replacement assembly process of the bumper to the car at the finished car factory was given, it is of course possible to apply it to the bumper replacement at the parts factory.

組み合わされたボディーの色・質感の迅速な統一が可能となる。IOT技術により、運ばれてくる車の色・質感は、部品に添付のICタグ515等にその情報は記載されているため、再利用が可能である。   Quickly unify the color and texture of the combined body. With the IOT technology, the color / texture of the car being carried can be reused because the information is described in the IC tag 515 attached to the part.

次に本発明実施形態7の色・質感管理システムについて図25を参照して説明する。本実施形態7は、実施形態1と概ね共通するが、製造工場Mの検査工程で2次元色彩計2を用い、直接、測定データを管理サーバー6に送信するものである。2つの工程を1つにまとめることができるので、作業が簡略化できる効果がある。また2次元色彩計2,7で色空間ヒストグラム分布までも演算し、管理サーバー6に送信するので、管理サーバー6での演算時間が短縮化する。なお、他の構成は、実施形態1と共通し、また、実施形態2〜6も適宜利用可能であるので、説明は上記を援用する。   Next, a color / texture management system according to Embodiment 7 of the present invention will be described with reference to FIG. The seventh embodiment is generally common to the first embodiment, but uses the two-dimensional colorimeter 2 in the inspection process of the manufacturing factory M and directly transmits measurement data to the management server 6. Since the two steps can be combined into one, the work can be simplified. In addition, since the color space histogram distribution is calculated by the two-dimensional colorimeters 2 and 7 and transmitted to the management server 6, the calculation time in the management server 6 is shortened. In addition, since another structure is common in Embodiment 1, and Embodiments 2-6 can also be utilized suitably, the description uses the above.

実施形態7は次のような手順で実施される。構成の変更は当業者には自明であるので、説明は割愛する。   The seventh embodiment is performed in the following procedure. Since the configuration change is obvious to those skilled in the art, the description thereof is omitted.

次に、本実施形態7の色・質感管理方法について、図25等を参照して説明する。住宅施工に伴う色・質感管理方法であるが、マンション等の他の建築物にも適用が可能である。   Next, the color / texture management method of the seventh embodiment will be described with reference to FIG. Although it is a color / texture management method for housing construction, it can also be applied to other buildings such as condominiums.

(1)製造工場Mの検査工程において、2次元色彩計2で検査を行い、規格外品NGを選別する。   (1) In the inspection process at the manufacturing factory M, the two-dimensional color meter 2 is used to inspect non-standard products NG.

(2)前記(1)で、規格外品NGから取得した3つの分光感度を有する画像Aをと、画像Aから色空間ヒストグラム分布を第1クライアント4の記憶部3に記憶する。   (2) The image A having three spectral sensitivities acquired from the nonstandard product NG in (1) and the color space histogram distribution from the image A are stored in the storage unit 3 of the first client 4.

(3)製造工場Mで、タグ15に製品固有情報IDと規格外品NGの画像Aを記憶させ、第3クライアント12を所有する物流倉庫会社にタグ15を付着させた規格外品NGを輸送し、保管しておく。   (3) At the manufacturing factory M, the product specific information ID and the image A of the nonstandard product NG are stored in the tag 15, and the nonstandard product NG with the tag 15 attached to the distribution warehouse company that owns the third client 12 is transported. And keep it.

(4)タグ15に製品固有情報IDと画像A及び色空間ヒストグラム分布を第1クライアント4から管理サーバー6にインターネットIで送信する。   (4) The product unique information ID, the image A, and the color space histogram distribution are transmitted to the tag 15 from the first client 4 to the management server 6 over the Internet I.

(5)工務店Xが施工した住宅Jが、年月の経過により、色褪せする。そして、タイルTの一部である実施品Wが破損し、実施品Wを取り替える必要が生じたので、住宅主は、工務店Xに連絡し、工務店Xが2次元色彩計7で破損した実施品Wを撮像し、画像Bを取得し、色空間ヒストグラム分布を演算し、当該画像Bと色空間ヒストグラム分布を第2クライアント8からインターネットIで管理サーバー6に送信する。   (5) The house J constructed by the construction company X fades with the passage of time. And since the implementation product W which is a part of the tile T was damaged and it was necessary to replace the implementation product W, the landlord contacted the construction shop X, and the construction shop X was damaged by the two-dimensional colorimeter 7. The execution product W is imaged, the image B is acquired, the color space histogram distribution is calculated, and the image B and the color space histogram distribution are transmitted from the second client 8 to the management server 6 via the Internet I.

実施品Wそのものを撮像する代わりに、その周辺部分の色・質感とマッチングさせるため、その破損したところ以外の周辺も撮像し、画像と色分布データを演算してもよい。   Instead of imaging the execution product W itself, in order to match the color and texture of the peripheral portion, the periphery other than the damaged portion may be imaged and the image and color distribution data may be calculated.

(6)管理サーバー6で実施品Wに近似する規格外品NGを検索するため、既にデータベースDBに記憶されたうちで、同一の製品固有情報IDを有する規格外品NGと実施品Wの色空間ヒストグラム分布を比較し、質感分布指数を演算し、そのうち、値の高いものを特定し、色差ΔEなど、色の情報とともに、もっとも、色・質感の近似する規格外品NGを選択する。第2クライアント8はインターネットIでこの選択結果を受信し、工務店Xが確認する。必要に応じて住宅Jで現物を見ながら画像A,Bを確認してもよい。工務店Xの確認後、工務店Xは物流倉庫会社に該当する規格外品NGに対応す製品固有情報IDをインターネットで送信し(管理サーバー6から送信してもよい)、第3クライアント12の出力部11で該当する規格外品NGを、タグ15を用いて、自動出荷システムで、自動的に倉庫内で捜索、例えば、数千枚ないし数万枚の規格外品NGのデーPから出荷する。   (6) Since the management server 6 searches for the nonstandard product NG that approximates the implementation product W, the color of the nonstandard product NG having the same product unique information ID and the implementation product W among those already stored in the database DB The spatial histogram distributions are compared, the texture distribution index is calculated, the one with the highest value is identified, and the nonstandard product NG that approximates the color / texture is selected together with the color information such as the color difference ΔE. The second client 8 receives this selection result on the Internet I, and the construction shop X confirms it. The images A and B may be confirmed while viewing the actual product at the house J as necessary. After confirming the construction shop X, the construction shop X transmits the product specific information ID corresponding to the nonstandard product NG corresponding to the distribution warehouse company over the Internet (may be transmitted from the management server 6), and the third client 12 The output unit 11 uses the tag 15 to search for the corresponding nonstandard product NG in the warehouse automatically, for example, ships from the data P of thousands to tens of thousands of nonstandard product NG. To do.

製品固有情報IDに加えて、送り先の工務店Xの住所を結合した情報を送信すれば、物流倉庫会社ではそのIDと住所・名称を参照できるので、より高効率的になる。   In addition to the product unique information ID, if the combined information of the address of the construction company X of the destination is transmitted, the distribution warehouse company can refer to the ID, address and name, so that it becomes more efficient.

(7)工務店Xは住宅Jに出向き、実施品Wを近似する規格外品NGに取り替える。以上の一連の処理は終了する。   (7) The construction shop X goes to the house J and replaces the product W with a non-standard product NG approximating it. The above series of processing ends.

以上、説明した通り、実施形態1と同様の効果を奏する上、検査工程で画像Aと色空間ヒストグラム分布を演算し、タグ15を規格外品NGに1枚毎に貼り付け、それを物流倉庫会社に保管するので、作業が簡略化する。   As described above, the same effects as those of the first embodiment can be obtained, the image A and the color space histogram distribution are calculated in the inspection process, and the tags 15 are attached to the nonstandard products NG one by one, and the distribution warehouse Since it is stored in the company, the work is simplified.

なお、本発明の実施形態は、上記の実施形態に何ら限定されるものではなく、本発明の技術的思想を逸脱しない範囲において、改変等を加えることができるものであり、それらの改変、均等物等も本発明の技術的範囲に含まれ、前記技術的範囲に属する限り種々の形態を採り得ることは言うまでもない。例えば、2次元色彩計はこれらに限られず、その他の種類の2次元色彩計によっても本発明の技術的思想は実施されるものである。例えば、3バンド視覚感度画像S1i,S2i,S3iに従って画像情報を取得する方式について、本実施形態において挙げた方式は一具体例に過ぎないものである。   The embodiments of the present invention are not limited to the above-described embodiments, and modifications and the like can be made without departing from the technical idea of the present invention. Needless to say, objects and the like are also included in the technical scope of the present invention and can take various forms as long as they belong to the technical scope. For example, the two-dimensional colorimeter is not limited to these, and the technical idea of the present invention can be implemented by other types of two-dimensional colorimeters. For example, for the method of acquiring image information according to the three-band visual sensitivity images S1i, S2i, and S3i, the method given in the present embodiment is only a specific example.

その他の例も実施できる。例えば、実施品W・規格外品NGの取得されたA,B画像の2枚の画像を重ねあわせ、それぞれの色度ヒストグラム分布を表示装置に表示したり、それぞれの色度ヒストグラム分布をひとつの色度図上で重ね合わせた色度図が表示でき、色の相違を平均Lab値で判定し、一方、表面の質感を示す質感分布指数演算を分離してパーセンテージで表示できる。これにより、規格外品NGの色度分布の実施品Wの色度分布の空間的広がりのズレ、特に、凹凸感や粗さ感を数値で確実に確認できる。各領域Kごとに検査結果が数値で表示される。格子のグリッド幅の調節が可能である。指数のしきい値を任意で設定可能である。測定結果と撮影した画像は保存が可能である。目視検査では避けられなかった個人差の問題や、客先との判断基準のトラブル等を減らして、質感の仕上がり具合の基準化や安定した質感管理を行うことが可能となる。   Other examples can be implemented. For example, the two images A and B acquired for the implementation product W and the nonstandard product NG are overlapped, and each chromaticity histogram distribution is displayed on the display device, or each chromaticity histogram distribution is displayed as one Overlaid on the chromaticity diagram, the chromaticity diagram can be displayed, and the color difference can be determined by the average Lab value, while the texture distribution index calculation indicating the surface texture can be separated and displayed as a percentage. As a result, it is possible to reliably confirm the deviation of the spatial spread of the chromaticity distribution of the implementation product W of the non-standard product NG, in particular, the unevenness and the roughness, numerically. The inspection results are displayed numerically for each region K. The grid width of the lattice can be adjusted. An exponent threshold value can be arbitrarily set. Measurement results and captured images can be saved. It is possible to reduce the problems of individual differences that cannot be avoided by visual inspection, troubles of judgment standards with customers, etc., and to standardize the texture finish and to perform stable texture management.

例えば、非接触及び広範囲での撮影ができるため、フラット照明で複数の角度から規格外品NG、実施品Wを撮像することで、フリップフロップ、表面粗さの数値化も可能であり、人の目が感じる色、質感に近い評価が可能である。木目パネルなどの不規則な柄のパーツも色・質感合せすることができる。取り込んだ画像A、Bをディスプレイに表示することもできるので(オーバーレイ機能)、簡単に位置合わせができる。規格外品が実施品Wとは、大きさや材質が異なっていても比較ができる。レザーなどの不規則な柄や質感をもつ生地も色・質感合せできる。樹脂パーツの検査、色ムラ・色ズレの検査が可能である。例えば、凹凸間のある対象物でも測定できる。床材などの不規則な柄や質感をもつ建材、壁紙などの不規則な柄や木目調・大理石風・幾何学模様などの質感も色合せできる。歯科分野での歯の質感も検査できる。   For example, because non-contact and wide-area photography is possible, non-standard product NG and implementation product W can be imaged from flat angles, and flip-flops and surface roughness can be digitized. Evaluation that is close to the color and texture of the eyes is possible. Parts with irregular patterns such as wood grain panels can also be matched in color and texture. Since the captured images A and B can be displayed on the display (overlay function), alignment can be performed easily. The non-standard product can be compared with the implementation product W even if the size and material are different. Fabrics with irregular patterns and textures such as leather can also be matched in color and texture. Resin parts inspection, color unevenness and color misregistration inspection are possible. For example, even an object with unevenness can be measured. Colors can also be used for building materials with irregular patterns and textures such as flooring, irregular patterns such as wallpaper, and textures such as woodgrain, marble and geometric patterns. You can also check the texture of teeth in the dental field.

以下に、実施例を例示し、本発明を具体的に説明するが、本発明はこれらによって限定されるものではない。なお、実施例中における特性値の測定及び評価は下記のように行った。   Hereinafter, the present invention will be specifically described with reference to examples, but the present invention is not limited thereto. In addition, the measurement and evaluation of the characteristic value in an Example were performed as follows.

(1) 評価装置
有限会社パパラボの2次元色彩計PPLB-500を用いた。照明はPanasonic社製D50照明を用いた。
(1) Evaluation device A two-dimensional color meter PPLB-500 of Paparabo Co., Ltd. was used. Lighting was Panasonic D50 lighting.

(2) 撮影
PPLB-500による撮影は、部屋が暗室状態で行った。2次元色彩計は静止画タイプのものを使用し、白色板のL値を100として測定を行った。
(2) Shooting
The PPLB-500 was shot in a dark room. The two-dimensional colorimeter was a still image type, and the measurement was performed with the L value of the white plate set to 100.

(3)測定範囲
サンプルの測定範囲について、評価する際の範囲は全サンプルを同じサイズとした。測定範囲は、画像の枠線内である。
(3) Measurement range Regarding the measurement range of the sample, the range used for evaluation was the same size for all samples. The measurement range is within the frame of the image.

(4)測定項目及び結果について
建築外壁を撮像した画像から得られるサンプル1(基準)、サンプル2、サンプル3を用いる。サンプル1は住宅Jで撮像した実施品Wに関する画像Bである。サンプル2,3は規格外品NGに関する画像Aに該当する。サンプル1のうち、左上のタイルが実施品Wに相当し、他のタイルはその周辺に配置されたタイルである。サンプル2,3は、左上のタイルを、規格外品NGのタイルで差し替えたグラフィック技術による合成画像である。サンプル1は基準とする実施品Wが左上、サンプル2、3は規格外品NGが左上にある。
(4) Measurement items and results Sample 1 (reference), sample 2, and sample 3 obtained from an image of the building outer wall are used. Sample 1 is an image B relating to the implementation product W taken at the house J. Samples 2 and 3 correspond to the image A related to the nonstandard product NG. In the sample 1, the upper left tile corresponds to the implementation product W, and the other tiles are tiles arranged around the tile. Samples 2 and 3 are composite images by a graphic technique in which the upper left tile is replaced with a nonstandard NG tile. Sample 1 has reference product W at the upper left, and samples 2 and 3 have nonstandard product NG at the upper left.

サンプル1〜3の一致度、ΔE、平均Labの差を求めた。質感分布指数のうち、LabはLab座標での一致度(中心座標のシフト処理[図10のS147、図14のS207、図15のS207]をしないもの)、xy3Dはxy座標での一致度(中心座標のシフト処理をしないもの)、Textureはxy3Dのそれぞれのヒストグラム分布の平均値だけ中心座標のシフト処理を行って演算した一致度である。平均Lab値の差=サンプル2又は3の平均Lab値−サンプル1の平均Lab値とした。測定結果から、一致度の結果とΔEの数値から、サンプル1に色も表面の質感も一番類似しているサンプル2又は3を特定した。ΔEに関して人間の視感度特性を考慮したΔE00を使用した。   Differences in coincidence, ΔE, and average Lab of samples 1 to 3 were obtained. Among the texture distribution indexes, Lab is the degree of coincidence at the Lab coordinate (the center coordinate is not shifted (S147 in FIG. 10, S207 in FIG. 14, S207 in FIG. 15)), and xy3D is the degree of coincidence in the xy coordinate ( Texture is the degree of coincidence calculated by shifting the center coordinates by the average value of the respective xy3D histogram distributions. Difference of average Lab value = average Lab value of sample 2 or 3−average Lab value of sample 1 From the measurement result, the sample 2 or 3 having the most similar color and surface texture to the sample 1 was specified from the result of the degree of coincidence and the numerical value of ΔE. For ΔE, ΔE00 was used in consideration of human visibility characteristics.

サンプル1〜3の画像全体を比較検査であり、タイルを交換するためのタイルの規格外品NGを選択するための評価を得る。   The entire image of samples 1 to 3 is a comparative inspection, and an evaluation for selecting a non-standard tile NG for replacing the tile is obtained.

各サンプル1〜3の検査画像全体についてサンプル1を基準にサンプル2とサンプル3の検査を行った。   Sample 2 and sample 3 were inspected with reference to sample 1 for the entire inspection images of samples 1 to 3.

タイル1枚1枚の比較ではなく、実施品Wの周辺の複数枚のタイルを包括した画像を比較することで、組み合わせ全体での違和感の無さを比較することができる。   By comparing images that include a plurality of tiles around the implementation product W instead of comparing one tile at a time, it is possible to compare the discomfort of the entire combination.

複数枚のタイルの組み合わせ方によって、全体的に合っている、合っていないという判断が下すことができる。   Depending on how the tiles are combined, it can be judged that it is generally appropriate or not.

画像A,Bの画像全体を検査領域Kに指定した。検査結果を表1及び図26に示す。
The entire images A and B are designated as the inspection region K. The inspection results are shown in Table 1 and FIG.

サンプル1〜3を検査にかけると、図26に示す通り、サンプル1,2のLab一致度が31%、Textureが89%であるのに対し、サンプル1,3のxy3D一致度が21%、Textureが80%に下がった。サンプル1,2のΔEが0.112であるのに対し、サンプル1,3のΔEが0.472と拡大が増大した。したがって、Lab一致度、Texture、ΔEの結果から、サンプル2の方がサンプル3よりもサンプル1に色・質感が近いことが分かる。サンプル1のタイルを交換する場合には、サンプル2の左上のタイルを選択することとなる。   When samples 1 to 3 are subjected to inspection, as shown in FIG. 26, the Lab matching degree of samples 1 and 2 is 31% and the texture is 89%, whereas the xy3D matching degree of samples 1 and 3 is 21%. The texture has dropped to 80%. The ΔE of Samples 1 and 2 was 0.112, whereas the ΔE of Samples 1 and 3 was 0.472, and the enlargement increased. Therefore, it can be seen from the results of the Lab coincidence, Texture, and ΔE that the sample 2 is closer in color and texture to the sample 1 than the sample 3. When exchanging the tile of sample 1, the tile at the upper left of sample 2 is selected.

サンプル1〜3について左上のタイルを基準に右上、左下、右下のタイルを比較した検査である。近似するタイルを選別するための参照とするためである。   This is an inspection comparing Samples 1 to 3 with the upper right, lower left, and lower right tiles based on the upper left tile. This is because it is used as a reference for selecting an approximate tile.

サンプル1について、左上のタイルを基準に右上、左下、右下のタイルと比較した。左上-右上、左上-左下、左上-右下の3つの組み合わせがある。画像Bの四角形の枠を検査領域Kに指定した。検査結果を表2及び図27に示す。検査結果から次のことが分かる。
Sample 1 was compared with the upper right, lower left, and lower right tiles based on the upper left tile. There are three combinations: upper left-upper right, upper left-lower left, upper left-lower right. A rectangular frame of the image B is designated as the inspection area K. The inspection results are shown in Table 2 and FIG. The following can be seen from the test results.

サンプル1〜3を検査にかけると、表2、図27に示す通り、Lab一致度はサンプル1の左上・右上が84%、左上・左下が0%、左上・右下が0%であり、サンプル2の左上・右上が50%、左上・左下が29%、左上・右下が28%であり、サンプル3の左上・右上が0%、左上・左下が88%、左上・右下が85%である。ΔEはサンプル1の左上・右上が0.200、左上・左下が4.296、左上・右下が4.164である。したがって、Lab一致度、ΔEの結果から、サンプル2の方がサンプル3よりも、周辺のタイルとの関係で、サンプル1に色・質感が近いことが分かる。サンプル1のタイルを交換する場合には、サンプル2の左上のタイルを選択することとなる。   When the samples 1 to 3 are inspected, as shown in Table 2 and FIG. 27, the Lab matching degree is 84% in the upper left and upper right of the sample 1, 0% in the upper left and lower left, and 0% in the upper left and lower right. The upper left and upper right of sample 2 are 50%, the upper left and lower left are 29%, the upper left and lower right are 28%, the upper left and upper right of sample 3 are 0%, the upper left and lower left are 88%, and the upper left and lower right are 85. %. ΔE is 0.200 in the upper left and upper right of sample 1, 4.296 in the upper left and lower left, and 4.164 in the upper left and lower right. Therefore, it can be seen from the results of the Lab matching degree and ΔE that the sample 2 is closer in color and texture to the sample 1 than the sample 3 in relation to the surrounding tiles. When exchanging the tile of sample 1, the tile at the upper left of sample 2 is selected.

以上説明した検査結果は、目視評価と相関が取れていたので、複数のタイル全体、又は、タイルと他の周辺のタイルとの色・質感を検査でき、多岐にわたった色・質感検査が可能であることが分かった。   Since the inspection results described above were correlated with visual evaluation, it is possible to inspect the color / texture of multiple tiles as a whole, or between tiles and other surrounding tiles, allowing a wide variety of color / texture inspections. It turns out that.

マンションデベロッパ、各種製造業等、タイル等の廃棄品の処理に困っている産業を支援することができる。   It is possible to support industries that are in trouble with waste disposal such as tiles, such as condominium developers and various manufacturing industries.

A,B 画像
B バンパー
中心座標
D 領域
DB データベース
E,F 色温度測定センサー
G 格子
H ヒストグラム分布
積算数
積算数
I インターネット
ID 製品固有情報
J 住宅
K 検査領域
Lab 平均
M 製造工場
NG 規格外品
Q 照明色変換補正部
R 色温度測定部
T タイル
分布
W 実施品
ΔE 色差
ΔF 偏差
1 色・質感管理システム
2 2次元色彩計
3 記憶部
4 第1クライアント
5 規格外品分布
6 管理サーバー
7 2次元色彩計
8 第2クライアント
9 実施品分布演算部
10 質感分布指数演算部
11 出力部
12 第3クライアント
15 タグ
21 撮影レンズ
22a 光学フィルタ
22b 光学フィルタ
22c ダイクロイックミラー
23 撮像素子
23a−23c 撮像素子
26 反射鏡
27 フィルタターレット
61 入出力インタフェース
62 演算部
63 記憶部
64 表示部
65 バスライン
A, B Image B Bumper C 1 Center coordinate D Area DB Database E, F Color temperature measuring sensor G Grid H Histogram distribution H 1 Accumulated number H 2 Accumulated number I Internet ID Product specific information J Housing K Inspection area Lab Average M Manufacturing factory NG Non-standard product Q Illumination color conversion correction unit R Color temperature measurement unit T Tile U 1 Distribution W Product ΔE Color difference ΔF Deviation 1 Color / texture management system 2 Two-dimensional colorimeter 3 Storage unit 4 First client 5 Non-standard product distribution 6 Management Server 7 2D Colorimeter 8 Second Client 9 Practical Product Distribution Calculation Unit 10 Texture Distribution Index Calculation Unit 11 Output Unit 12 Third Client 15 Tag 21 Shooting Lens 22a Optical Filter 22b Optical Filter 22c Dichroic Mirror 23 Image Sensor 23a- 23c Image sensor 26 Reflector 27 Filter turret 61 Input / output interface 62 arithmetic unit 63 storage unit 64 display unit 65 bus line

2次元色彩計2は、図4に示すように、撮影レンズ21と、この撮影レンズ21の後方に配置された三つの光学フィルタ22a、22b、22cと、光学フィルタ22a、22b、22cの後方に配置された撮像素子23(CCD、CMOSなど)と、を備えている。2次元色彩計2の三つの分光感度(S1(λ)、S2(λ)、S3(λ))は、光学フィルタ22a、22b、22cの分光透過率と撮像素子23の分光感度との積により与えられるものである。図4における光学フィルタ22a、22b、22cと撮像素子23との配列的関係は模式的に示したものにすぎない。三つの分光感度(S1(λ)、S2(λ)、S3(λ))に従って画像を取得する方式について以下に具体例を挙げるが、本実施形態1ではこれらのうちいずれをも採ることができ、また、その他の方式を採ることもできる。24は演算部、25は表示部である。 As shown in FIG. 4, the two-dimensional colorimeter 2 has a photographing lens 21, three optical filters 22a, 22b, and 22c arranged behind the photographing lens 21, and a rear of the optical filters 22a, 22b, and 22c. And an image pickup device 23 (CCD, CMOS, etc.) arranged. The three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) of the two-dimensional colorimeter 2 are obtained by multiplying the spectral transmittances of the optical filters 22a, 22b, 22c and the spectral sensitivity of the image sensor 23. Is given. The arrangement relationship between the optical filters 22a, 22b, and 22c and the image sensor 23 in FIG. 4 is merely schematically shown. Specific examples of methods for acquiring images according to the three spectral sensitivities (S1 (λ), S2 (λ), and S3 (λ)) will be given below. In the first embodiment, any of these can be adopted. Also, other methods can be adopted. Reference numeral 24 denotes a calculation unit, and 25 denotes a display unit.

図6(a)に示すものはダイクロイックミラーを用いる方式である。これはダイクロイックミラー22c´により特定の波長の光を反射し、透過した残りの光について、さらに別のダイクロイックミラー22a´により別の特定の波長の光を反射して分光し、撮像素子23a、23b、23cを三つ並列にして読み出す方式である。ここでは、ダイクロイックミラー22a´が光学フィルタ22a、22bに相当し、ダイクロイックミラー22c´が光学フィルタ22cに相当する。撮影レンズ21から入射する光はダイクロイックミラー22c´により分光感度S3に従う光が反射され、残りの光は透過する。ダイクロイックミラー22c´により反射された光を反射鏡26により反射して撮像素子23cにより分光感度S3を得る。一方、ダイクロイックミラー22c´を透過した光は、ダイクロイックミラー22a´において、分光感度S1に従う光が反射され、残りの分光感度S2に従う光は透過する。ダイクロイックミラー22a´を透過した光を撮像素子23bにより撮像して分光感度S2を得る。ダイクロイックミラー22a´により反射された光を反射鏡29により反射して撮像素子23aにより分光感度S1を得る。ダイクロイックミラーに代えて同様な特性を有するダイクロイックプリズムを用いて三つに分光し、それぞれの光が透過する位置に撮像素子23a、23b、23cを接着することとしてもよい。 FIG. 6A shows a system using a dichroic mirror. This is because light of a specific wavelength is reflected by the dichroic mirror 22c ′, and the remaining light that has been transmitted is further reflected by another dichroic mirror 22a ′ to be spectrally separated, and the image pickup devices 23a, 23b. , 23c are read in parallel. Here, the dichroic mirror 22a ′ corresponds to the optical filters 22a and 22b, and the dichroic mirror 22c ′ corresponds to the optical filter 22c. Light incident from the photographic lens 21 is reflected by the dichroic mirror 22c ′ according to the spectral sensitivity S3, and the remaining light is transmitted. The light reflected by the dichroic mirror 22c ′ is reflected by the reflecting mirror 26, and the spectral sensitivity S3 is obtained by the imaging device 23c. On the other hand, the light transmitted through the dichroic mirror 22c ′ is reflected by the dichroic mirror 22a ′, and the light according to the spectral sensitivity S1 is transmitted, and the remaining light according to the spectral sensitivity S2 is transmitted . The light transmitted through the dichroic mirror 22a ′ is imaged by the image sensor 23b to obtain the spectral sensitivity S2. The light reflected by the dichroic mirror 22a ′ is reflected by the reflecting mirror 29, and the spectral sensitivity S1 is obtained by the imaging device 23a . Instead of the dichroic mirror, a dichroic prism having the same characteristics may be used to split the light into three, and the image sensors 23a, 23b, and 23c may be bonded to the positions where each light is transmitted.

Claims (13)

CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第1撮像部により、規格外品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、記憶する記憶部と、
前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、XYZ表色系の色空間に対応する座標を記憶し、前記座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、データベースに、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布演算部と、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第2撮像部により、実施品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、前記実施品の3バンド視覚感度画像S1i,S2i,S3iから、XYZ表色系の色空間に対応する座標を記憶し、前記座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、該色空間ヒストグラム分布を記憶する実施品分布演算部と、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算部と、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、出力する出力部と、を備え、
前記記憶部、規格外品分布演算部、実施品分布演算部、色・質感演算部、及び前記出力部のデータ通信をインターネットを介して行うことを特徴とする色・質感管理システム。
The first imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from non-standard products. A storage unit for acquiring and storing the three-band visual sensitivity images S1i, S2i, S3i;
The coordinates corresponding to the color space of the XYZ color system are stored from the non-standard three-band visual sensitivity images S1i, S2i, S3i, the coordinates are partitioned by grids, and the number of pixels of the inspection surface belonging to each grid is determined. A non-standard product distribution calculation unit that creates a color space histogram distribution of the XYZ color system by integrating, and stores the color space histogram distribution and the product-specific information corresponding to the database in association with each other;
The second imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from the actual product. Band visual sensitivity images S1i, S2i, and S3i are acquired, coordinates corresponding to the color space of the XYZ color system are stored from the three-band visual sensitivity images S1i, S2i, and S3i of the above-described product, and the coordinates are partitioned by a grid. Then, by integrating the number of pixels of the inspection surface belonging to each grid, to create a color space histogram distribution of the XYZ color system and store the color space histogram distribution,
A texture distribution index calculation unit that compares and determines the distribution of the non-standard product and the distribution of the implementation product and calculates a texture distribution index;
An output unit that refers to the texture distribution index and identifies and outputs the product-specific information of a non-standard product that approximates the color / texture to the implementation product,
A color / texture management system, wherein data communication of the storage unit, non-standard product distribution calculation unit, implementation product distribution calculation unit, color / texture calculation unit, and output unit is performed via the Internet.
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第1撮像部により、規格外品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、該3バンド視覚感度画像S1i,S2i,S3iの各画素のXYZ値、又は、該XYZ値より正規化されたxy値を記憶する記憶部と、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布演算部と、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第2撮像部により、実施品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を演算する実施品分布演算部と、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算部と、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、出力する出力部と、を備え、
前記記憶部、規格外品分布演算部、実施品分布演算部、色・質感演算部、及び前記出力部のデータ通信をインターネットを介して行うことを特徴とする色・質感管理システム。
The first imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from non-standard products. Three-band visual sensitivity images S1i, S2i, S3i are acquired, and the XYZ values of the pixels of the three-band visual sensitivity images S1i, S2i, S3i from the non-standard three-band visual sensitivity images S1i, S2i, S3i, or A storage unit for storing xy values normalized from the XYZ values;
xy chromaticity histogram distribution, XYZ color created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the nonstandard product belonging to each grid A non-standard product distribution calculation unit that stores a degree histogram three-dimensional distribution or a Lab chromaticity histogram three-dimensional distribution in the database of the management server in association with the product-specific information corresponding to the color space histogram distribution;
The second imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from the actual product. Band visual sensitivity images S1i, S2i, S3i are acquired, and the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram are partitioned by a grid, and the number of pixels of the nonstandard product belonging to each grid is integrated. An actual product distribution calculation unit that calculates the xy chromaticity histogram distribution, the XYZ chromaticity histogram three-dimensional distribution, or the Lab chromaticity histogram three-dimensional distribution created by
A texture distribution index calculation unit that compares and determines the distribution of the non-standard product and the distribution of the implementation product and calculates a texture distribution index;
An output unit that refers to the texture distribution index and identifies and outputs the product-specific information of a non-standard product that approximates the color / texture to the implementation product,
A color / texture management system, wherein data communication of the storage unit, non-standard product distribution calculation unit, implementation product distribution calculation unit, color / texture calculation unit, and output unit is performed via the Internet.
データベースを有し、色・質感を管理する管理サーバーと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する撮像部が、規格外品から取得した3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを記憶し、インターネットを介して前記管理サーバーに送信する第1クライアントと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する撮像部が、実施品から取得した3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを記憶し、インターネットを介して前記管理サーバーに送信する第2クライアントと、
インターネットを介して前記第1及び第2クライアントから3バンド視覚感度画像S1i,S2i,S3iを受信し、データベースに記憶する管理サーバーと、
を備え、
前記規格外品と、実施品の3バンド視覚感度画像S1i,S2i,S3iから、それぞれ、前記3バンド視覚感度画像S1i,S2i,S3iの各画素のXYZ値、又は、該XYZ値より正規化されたxy値を記憶し、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品と実施品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに記憶し、
前記規格外品の前記分布については、該分布と対応する製品固有情報と、を関連づけて記憶し、
前記規格外品の前記分布と、前記実施品に係る分布を比較判定し、質感分布指標を演算し、
該指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を前記第1クライアントから出力する、
ことを特徴とする色・質感管理システム。
A management server that has a database and manages color and texture;
An imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities acquired from non-standard products. A first client that stores the three-band visual sensitivity images S1i, S2i, S3i and transmits them to the management server via the Internet;
An imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities acquired from the product 3 A second client for storing the band visual sensitivity images S1i, S2i, S3i and transmitting the images to the management server via the Internet;
A management server for receiving three-band visual sensitivity images S1i, S2i, S3i from the first and second clients via the Internet and storing them in a database;
With
The non-standard product and the three-band visual sensitivity images S1i, S2i, and S3i of the product are normalized by the XYZ values of the respective pixels of the three-band visual sensitivity images S1i, S2i, and S3i, or the XYZ values, respectively. Store the xy value,
An xy chromaticity histogram distribution created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the non-standard product and the implemented product belonging to each grid. , XYZ chromaticity histogram three-dimensional distribution, or Lab chromaticity histogram three-dimensional distribution is stored in the database of the management server,
For the distribution of the non-standard product, the distribution and the product-specific information corresponding to the distribution are stored in association with each other,
Compare and determine the distribution of the non-standard product and the distribution related to the implementation product, calculate a texture distribution index,
With reference to the index, the product-specific information of a non-standard product whose color / texture approximates the implementation product is output from the first client.
A color and texture management system characterized by this.
前記管理サーバーで前記分布の演算をすることに代えて、前記第1クライアントと第2クライアントが、前記3バンド視覚感度画像S1i,S2i,S3i、及び、該画像から演算された前記分布を、インターネットを介して、当該データを前記管理サーバーに送信することを特徴とする請求項3の色・質感管理システム。   Instead of calculating the distribution at the management server, the first client and the second client may use the three-band visual sensitivity images S1i, S2i, S3i and the distribution calculated from the images as Internet The color / texture management system according to claim 3, wherein the data is transmitted to the management server via a network. 前記規格外品にタグを付設し、該タグに前記規格外品の前記分布と、前記製品固有情報を記憶させる請求項1乃至4ずれかの色・質感管理システム。   The color / texture management system according to any one of claims 1 to 4, wherein a tag is attached to the non-standard product, and the distribution of the non-standard product and the product-specific information are stored in the tag. 前記タグに記憶され、読み出された規格外品に属する分布と、前記実施品に係る分布を比較判定し、色・質感が前記実施品に近似する前記規格外品の製品固有情報を前記第2クライアントに送信する請求項5の色・質感管理システム。   The distribution belonging to the non-standard product stored in the tag and read out is compared with the distribution related to the implementation product, and the product-specific information of the non-standard product whose color / texture approximates the implementation product is determined. 6. The color / texture management system according to claim 5, which is transmitted to two clients. 第1クライアントが、
第1色温度測定センサーにより色温度を測定する色温度測定部を備え、
第2クライアントが、
第2色温度測定センサーにより色温度を測定する色温度測定部を備え、
前記第1及び第2色温度測定センサーの測定値に基づいて、前記規格外品と前記実施品の3バンド視覚感度画像S1i,S2i,S3iについて、色温度補正がなされた補正画像に変換する照明色変換補正部と、
を備えたことを特徴とする請求項3ないし6いずれかの色・質感管理システム。
The first client
A color temperature measuring unit for measuring the color temperature by the first color temperature measuring sensor;
The second client
A color temperature measuring unit for measuring the color temperature by the second color temperature measuring sensor;
Illumination that converts the three-band visual sensitivity images S1i, S2i, and S3i of the non-standard product and the practical product into corrected images that have undergone color temperature correction based on the measurement values of the first and second color temperature measurement sensors. A color conversion correction unit;
The color / texture management system according to claim 3, further comprising:
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第1撮像部により、規格外品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、記憶する記憶ステップと、
前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、XYZ表色系の色空間に対応する座標を記憶し、前記座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、データベースに、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布演算ステップと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第2撮像部により、実施品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、前記実施品の3バンド視覚感度画像S1i,S2i,S3iから、XYZ表色系の色空間に対応する座標を記憶し、前記座標を格子で区画し、各格子に属する検査面の画素数を積算することにより、XYZ表色系の色空間ヒストグラム分布を作成し、該色空間ヒストグラム分布を記憶する実施品分布演算ステップと、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算ステップと、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、出力する出力ステップと、を備え、
前記記憶部、規格外品分布演算部、実施品分布演算部、色・質感演算部、及び前記出力部のデータ通信をインターネットを介して行うことを特徴とする色・質感管理方法。
The first imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from non-standard products. A storage step of acquiring and storing the three-band visual sensitivity images S1i, S2i, S3i;
The coordinates corresponding to the color space of the XYZ color system are stored from the non-standard three-band visual sensitivity images S1i, S2i, S3i, the coordinates are partitioned by grids, and the number of pixels of the inspection surface belonging to each grid is determined. A non-standard product distribution calculation step of creating a color space histogram distribution of the XYZ color system by integrating and storing the color space histogram distribution and product-specific information corresponding to the database in association with each other;
The second imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from the actual product. Band visual sensitivity images S1i, S2i, and S3i are acquired, coordinates corresponding to the color space of the XYZ color system are stored from the three-band visual sensitivity images S1i, S2i, and S3i of the above-described product, and the coordinates are partitioned by a grid. Then, by integrating the number of pixels of the inspection surface belonging to each grid, to create a color space histogram distribution of the XYZ color system, and to store the color space histogram distribution, an implementation product distribution calculation step,
A texture distribution index calculation step of comparing and determining the distribution of the non-standard product and the distribution of the implementation product and calculating a texture distribution index;
An output step of identifying and outputting the product-specific information of a non-standard product whose color / texture approximates the implemented product with reference to the texture distribution index,
A color / texture management method, wherein data communication of the storage unit, non-standard product distribution calculation unit, implementation product distribution calculation unit, color / texture calculation unit, and output unit is performed via the Internet.
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第1撮像部により、規格外品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、該3バンド視覚感度画像S1i,S2i,S3iの各画素のXYZ値、又は、該XYZ値より正規化されたxy値を記憶する記憶ステップと、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに、該色空間ヒストグラム分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布演算ステップと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する第2撮像部により、実施品から3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを取得し、xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を演算する実施品分布演算ステップと、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算ステップと、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、出力する出力ステップと、を備え、
前記記憶部、規格外品分布演算部、実施品分布演算部、色・質感演算部、及び前記出力部のデータ通信をインターネットを介して行うことを特徴とする色・質感管理方法。
The first imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from non-standard products. Three-band visual sensitivity images S1i, S2i, S3i are acquired, and the XYZ values of the pixels of the three-band visual sensitivity images S1i, S2i, S3i from the non-standard three-band visual sensitivity images S1i, S2i, S3i, or Storing a xy value normalized from the XYZ value;
xy chromaticity histogram distribution, XYZ color created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the nonstandard product belonging to each grid A non-standard product distribution calculation step of storing a color histogram histogram three-dimensional distribution or a Lab chromaticity histogram three-dimensional distribution in the management server database in association with the product-specific information corresponding to the color space histogram distribution;
The second imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities from the actual product. Band visual sensitivity images S1i, S2i, S3i are acquired, and the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram are partitioned by a grid, and the number of pixels of the nonstandard product belonging to each grid is integrated. A product distribution calculation step for calculating the xy chromaticity histogram distribution, the XYZ chromaticity histogram three-dimensional distribution, or the Lab chromaticity histogram three-dimensional distribution created by
A texture distribution index calculation step of comparing and determining the distribution of the non-standard product and the distribution of the implementation product and calculating a texture distribution index;
An output step of identifying and outputting the product-specific information of a non-standard product whose color / texture approximates the implemented product with reference to the texture distribution index,
A color / texture management method, wherein data communication of the storage unit, non-standard product distribution calculation unit, implementation product distribution calculation unit, color / texture calculation unit, and output unit is performed via the Internet.
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する撮像部が、規格外品から取得した3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを記憶し、インターネットを介して、第1クライアントから管理サーバーに送信する第1送信ステップと、
前記規格外品の3バンド視覚感度画像S1i,S2i,S3iから、該3バンド視覚感度画像S1i,S2i,S3iの各画素のXYZ値、又は、該XYZ値より正規化されたxy値を記憶する記憶ステップと、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに、該分布と対応する製品固有情報と、を関連づけて記憶する規格外品分布記憶ステップと、
CIE XYZ等色関数と等価に線形変換された3つの分光感度(S1(λ)、S2(λ)、S3(λ))を有する撮像部が、実施品から取得した3つの分光感度を有する3バンド視覚感度画像S1i,S2i,S3iを記憶し、インターネットを介して、第2クライアントから管理サーバーに送信する第2送信ステップと、
xy色度図のxy座標、又はXYZ色度図のXYZ座標を格子で区画し、各格子に属する前記規格外品の画素数を積算することにより作成された、xy色度ヒストグラム分布、XYZ色度ヒストグラム3次元分布、又は、Lab色度ヒストグラム3次元分布を前記管理サーバーのデータベースに記憶する実施品記憶ステップと、
前記規格外品の前記分布と、前記実施品の前記分布を比較判定し、質感分布指標を演算する質感分布指標演算ステップと、
前記質感分布指標を参照して、前記実施品に色・質感が近似する規格外品の前記製品固有情報を特定し、前記第1クライアントから出力する出力ステップと、
を備えることを特徴とする色・質感管理方法。
An imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities acquired from non-standard products. A first transmission step of storing the three-band visual sensitivity images S1i, S2i, and S3i and transmitting them from the first client to the management server via the Internet;
From the non-standard three-band visual sensitivity images S1i, S2i, S3i, the XYZ values of the pixels of the three-band visual sensitivity images S1i, S2i, S3i, or the xy values normalized from the XYZ values are stored. A memory step;
xy chromaticity histogram distribution, XYZ color created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the nonstandard product belonging to each grid A non-standard product distribution storing step of storing the degree histogram three-dimensional distribution or the Lab chromaticity histogram three-dimensional distribution in the database of the management server in association with the product-specific information corresponding to the distribution;
An imaging unit having three spectral sensitivities (S1 (λ), S2 (λ), S3 (λ)) linearly converted equivalently to the CIE XYZ color matching function has three spectral sensitivities acquired from the product 3 A second transmission step of storing the band visual sensitivity images S1i, S2i, S3i, and transmitting them from the second client to the management server via the Internet;
xy chromaticity histogram distribution, XYZ color created by dividing the xy coordinates of the xy chromaticity diagram or the XYZ coordinates of the XYZ chromaticity diagram by a grid and integrating the number of pixels of the nonstandard product belonging to each grid An implementation product storage step of storing the degree histogram three-dimensional distribution or the Lab chromaticity histogram three-dimensional distribution in the database of the management server;
A texture distribution index calculation step of comparing and determining the distribution of the non-standard product and the distribution of the implementation product and calculating a texture distribution index;
Referring to the texture distribution index, specifying the product-specific information of a non-standard product whose color / texture approximates the implemented product, and outputting from the first client;
A color / texture management method characterized by comprising:
前記管理サーバーで前記分布の演算をすることに代えて、前記第1クライアントと第2クライアントが、前記3バンド視覚感度画像S1i,S2i,S3i、及び、該画像から演算された前記分布を、インターネットを介して、当該データを前記管理サーバーに送信するステップを備えることを特徴とする請求項10の色・質感管理方法。     Instead of calculating the distribution at the management server, the first client and the second client may use the three-band visual sensitivity images S1i, S2i, S3i and the distribution calculated from the images as Internet The color / texture management method according to claim 10, further comprising a step of transmitting the data to the management server via the network. 前記規格外品記憶ステップが、
前記規格外品にタグを付設し、該タグに前記規格外品の前記分布と、前記製品固有情報を記憶させるタグ情報記憶ステップを備え、
前記出力ステップが、
前記タグに記憶された規格外品の前記分布と、前記実施品の前記分布を比較判定し、色・質感が前記実施品に近似する前記規格外品の製品固有情報を出力するタグ出力ステップと、を備える請求項10又は11の色・質感管理方法。
The non-standard product storage step includes:
A tag information storing step of attaching a tag to the non-standard product, and storing the distribution of the non-standard product and the product-specific information in the tag;
The output step comprises:
A tag output step of comparing and determining the distribution of non-standard products stored in the tag and the distribution of the implementation products, and outputting product-specific information of the non-standard products whose color / texture approximates the implementation products; The color / texture management method according to claim 10 or 11.
第1送信ステップが、
第1色温度測定センサーにより色温度を測定する色温度測定ステップを備え、
第2送信ステップが、
第2色温度測定センサーにより色温度を測定する色温度測定ステップを備え、
前記第1及び第2色温度測定センサーの測定値に基づいて、前記規格外品と前記実施品の3バンド視覚感度画像S1i,S2i,S3iについて、色温度補正がなされた補正画像に変換する照明色変換補正ステップと、
を備えたことを特徴とする請求項10ないし12いずれかの色・質感管理方法。
The first sending step
A color temperature measurement step of measuring the color temperature by the first color temperature measurement sensor;
The second sending step
A color temperature measuring step of measuring a color temperature by a second color temperature measuring sensor;
Illumination that converts the three-band visual sensitivity images S1i, S2i, and S3i of the non-standard product and the practical product into corrected images that have undergone color temperature correction based on the measurement values of the first and second color temperature measurement sensors. A color conversion correction step;
13. The color / texture management method according to claim 10, further comprising:
JP2017005253A 2017-01-16 2017-01-16 Surface color and texture management system and management method Active JP6501315B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017005253A JP6501315B2 (en) 2017-01-16 2017-01-16 Surface color and texture management system and management method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017005253A JP6501315B2 (en) 2017-01-16 2017-01-16 Surface color and texture management system and management method

Publications (2)

Publication Number Publication Date
JP2018115877A true JP2018115877A (en) 2018-07-26
JP6501315B2 JP6501315B2 (en) 2019-04-17

Family

ID=62985270

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017005253A Active JP6501315B2 (en) 2017-01-16 2017-01-16 Surface color and texture management system and management method

Country Status (1)

Country Link
JP (1) JP6501315B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022191131A1 (en) * 2021-03-08 2022-09-15 大日本印刷株式会社 Interference color evaluation method, optical film, polarizing plate, and image display device
CN115130367A (en) * 2021-03-12 2022-09-30 台湾通用纺织科技股份有限公司 Cloth information digitizing system and method thereof

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5714038A (en) * 1980-06-30 1982-01-25 Matsushita Electric Works Ltd Decorative plywood with groove
US20060029728A1 (en) * 2004-08-03 2006-02-09 Roger Stull Method of repair for plastic automotive body panels
JP2006525524A (en) * 2003-04-30 2006-11-09 イー・アイ・デュポン・ドウ・ヌムール・アンド・カンパニー Identification method of effect pigments in paint film for on-site color matching
JP2012127871A (en) * 2010-12-16 2012-07-05 Toyohashi Univ Of Technology Texture quantification device and texture quantification method
JP2016006416A (en) * 2014-05-26 2016-01-14 有限会社パパラボ Coloring evaluation device and coloring evaluation method
JP2016161297A (en) * 2015-02-26 2016-09-05 有限会社パパラボ Coloring evaluation device and coloring evaluation method
JP2016194456A (en) * 2015-03-31 2016-11-17 有限会社パパラボ Color fidelity environment correction device and color fidelity environment correction method

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5714038A (en) * 1980-06-30 1982-01-25 Matsushita Electric Works Ltd Decorative plywood with groove
JP2006525524A (en) * 2003-04-30 2006-11-09 イー・アイ・デュポン・ドウ・ヌムール・アンド・カンパニー Identification method of effect pigments in paint film for on-site color matching
US20060029728A1 (en) * 2004-08-03 2006-02-09 Roger Stull Method of repair for plastic automotive body panels
JP2012127871A (en) * 2010-12-16 2012-07-05 Toyohashi Univ Of Technology Texture quantification device and texture quantification method
JP2016006416A (en) * 2014-05-26 2016-01-14 有限会社パパラボ Coloring evaluation device and coloring evaluation method
JP2016161297A (en) * 2015-02-26 2016-09-05 有限会社パパラボ Coloring evaluation device and coloring evaluation method
JP2016194456A (en) * 2015-03-31 2016-11-17 有限会社パパラボ Color fidelity environment correction device and color fidelity environment correction method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022191131A1 (en) * 2021-03-08 2022-09-15 大日本印刷株式会社 Interference color evaluation method, optical film, polarizing plate, and image display device
CN115130367A (en) * 2021-03-12 2022-09-30 台湾通用纺织科技股份有限公司 Cloth information digitizing system and method thereof

Also Published As

Publication number Publication date
JP6501315B2 (en) 2019-04-17

Similar Documents

Publication Publication Date Title
JP6039008B2 (en) Coloring evaluation apparatus and coloring evaluation method
JP6039109B2 (en) Coloring inspection apparatus and coloring inspection method
US8659653B2 (en) Device for evaluating the surface of a tire
US8532371B2 (en) Method and apparatus for evaluating color in an image
JP7076760B2 (en) Color judgment device and color judgment method
JP6371237B2 (en) Coloring evaluation apparatus and coloring evaluation method
US20160234490A1 (en) Colorimetry system for display testing
US20100232688A1 (en) Color chart processing apparatus, color chart processing method, and color chart processing program
JP6257551B2 (en) Color fidelity environment correction apparatus and color fidelity environment correction method
JP2019020311A (en) Color measurement method and color measurement device
WO2015141233A1 (en) True-color environment correction device and true-color environment correction method
CN105551431A (en) LED display module uniformity correction method
JP6113319B2 (en) Image color distribution inspection apparatus and image color distribution inspection method
CN104902153A (en) Color correction method for multi-spectrum cameras
JP5841091B2 (en) Image color distribution inspection apparatus and image color distribution inspection method
US20190195624A1 (en) Apparatus and method for evaluating metal surface texture
Smagina et al. Multiple light source dataset for colour research
JP6501315B2 (en) Surface color and texture management system and management method
CN114503097A (en) Method and apparatus for color lookup using mobile device
JP2016194449A (en) Coloring checkup device, and coloring checkup method
JP2018004421A (en) Apparatus and method for evaluating feel of metal surface
JP2009271093A (en) Color chip processing device, color chip processing method, and color chip processing program
JPH11304589A (en) Ambient light measuring system
JP6851082B2 (en) Multi-point monitor color sharing device
JP2017153054A (en) Coloring inspection apparatus and coloring inspection method

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181017

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181211

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181219

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190226

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190314

R150 Certificate of patent or registration of utility model

Ref document number: 6501315

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250