Nothing Special   »   [go: up one dir, main page]

JP2006180971A - Skin evaluation method and device - Google Patents

Skin evaluation method and device Download PDF

Info

Publication number
JP2006180971A
JP2006180971A JP2004375392A JP2004375392A JP2006180971A JP 2006180971 A JP2006180971 A JP 2006180971A JP 2004375392 A JP2004375392 A JP 2004375392A JP 2004375392 A JP2004375392 A JP 2004375392A JP 2006180971 A JP2006180971 A JP 2006180971A
Authority
JP
Japan
Prior art keywords
skin
frequency
image
texture
fundamental frequency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004375392A
Other languages
Japanese (ja)
Other versions
JP4739746B2 (en
Inventor
Hideyo Takeuchi
英世 竹内
Masahiro Hoguro
政大 保黒
Tatsuki Yoshimine
達樹 吉嶺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DDS KK
Original Assignee
DDS KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DDS KK filed Critical DDS KK
Priority to JP2004375392A priority Critical patent/JP4739746B2/en
Priority to PCT/JP2005/003315 priority patent/WO2006070487A1/en
Priority to KR1020067010975A priority patent/KR20070096778A/en
Priority to US10/586,968 priority patent/US20070276206A1/en
Priority to CNA2005800115358A priority patent/CN1942137A/en
Publication of JP2006180971A publication Critical patent/JP2006180971A/en
Application granted granted Critical
Publication of JP4739746B2 publication Critical patent/JP4739746B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/442Evaluating skin mechanical properties, e.g. elasticity, hardness, texture, wrinkle assessment
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B10/00Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Dermatology (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a skin evaluation method and device capable of evaluating the state of the skin even if a sampled image is ambiguous on some level and individual differences of image sampling devices are large. <P>SOLUTION: A part of an image input from a fingerprint sensor (S1) is picked up (S3) and a fundamental frequency is calculated using a secondary linear prediction analysis (S5). The sum S of an x-directional fundamental frequency and y-directional fundamental frequency is calculated and defined as a determination criterion of the fineness of the texture (S7). A prepared threshold and the criterion S found in S7 are compared with each other and the fineness of the texture of the skin state is evaluated by being classified into three levels (S9-S17). A ratio of the x-directional to y-directional fundamental frequencies of an object image is calculated and defined as an evaluation criterion on the streak of the texture (S19), the image is rotated to find a similar evaluation criterion, and the streak of the texture is determined based thereon by being classified into two levels (S31-S35). The determination result of the fineness and the streak of the texture are displayed on the display screen (S37). <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、肌評価方法及び肌評価装置に関するものである。   The present invention relates to a skin evaluation method and a skin evaluation apparatus.

一般に、健康で美しい肌を得ることは多くの人の願いである。美しくなりたいという願いを叶えるため、これまで多くの企業が多種多様な化粧品・美容器具を開発・販売してきている。化粧品・美容器具は人によって相性があり、これらが十分な効果を発揮するためには、人によって異なる肌質や、そのときの肌の状態に適した美容法を選択する必要がある。従って肌状態の診断は非常に重要である。   In general, it is a desire of many people to obtain healthy and beautiful skin. In order to fulfill the desire to be beautiful, many companies have developed and sold a wide variety of cosmetics and beauty equipment. Cosmetics and beauty instruments are compatible with each other, and in order for these to exhibit a sufficient effect, it is necessary to select a beauty method suitable for different skin qualities and skin conditions at that time. Therefore, the diagnosis of skin condition is very important.

ここで、肌(以下、「皮膚」ということもある)の状態は、一般に「キメ」により評価される。キメは、肌の表面に広がる網目状の凹凸のことで、高い部分である「皮丘」と皮丘の間の溝「皮溝」と「毛孔」とで形づくられる。「肌のキメ」は、「キメの細かさ」と「キメ形状」により評価するのが一般的である。均一に整った美しい起伏が続いている状態が「キメの細かい肌」である。また、肌に筋が入っている状態が、「キメが流れている」状態である。キメの形が整っていて筋が見えないのがキメ形状が良好な状態である。   Here, the state of the skin (hereinafter sometimes referred to as “skin”) is generally evaluated by “texture”. The texture is a mesh-like unevenness spreading on the surface of the skin, and is formed by the “skin”, which is a high part, and the “skin” and “pore” between the hides. “Skin texture” is generally evaluated by “texture fineness” and “texture shape”. “Smooth skin” is a state in which beautiful and uniform undulations continue. In addition, a state where the skin is streaked is a state where “texture is flowing”. The textured shape is good when the texture is well shaped and the lines are not visible.

一昔前までは、肌状態の診断は化粧品会社の専門家などによってのみ行われていた。しかし専門家による肌診断は、観察者の直感的な判断が重要な要素となるため、評価には長期の習熟が必要で誰でも手軽に行えるものではない。近年この問題を解決するために、自動的に肌診断を行う肌診断装置が考案されてきている。   Until a while ago, skin conditions were diagnosed only by specialists in cosmetic companies. However, the expert's intuitive judgment is an important factor for skin diagnosis by specialists, so evaluation requires long-term proficiency and is not easily performed by anyone. In recent years, in order to solve this problem, a skin diagnosis apparatus that automatically performs skin diagnosis has been devised.

例えば、特許文献1では、(1)肌のRGB画像(カラー画像)を得る。(2)RGB→Lab画像に変換する。(3)低輝度領域の画像全体に対する面積又は位置の変動係数(ばらつき)を算出する。(4)この変動係数を用いて皮膚の不均一性を評価する。という手順により、皮膚の不均一性を評価基準とした肌診断方法を提案している。   For example, in Patent Document 1, (1) an RGB image (color image) of skin is obtained. (2) Conversion from RGB to Lab image. (3) A variation coefficient (variation) of the area or position of the entire image of the low luminance region is calculated. (4) The unevenness of the skin is evaluated using this coefficient of variation. In this way, we have proposed a skin diagnostic method that uses skin non-uniformity as an evaluation criterion.

また、特許文献2では、皮膚表面上で皮溝が3本以上会合する点を1交点とし、単位面積あたりの交点数や交点一個当たりの平均面積を計測することにより、皮膚のキメの荒さを測定する方法が開示されている。
特許第3351958号公報 特開2001−170028号公報
In Patent Document 2, the point where three or more skin grooves meet on the skin surface is defined as one intersection, and the roughness of the skin texture is measured by measuring the number of intersections per unit area and the average area per intersection. A method of measuring is disclosed.
Japanese Patent No. 3351958 JP 2001-170028 A

しかしながら、上記特許文献1では、分析対象の肌画像が比較的画質のよいものであることを前提とするため、カラー画像が得られる比較的高価なカメラを用いる必要がある。また、低輝度領域を判定する閾値が必要となる。個体差の少ない、比較的高価なカメラを用いないと、閾値の設定は難しいという問題がある。   However, since the above-mentioned Patent Document 1 is based on the premise that the skin image to be analyzed has a relatively good image quality, it is necessary to use a relatively expensive camera capable of obtaining a color image. Further, a threshold value for determining the low luminance area is required. There is a problem that it is difficult to set a threshold unless a relatively expensive camera with little individual difference is used.

また、上記特許文献2では、2値化、細線化を必要とする。2値化閾値を設定できるような個体差の少ないカメラの使用、または、一定条件下での肌画像採取を想定しており、安価なカメラなどで得られる画質の低い画像では分析が難しいという問題がある。   In Patent Document 2, binarization and thinning are required. The use of low-individual cameras that can set a binarization threshold, or skin image collection under certain conditions is assumed, and it is difficult to analyze low-quality images obtained with inexpensive cameras. There is.

本発明は上記問題を解決するためになされたものであり、採取された画像がある程度不明瞭な場合や画像の採取装置の個体差が大きい場合でも、肌の状態の評価が可能な肌評価方法及び肌評価装置を提供することを目的とする。   The present invention has been made to solve the above problem, and a skin evaluation method capable of evaluating the state of the skin even when the collected image is somewhat unclear or when there is a large individual difference between the image collection devices. And it aims at providing a skin evaluation apparatus.

上記目的を達成するために、本発明の請求項1に記載の肌評価方法は、入力された肌の画像を周波数分析し、その周波数分析の結果得られた前記肌画像の周波数特徴に基づいて前記肌の状態を判定する。   In order to achieve the above object, a skin evaluation method according to claim 1 of the present invention performs frequency analysis on an input skin image, and based on frequency characteristics of the skin image obtained as a result of the frequency analysis. The skin condition is determined.

また、本発明の請求項2に記載の肌評価方法は、請求項1に記載の発明の構成に加え、前記周波数分析により、前記肌画像の基本周波数を前記周波数特徴として抽出し、当該基本周波数が予め定めた所定の閾値を超えている場合に前記肌の状態が良好であると判定する。ここで、本発明にいう基本周波数は、周知の周波数分析により求められる基本周波数のほか、簡易的な基本周波数算出法であるゼロクロス法等により求められるものを含むものとする。   Moreover, the skin evaluation method according to claim 2 of the present invention extracts the fundamental frequency of the skin image as the frequency feature by the frequency analysis in addition to the configuration of the invention according to claim 1, and the fundamental frequency Determines that the condition of the skin is good. Here, the fundamental frequency referred to in the present invention includes a fundamental frequency obtained by a well-known frequency analysis, as well as a fundamental frequency obtained by a zero-cross method, which is a simple fundamental frequency calculation method.

また、本発明の請求項3に記載の肌評価方法は、請求項1又は2に記載の発明の構成に加え、前記周波数分析を前記肌画像のX方向とY方向のそれぞれについて行なうことにより、前記基本周波数を、前記肌画像のX方向とY方向のそれぞれについて抽出し、X方向の基本周波数とY方向の基本周波数の比を算出して、当該比が所定の閾値の範囲内であれば前記肌の状態が良好であると判定する。   In addition to the configuration of the invention described in claim 1 or 2, the skin evaluation method according to claim 3 of the present invention performs the frequency analysis for each of the X direction and the Y direction of the skin image. The fundamental frequency is extracted for each of the X direction and the Y direction of the skin image, a ratio of the fundamental frequency in the X direction and the fundamental frequency in the Y direction is calculated, and the ratio is within a predetermined threshold range. It is determined that the skin condition is good.

また、本発明の請求項4に記載の肌評価方法は、請求項1乃至3のいずれかに記載の発明の構成に加え、前記周波数分析として、二次の線形予測分析を用いる。   A skin evaluation method according to claim 4 of the present invention uses a second-order linear prediction analysis as the frequency analysis in addition to the configuration of the invention according to any one of claims 1 to 3.

また、本発明の請求項5に記載の肌評価方法は、請求項1乃至4のいずれかに記載の発明の構成に加え、前記肌画像が、指紋センサにより入力される。   According to a skin evaluation method of a fifth aspect of the present invention, in addition to the configuration of the invention according to any one of the first to fourth aspects, the skin image is input by a fingerprint sensor.

さらに、本発明の請求項6に記載の肌評価装置は、肌の画像を入力する画像入力手段と、当該画像入力手段により入力された肌画像を周波数分析する周波数分析手段と、当該周波数分析手段により周波数分析された結果得られた前記肌画像の周波数特徴を抽出する特徴抽出手段と、当該特徴抽出手段により抽出された周波数特徴に基づき、前記肌の状態を判定する判定手段とを備えている。   Furthermore, the skin evaluation apparatus according to claim 6 of the present invention is an image input means for inputting a skin image, a frequency analysis means for frequency analysis of the skin image input by the image input means, and the frequency analysis means. And a feature extracting unit that extracts a frequency feature of the skin image obtained as a result of the frequency analysis by the method and a determining unit that determines the state of the skin based on the frequency feature extracted by the feature extracting unit. .

また、本発明の請求項7に記載の肌評価装置は、請求項6に記載の発明の構成に加え、前記特徴抽出手段が、前記肌画像の基本周波数を前記周波数特徴として抽出し、前記判定手段は、当該基本周波数が予め定めた所定の閾値を超えている場合に前記肌の状態が良好であると判定する。   Further, in the skin evaluation apparatus according to claim 7 of the present invention, in addition to the configuration of the invention according to claim 6, the feature extraction means extracts the fundamental frequency of the skin image as the frequency feature, and the determination The means determines that the skin condition is good when the fundamental frequency exceeds a predetermined threshold value.

また、本発明の請求項8に記載の肌評価装置は、請求項6又は7に記載の発明の構成に加え、前記周波数分析手段が、前記肌画像のX方向とY方向のそれぞれについて周波数分析を行い、前記特徴抽出手段は、前記基本周波数を、前記肌画像のX方向とY方向のそれぞれについて抽出し、前記特徴抽出手段により抽出されたX方向の基本周波数とY方向の基本周波数の比を算出する周波数比算出手段を備え、前記判定手段は、当該周波数比算出手段により算出された比が所定の閾値の範囲内であれば前記肌の状態が良好であると判定する。   Further, in the skin evaluation apparatus according to claim 8 of the present invention, in addition to the configuration of the invention according to claim 6 or 7, the frequency analysis means performs frequency analysis on each of the X direction and the Y direction of the skin image. The feature extraction unit extracts the fundamental frequency for each of the X direction and the Y direction of the skin image, and the ratio of the fundamental frequency in the X direction and the fundamental frequency in the Y direction extracted by the feature extraction unit. Frequency ratio calculating means for calculating the ratio, and the determining means determines that the skin condition is good if the ratio calculated by the frequency ratio calculating means is within a predetermined threshold range.

また、本発明の請求項9に記載の肌評価装置は、請求項6乃至8のいずれかに記載の発明の構成に加え、前記周波数分析手段が、二次の線形予測分析を用いる。   According to a ninth aspect of the present invention, in addition to the configuration of the sixth aspect, the frequency analysis means uses a second-order linear prediction analysis.

また、本発明の請求項10に記載の肌評価装置は、請求項6乃至9のいずれかに記載の発明の構成に加え、前記画像入力手段が指紋センサにより構成される。   According to a tenth aspect of the present invention, in addition to the configuration of the sixth aspect of the present invention, the image input means includes a fingerprint sensor.

本発明の請求項1に記載の肌評価方法は、入力された肌の画像を周波数分析し、その周波数分析の結果得られた肌画像の周波数特徴に基づいて肌の状態を判定する。このような周波数特徴は、入力された肌画像が鮮明でなくても求めることができるので、入力肌画像の画質に左右されずに肌の状態の評価を行なうことができる。   The skin evaluation method according to claim 1 of the present invention performs frequency analysis on the input skin image, and determines the skin state based on the frequency characteristics of the skin image obtained as a result of the frequency analysis. Such a frequency feature can be obtained even if the input skin image is not clear, so that the skin condition can be evaluated regardless of the image quality of the input skin image.

また、本発明の請求項2に記載の肌評価方法は、請求項1に記載の発明の効果に加え、基本周波数を周波数特徴として抽出する。基本周波数が高ければ肌の状態が良好である、いわゆるキメの細かい状態であるという相関が確認されており、肌の状態を基本周波数により定量化して判定することができる。   The skin evaluation method according to claim 2 of the present invention extracts the fundamental frequency as a frequency feature in addition to the effect of the invention according to claim 1. The correlation that the skin state is good when the fundamental frequency is high, that is, the so-called fine state, is confirmed, and the skin state can be quantified and determined by the fundamental frequency.

また、本発明の請求項3に記載の肌評価方法は、請求項1又は2に記載の発明の効果に加え、X方向とY方向について基本周波数の比を求めると、肌のキメの流れを算出することができ、この流れの度合いによってキメ形状から肌の状態を評価できる。特に、請求項2で得られるキメの細かさとあわせて評価することにより、より質の高い肌評価が可能となる。   Moreover, the skin evaluation method according to claim 3 of the present invention, in addition to the effect of the invention according to claim 1 or 2, determines the flow of skin texture when the ratio of the fundamental frequency in the X direction and the Y direction is obtained. The skin condition can be evaluated from the texture shape according to the degree of the flow. In particular, by evaluating together with the fineness of the texture obtained in claim 2, higher quality skin evaluation becomes possible.

また、本発明の請求項4に記載の肌評価方法は、請求項1乃至3のいずれかに記載の発明の効果に加え、周波数分析として二次の線形予測分析を用いるので、音声や指紋認証分野で周知の技術により肌の評価を行なうことができる。   The skin evaluation method according to claim 4 of the present invention uses a second-order linear prediction analysis as frequency analysis in addition to the effect of the invention according to any one of claims 1 to 3, so that voice or fingerprint authentication is used. Skin can be evaluated by techniques well known in the field.

また、本発明の請求項5に記載の肌評価方法は、請求項1乃至4のいずれかに記載の発明の効果に加え、肌画像を指紋センサを用いて入力するので、カメラを用いて撮像する場合に比べ、肌とカメラレンズの撮像距離を一定にする機構や焦点を合わせる手間等が不要であり、容易に評価対象とする肌画像を得ることができる。   In addition to the effect of the invention according to any one of claims 1 to 4, the skin evaluation method according to claim 5 of the present invention inputs a skin image using a fingerprint sensor. Compared with the case where it does, the mechanism which makes the imaging distance of skin and a camera lens constant, the effort to focus, etc. are unnecessary, and the skin image made into evaluation object can be obtained easily.

さらに、本発明の請求項6に記載の肌評価装置は、入力された肌の画像を周波数分析し、その周波数分析の結果得られた肌画像の周波数特徴に基づいて肌の状態を判定する。このような周波数特徴は、入力された肌画像が鮮明でなくても求めることができるので、入力肌画像の画質に左右されずに肌の状態の評価を行なうことができる。   Furthermore, the skin evaluation apparatus according to claim 6 of the present invention performs frequency analysis on the input skin image, and determines the skin state based on the frequency characteristics of the skin image obtained as a result of the frequency analysis. Such a frequency feature can be obtained even if the input skin image is not clear, so that the skin condition can be evaluated regardless of the image quality of the input skin image.

また、本発明の請求項7に記載の肌評価装置は、請求項6に記載の発明の効果に加え、基本周波数を周波数特徴として抽出する。基本周波数が高ければ肌の状態が良好である、いわゆるキメの細かい状態であるという相関が確認されており、肌の状態を基本周波数により定量化して判定することができる。   Moreover, the skin evaluation apparatus according to claim 7 of the present invention extracts the fundamental frequency as a frequency feature in addition to the effect of the invention according to claim 6. The correlation that the skin state is good when the fundamental frequency is high, that is, the so-called fine state, is confirmed, and the skin state can be quantified and determined by the fundamental frequency.

また、本発明の請求項8に記載の肌評価装置は、請求項6又は7に記載の発明の効果に加え、X方向とY方向について基本周波数の比を求めると、肌のキメの流れを算出することができ、この流れの度合いによってキメ形状から肌の状態を評価できる。特に、請求項7で得られるキメの細かさとあわせて評価することにより、より質の高い肌評価が可能となる。   In addition to the effect of the invention according to claim 6 or 7, the skin evaluation apparatus according to claim 8 of the present invention obtains the flow of skin texture when the ratio of the fundamental frequencies in the X direction and the Y direction is obtained. The skin condition can be evaluated from the texture shape according to the degree of the flow. In particular, by evaluating together with the fineness of the texture obtained in claim 7, higher quality skin evaluation becomes possible.

また、本発明の請求項9に記載の肌評価装置は、請求項6乃至8のいずれかに記載の発明の効果に加え、周波数分析として二次の線形予測分析を用いるので、音声や指紋認証分野で周知の技術により肌の評価を行なうことができる。   Moreover, since the skin evaluation apparatus according to claim 9 of the present invention uses a second-order linear prediction analysis as frequency analysis in addition to the effects of the invention according to any of claims 6 to 8, voice and fingerprint authentication Skin can be evaluated by techniques well known in the field.

また、本発明の請求項10に記載の肌評価装置は、請求項6乃至9のいずれかに記載の発明の効果に加え、肌画像を指紋センサを用いて入力するので、カメラを用いて撮像する場合に比べ、肌とカメラレンズの撮像距離を一定にする機構や焦点を合わせる手間等が不要であり、容易に評価対象とする肌画像を得ることができる。   In addition to the effect of the invention according to any one of claims 6 to 9, the skin evaluation apparatus according to claim 10 of the present invention inputs a skin image using a fingerprint sensor. Compared with the case where it does, the mechanism which makes the imaging distance of skin and a camera lens constant, the effort to focus, etc. are unnecessary, and the skin image made into evaluation object can be obtained easily.

次に本発明を適用した実施の形態について図面を参照して以下に説明する。以下の実施形態は、本発明の肌評価方法をコンピュータに実行させるプログラムを指紋センサ付携帯電話機に搭載し、この携帯電話機を本発明の肌評価装置として機能させたものである。本実施形態の概略を説明すると、携帯電話機に組み込まれた肌評価プログラムを起動し、携帯電話機に搭載された指紋センサにより操作者が肌画像を読み込ませると、肌評価プログラムによって入力肌画像の肌の状態が評価され、表示画面上に結果が表示される。   Next, embodiments to which the present invention is applied will be described below with reference to the drawings. In the following embodiments, a program for causing a computer to execute the skin evaluation method of the present invention is installed in a mobile phone with a fingerprint sensor, and this mobile phone functions as the skin evaluation apparatus of the present invention. The outline of this embodiment will be described. When a skin evaluation program installed in a mobile phone is started and an operator reads a skin image by a fingerprint sensor mounted on the mobile phone, the skin of the input skin image is read by the skin evaluation program. Is evaluated and the result is displayed on the display screen.

まず、図1及び図2を参照して、携帯電話機の構成について説明する。図1は、携帯電話機1の外観図である。図2は、携帯電話機1の電気的構成を示すブロック図である。   First, the configuration of the mobile phone will be described with reference to FIGS. FIG. 1 is an external view of the mobile phone 1. FIG. 2 is a block diagram showing an electrical configuration of the mobile phone 1.

図1に示すように、携帯電話機1には、表示画面2と、テン・キー入力部3と、ジョグポインタ4と、通話開始ボタン5と、通話終了ボタン6と、マイク7と、スピーカー8と、機能選択ボタン9,10と、画像入力手段としての指紋センサ11と、アンテナ12(図2参照)とが設けられている。尚、テン・キー入力部3、ジョグポインタ4、通話開始ボタン5、通話終了ボタン6、機能選択ボタン9,10によりキー入力部38(図2参照)が構成される。   As shown in FIG. 1, the mobile phone 1 includes a display screen 2, a numeric key input unit 3, a jog pointer 4, a call start button 5, a call end button 6, a microphone 7, and a speaker 8. , Function selection buttons 9 and 10, a fingerprint sensor 11 as an image input means, and an antenna 12 (see FIG. 2) are provided. The numeric key input unit 3, the jog pointer 4, the call start button 5, the call end button 6, and the function selection buttons 9 and 10 constitute a key input unit 38 (see FIG. 2).

ここで、指紋センサ11は、静電容量型のセンサや光学的センサ、感熱型、電界型、平面型、ライン型いずれのタイプの指紋センサを用いてもよく、指の指紋画像の一部又は全部を指紋情報として取得できればよい。本実施形態では、ライン型の指紋センサを用いるものとし、操作者が携帯電話機1を把持して、指紋センサ11を肌に沿って滑らせることにより、指紋センサ11から肌画像が読み込まれる。   Here, the fingerprint sensor 11 may be a capacitance type sensor, an optical sensor, a heat sensitive type, an electric field type, a planar type, or a line type fingerprint sensor. It suffices if the whole can be acquired as fingerprint information. In this embodiment, it is assumed that a line-type fingerprint sensor is used, and the skin image is read from the fingerprint sensor 11 by the operator holding the mobile phone 1 and sliding the fingerprint sensor 11 along the skin.

また、図2に示すように、携帯電話機1には、マイク7からの音声信号の増幅及びスピーカ8から出力する音声の増幅等を行うアナログフロントエンド36と、アナログフロントエンド36で増幅された音声信号のデジタル信号化及びモデム34から受け取ったデジタル信号をアナログフロントエンド36で増幅できるようにアナログ信号化する音声コーディック部35と、変復調を行うモデム部34と、アンテナ12から受信した電波の増幅及び検波を行い、また、キャリア信号をモデム34から受け取った信号により変調し、増幅する送受信部33が設けられている。   As shown in FIG. 2, the cellular phone 1 includes an analog front end 36 that performs amplification of an audio signal from the microphone 7 and amplification of audio output from the speaker 8, and audio amplified by the analog front end 36. An audio codec unit 35 that converts the signal into a digital signal and converts the digital signal received from the modem 34 into an analog signal so that it can be amplified by the analog front end 36, a modem unit 34 that performs modulation / demodulation, and amplification of radio waves received from the antenna 12 A transmission / reception unit 33 that performs detection and modulates and amplifies the carrier signal with the signal received from the modem 34 is provided.

さらに、携帯電話機1には、携帯電話機1全体の制御を行う制御部20が設けられ、制御部20には、CPU21と、データを一時的に記憶するRAM22と、時計機能部23とが内蔵されている。RAM22は、後述する処理においてワークエリアとして使用されるものであり、指紋センサ11から取得する皮膚の凹凸を濃度値に変換した値を記憶するエリア、後述の各処理で算出される演算結果を記憶するエリア等の記憶エリアが用意されている。また、制御部20には、文字等を入力するキー入力部38と、表示画面2と、指紋センサ11と、不揮発メモリ30と、着信音を発生するメロディ発生器32が接続されている。メロディ発生器32には、メロディ発生器32で発生した着信音を発声するスピーカ37が接続されている。不揮発メモリ30には、制御部20のCPU21で実行される各種プログラムを記憶するエリア、各種の初期設定値を記憶するエリア、予め定められた各種の閾値を記憶するエリア等が設けられている。   Further, the mobile phone 1 is provided with a control unit 20 that controls the entire mobile phone 1. The control unit 20 includes a CPU 21, a RAM 22 that temporarily stores data, and a clock function unit 23. ing. The RAM 22 is used as a work area in processing to be described later, and stores an area for storing a value obtained by converting the unevenness of the skin acquired from the fingerprint sensor 11 into a density value, and a calculation result calculated in each processing to be described later. A storage area such as a storage area is prepared. The control unit 20 is connected to a key input unit 38 for inputting characters and the like, the display screen 2, the fingerprint sensor 11, the nonvolatile memory 30, and a melody generator 32 for generating a ring tone. The melody generator 32 is connected to a speaker 37 that utters a ring tone generated by the melody generator 32. The nonvolatile memory 30 is provided with an area for storing various programs executed by the CPU 21 of the control unit 20, an area for storing various initial setting values, an area for storing various predetermined threshold values, and the like.

次に、以上の構成の携帯電話機1において実行される肌評価処理について、図3〜図8を参照して説明する。図3は、肌評価処理の流れを示すフローチャートである。図4は、指紋センサにより入力された肌画像とその肌画像から切り出した小領域の見本を示す説明図である。図5は、肌画像から抽出された基本周波数を示すグラフである。図6は、肌画像と基本周波数の見本を示す説明図である。図7は、キメの流れの評価尺度を求める際の肌画像と基本周波数の見本を示す説明図である。図8は、肌評価の判定結果を表す表示画面の見本を示す説明図である。   Next, the skin evaluation process executed in the mobile phone 1 having the above configuration will be described with reference to FIGS. FIG. 3 is a flowchart showing the flow of the skin evaluation process. FIG. 4 is an explanatory diagram showing a skin image input by the fingerprint sensor and a sample of a small area cut out from the skin image. FIG. 5 is a graph showing the fundamental frequency extracted from the skin image. FIG. 6 is an explanatory diagram showing a sample of the skin image and the fundamental frequency. FIG. 7 is an explanatory diagram showing a sample of a skin image and a fundamental frequency when obtaining a texture flow evaluation scale. FIG. 8 is an explanatory diagram showing a sample display screen showing the skin evaluation determination result.

図3に示すように、肌評価処理が開始されると、まず、指紋センサ11から入力された図4に示すような肌画像100を取得する(S1)。図4に示すように、本実施形態で取得する肌画像のサイズは、幅224ピクセル、高さは任意(Hピクセル)としている。次に、取得した肌画像の中から、評価対象とするために、階調値が最も濃い小領域101を切り出す(S3)。ここで切り出される小領域のサイズは、128ピクセル×128ピクセルとする。ただし、これに限られるものではない。次に、切り出した小領域の基本周波数(肌ピッチ)を求める(S5)。ここでは、二次の線形予測分析を用いて、以下の方法で基本周波数を求める。   As shown in FIG. 3, when the skin evaluation process is started, first, a skin image 100 as shown in FIG. 4 input from the fingerprint sensor 11 is acquired (S1). As shown in FIG. 4, the size of the skin image acquired in this embodiment is 224 pixels wide and the height is arbitrary (H pixels). Next, from the acquired skin image, a small region 101 having the darkest gradation value is cut out to be an evaluation target (S3). The size of the small region cut out here is 128 pixels × 128 pixels. However, the present invention is not limited to this. Next, the fundamental frequency (skin pitch) of the cut out small area is obtained (S5). Here, the fundamental frequency is obtained by the following method using second-order linear prediction analysis.

まず、S3で切り出した小領域画像のX方向の波形1ラインFi,j(i=0,1,...M−1、j=0,1,...N−1:但し、Mはy方向の画素数(本実施形態では128)、Nはx方向の画素数(本実施形態では128))に以下の式(1)のようにハミング窓をかけてHi,jを求める。
First, the X-direction waveform 1 line Fi, j (i = 0, 1,... M−1, j = 0, 1,... N−1 of the small region image cut out in S3: where M is Hi, j is obtained by multiplying the number of pixels in the y direction (128 in this embodiment) and N is the number of pixels in the x direction (128 in this embodiment) by applying a Hamming window as shown in the following equation (1).

次に、求められたHi,jから、以下の式(2)のように、自己相関係数ri,1及びri,2を求める。
Next, autocorrelation coefficients ri, 1 and ri, 2 are obtained from the obtained Hi, j as shown in the following equation (2).

そして、自己相関係数ri,1及びri,2から、以下の式(3)により線形予測計数αi,0及びαi,1を求める。
Then, linear prediction coefficients αi, 0 and αi, 1 are obtained from the autocorrelation coefficients ri, 1 and ri, 2 by the following equation (3).

最後に、線形予測計数αi,0及びαi,1から、以下の式(4)により、0からπまでに正規化した正規化共振周波数fiを算出し、x方向の基本周波数とする。
Finally, a normalized resonance frequency fi normalized from 0 to π is calculated from the linear prediction coefficients αi, 0 and αi, 1 by the following equation (4), and is set as a fundamental frequency in the x direction.

以上の式(2)〜(4)により、x方向の基本周波数fiが算出されたので、同様にして、自己相関係数rj,1及びrj,2から線形予測計数αj,0及びαj,1を求め、さらに正規化共振周波数fjを算出してy方向の基本周波数を得る。このようにして得られた基本周波数は、図5のようになる。   Since the fundamental frequency fi in the x direction is calculated by the above equations (2) to (4), the linear prediction coefficients αj, 0 and αj, 1 are similarly calculated from the autocorrelation coefficients rj, 1 and rj, 2. And the normalized resonance frequency fj is calculated to obtain the fundamental frequency in the y direction. The fundamental frequency thus obtained is as shown in FIG.

尚、ここでは、二次の線形予測分析により基本周波数を求めることとしているが、上記の式(2)で求めた自己相関係数をそのまま用いて基本周波数を算出してもよい。また、簡易的な周波数分析として広く用いられているゼロクロス法を用いて基本周波数を算出してもよい。ゼロクロス法を用いる場合には、分析対象の肌画像のある1ラインの画素数が予め実験で求めた閾値、あるいは固定値を交差する回数であるゼロクロス数を求め、これを基本周波数とするとよい。ゼロクロス数が多ければ、基本周波数が高いということになる。   Here, the fundamental frequency is obtained by the second-order linear prediction analysis, but the fundamental frequency may be calculated using the autocorrelation coefficient obtained by the above equation (2) as it is. Further, the fundamental frequency may be calculated using a zero cross method widely used for simple frequency analysis. In the case of using the zero cross method, it is preferable to obtain a zero cross number that is the number of times that the number of pixels of one line of the skin image to be analyzed intersects a threshold value or a fixed value obtained in advance by experiment, and this is used as a fundamental frequency. If the number of zero crossings is large, the fundamental frequency is high.

以上のようにして得た基本周波数は、肌画像のキメが細かければ高くなり、キメが粗ければ、低くなるという相関関係が存在する。従って、本実施形態において算出した128ラインの基本周波数の合計を求めれば、合計値が高ければキメが細かく、合計値が低ければキメが粗いことになるため、この合計値をキメの細かさの判定尺度として用いることができる。そこで、次に、x方向の基本周波数fx(i)とy方向についての基本周波数fy(i)の合計値Sを、以下の式(5)により算出する(S7)。
There is a correlation that the fundamental frequency obtained as described above becomes higher when the texture of the skin image is fine and becomes lower when the texture is coarse. Therefore, if the total of the 128 lines of fundamental frequencies calculated in this embodiment is obtained, the texture is fine if the total value is high, and the texture is coarse if the total value is low. It can be used as a judgment scale. Therefore, next, a total value S of the fundamental frequency fx (i) in the x direction and the fundamental frequency fy (i) in the y direction is calculated by the following equation (5) (S7).

尚、上記の式(5)では、判定尺度をx方向の基本周波数とy方向の基本周波数の合計としたが、x方向基本周波数のみ・y方向基本周波数のみで判定尺度を算出しても良い。   In the above formula (5), the determination scale is the sum of the fundamental frequency in the x direction and the fundamental frequency in the y direction. However, the determination scale may be calculated using only the fundamental frequency in the x direction and the fundamental frequency in the y direction. .

次に、S7で求めたキメの判定尺度を用いてキメの細かさの評価を行なう。本実施形態では、肌のキメの細かさの評価を3段階ですることとし、閾値を2個用意している。例えば、閾値1を60、閾値2を40に設定する。キメの判定尺度が、より高い閾値1以上であればキメが細かく肌の状態が良好であり、閾値1と閾値2との間であれば中程度、閾値2を下回っていれば、あまりキメは細かくなく、肌の手入れが必要な状態と評価できる。   Next, the fineness of the texture is evaluated using the texture determination scale obtained in S7. In this embodiment, the fineness of skin texture is evaluated in three stages, and two threshold values are prepared. For example, threshold 1 is set to 60 and threshold 2 is set to 40. If the texture determination scale is higher than the threshold value 1 or higher, the texture is fine and the skin condition is good. If it is between the threshold value 1 and the threshold value 2, it is medium, and if it is below the threshold value 2, the texture is not much. It can be evaluated that it is not fine and requires skin care.

そこで、まず、閾値1以上であるか否かを判断する(S9)。キメ判定尺度が閾値1以上であれば(S9:YES)、キメの細かさに関する評価を「良好」として、RAM22に一時的に記憶する(S11)。「良好」と評価された肌画像とキメの判定尺度Sとの関係を示すと、例えば図6のdata01,02,03,04のようになる。いずれも、キメの判定尺度Sが60を超えており、肌画像の状態の目視からもキメが整っていることがわかる。   Therefore, first, it is determined whether or not the threshold value is 1 or more (S9). If the texture determination scale is greater than or equal to the threshold value 1 (S9: YES), the evaluation regarding the texture fineness is temporarily stored in the RAM 22 as “good” (S11). The relationship between the skin image evaluated as “good” and the texture determination scale S is, for example, data01, 02, 03, 04 in FIG. In any case, the texture determination scale S exceeds 60, and it is understood that the texture is well-organized by visual observation of the state of the skin image.

キメ判定尺度が閾値1以上でなければ(S9:NO)、次に、キメ判定尺度が閾値2以上であるか否かを判断する(S13)。キメ判定尺度が閾値2以上であれば(S13:YES)、キメの細かさに関する評価を「中程度」として、RAM22に一時的に記憶する(S15)。「中程度」と評価された肌画像とキメの判定尺度Sとの関係を示すと、例えば図6のdata05,06,07のようになる。いずれも、キメの判定尺度Sは40〜60の間にある。肌画像の状態を目視すると、キメが整っているとは言えないが、荒れているとまでは言えない状態であることがわかる。   If the texture determination scale is not greater than or equal to the threshold 1 (S9: NO), it is next determined whether or not the texture determination scale is greater than or equal to the threshold 2 (S13). If the texture determination scale is greater than or equal to the threshold 2 (S13: YES), the evaluation regarding the texture fineness is temporarily stored in the RAM 22 as "medium" (S15). The relationship between the skin image evaluated as “medium” and the texture determination scale S is, for example, data 05, 06, 07 in FIG. In any case, the texture determination scale S is between 40 and 60. When the state of the skin image is visually observed, it can be said that the texture is not perfect, but it cannot be said that it is rough.

キメ判定尺度が閾値2以上でなければ(S13:NO)、キメの細かさに関する評価を「不良」として、RAM22に一時的に記憶する(S17)。「不良」と評価された肌画像とキメの判定尺度Sとの関係を示すと、例えば図6のdata08,09,10,11,12のようになる。いずれも、キメの判定尺度Sが40を下回っており、肌画像の状態の目視からもキメが荒れていることがわかる。以上のように、肌の状態と判定尺度Sには相関関係が認められる。   If the texture determination scale is not greater than or equal to the threshold value 2 (S13: NO), the evaluation regarding the texture fineness is temporarily stored in the RAM 22 as “bad” (S17). The relationship between the skin image evaluated as “bad” and the texture determination scale S is, for example, data08, 09, 10, 11, 12 in FIG. In any case, the texture determination scale S is less than 40, and it can be seen from the visual observation of the state of the skin image that the texture is rough. As described above, there is a correlation between the skin condition and the determination scale S.

次に、キメの形状についての評価を行なう。キメの形状評価は、S3で得られた対象画像のx方向とy方向の基本周波数の比を算出して行なう。x方向の基本周波数に比べてy方向の基本周波数が大きい場合、キメは横に流れる。例えば、図7の肌画像110や肌画像111では、y方向の基本周波数Syの値の方がx方向の基本周波数Sxの値よりも大きく、画像からもキメが横に流れているのが観察できる。一方、x方向の基本周波数Sxに比べてy方向の基本周波数Syが小さい場合、キメは縦に流れる傾向にある。この性質を利用し、次の(6)式によりキメの流れ判定用の評価尺度を求める(S19)。
Na = MAX( Sx, Sy )/MIN(Sx, Sy )・・・(6)
上記(6)式で算出される評価尺度Naはx方向とy方向の基本周波数の比である。Na≒1のとき、キメは整っている。Na>>1のときキメが流れていると判断できる。
Next, the texture shape is evaluated. The texture shape evaluation is performed by calculating the ratio of the fundamental frequency in the x and y directions of the target image obtained in S3. When the fundamental frequency in the y direction is larger than the fundamental frequency in the x direction, the texture flows sideways. For example, in the skin image 110 and the skin image 111 in FIG. 7, the value of the fundamental frequency Sy in the y direction is larger than the value of the fundamental frequency Sx in the x direction, and it is observed that the texture flows laterally from the image. it can. On the other hand, when the fundamental frequency Sy in the y direction is smaller than the fundamental frequency Sx in the x direction, the texture tends to flow vertically. Using this property, an evaluation scale for determining the texture flow is obtained by the following equation (6) (S19).
Na = MAX (Sx, Sy) / MIN (Sx, Sy) (6)
The evaluation scale Na calculated by the above equation (6) is the ratio of the fundamental frequency in the x direction and the y direction. When Na≈1, the texture is in place. It can be determined that texture is flowing when Na >> 1.

但し、この方法では流れの方向が45°に近い傾きを持つ場合はSxとSyは似た値となるため、流れが検出されにくくなる。この問題を回避するため、切り出し画像を回転させた画像から再度ピッチの比を求めなおすとよい。回転画像は、45度の回転画像のみでもよいし、精度を上げるために、例えば、22.5°,45°,67.5°回転させた画像を用いてもよい。   However, in this method, when the flow direction has an inclination close to 45 °, Sx and Sy have similar values, so that it is difficult to detect the flow. In order to avoid this problem, the pitch ratio may be obtained again from the image obtained by rotating the cutout image. The rotated image may be only a 45-degree rotated image, or an image rotated by 22.5 °, 45 °, or 67.5 ° may be used, for example, in order to increase accuracy.

従って、S19で元の画像の流れ評価尺度を算出した後に、流れ判定のための画像の回転処理が終了したか否かを判断する(S21)。そして、回転させる画像の数に応じて、S23,S25,S19を繰り返す。流れ判定のための画像の回転処理がまだ終了していなければ(S21:NO)、対象肌画像を予め定められた角度だけ、図7のように回転させ、回転画像112を得る(S23)。そして、回転画像112について、x方向とy方向についての基本周波数を算出する(S25)。回転させた画像について基本周波数を求めた状態が図7に示す画像113である。   Therefore, after calculating the original image flow evaluation scale in S19, it is determined whether or not the image rotation processing for flow determination is completed (S21). Then, S23, S25, and S19 are repeated according to the number of images to be rotated. If the image rotation processing for flow determination has not been completed yet (S21: NO), the target skin image is rotated by a predetermined angle as shown in FIG. 7 to obtain a rotated image 112 (S23). And the fundamental frequency about x direction and y direction is calculated about the rotation image 112 (S25). A state in which the fundamental frequency is obtained for the rotated image is an image 113 shown in FIG.

次に、S19にもどり、上記(6)式により、その角度の回転画像についての評価尺度Naを求める。そして、再び予定されている全ての回転画像についての処理が終了したか否かを判断する(S21)。すべての回転画像について評価尺度Naが求められたら(S21:YES)、元の画像についての評価尺度N0、各回点画像についての評価尺度、例えば22.5°,45°,67.5°であれば、N22.5,N45,N67.5に基づいて以下の式(7)により評価尺度を再度計算する(S29)。
N= MAX( N0, N22.5, N45, N67.5 )・・・(7)
Next, returning to S19, the evaluation scale Na for the rotated image at the angle is obtained by the above equation (6). Then, it is determined whether or not the processing for all the scheduled rotation images has been completed (S21). When the evaluation scale Na is obtained for all the rotated images (S21: YES), the evaluation scale N0 for the original image and the evaluation scale for each round image, for example, 22.5 °, 45 °, 67.5 ° For example, based on N22.5, N45, and N67.5, the evaluation scale is calculated again by the following formula (7) (S29).
N = MAX (N0, N22.5, N45, N67.5) (7)

尚、上記式(7)では、各画像について求めた評価尺度Naの最大値をキメの流れについての評価尺度Nとして採用したが、これは各評価尺度Naの平均値や合計値を求めて算出してもよい。また、N0, N22.5, N45, N67.5から最大を求めるとき、この4ポイントの間をガウス窓などで補完することにより、Nの算出精度を向上させることも考えられる。処理速度の速いコンピュータに搭載する場合は、例えば1°おきに画像を回転させて、Nの算出精度を向上させることもできる。   In the above formula (7), the maximum value of the evaluation scale Na obtained for each image is adopted as the evaluation scale N for the flow of texture. This is calculated by obtaining the average value or the total value of each evaluation scale Na. May be. Further, when obtaining the maximum from N0, N22.5, N45, and N67.5, it is conceivable to improve the calculation accuracy of N by complementing these four points with a Gaussian window or the like. When mounted on a computer with a high processing speed, for example, the image can be rotated every 1 ° to improve the calculation accuracy of N.

次に、S29で求められたキメの流れの評価尺度を用いてキメの形状を評価する。本実施形態では、肌のキメの形状の評価は、キメが整っているか流れているかの2段階評価としている。S29で求めた評価尺度は、x方向とy方向の基本周波数の比であったから、この評価尺度が1の近似値であるか否かを判断する(S31)。評価尺度が1の近似値である場合には(S31:YES)、キメ形状の評価を「整っている」として、RAM22に一時的に記憶する(S33)。評価尺度が1の近似値でない場合には(S31:NO)、キメ形状の評価を「流れている」として、RAM22に一時的に記憶する(S35)。   Next, the texture shape is evaluated using the texture flow evaluation scale obtained in S29. In the present embodiment, the evaluation of the texture of the skin is a two-stage evaluation of whether the texture is in place or flowing. Since the evaluation scale obtained in S29 is the ratio of the fundamental frequency in the x direction and the y direction, it is determined whether or not this evaluation scale is an approximate value of 1 (S31). When the evaluation scale is an approximate value of 1 (S31: YES), the texture shape evaluation is temporarily stored in the RAM 22 as “prepared” (S33). If the evaluation scale is not an approximate value of 1 (S31: NO), the texture shape evaluation is temporarily stored in the RAM 22 as "flowing" (S35).

以上の処理により、キメの細かさの評価とキメの形状の評価が実行され、RAM22に記憶されたので、両方の評価結果を呼び出して、携帯電話機1の表示画面2に図8に示すような結果表示画面を表示する(S37)。図8では、キメの細かさが中程度であり、キメの形状は整っていると評価された例が示されている。この表示画面のように、キメの細かさとキメの形状の評価を総合した総合評価を実行する処理を加えてもよい。この実施形態では、総合評価をA(良好)、B(中程度)、C(不良=手入れが必要)の3段階で表示するように構成している。   Through the above processing, the evaluation of the fineness of the texture and the evaluation of the texture shape are executed and stored in the RAM 22, so that both evaluation results are called up and displayed on the display screen 2 of the mobile phone 1 as shown in FIG. A result display screen is displayed (S37). FIG. 8 shows an example in which the fineness of the texture is medium and the texture is evaluated to be in good shape. As shown in this display screen, processing for executing comprehensive evaluation that combines evaluation of fineness of texture and shape of texture may be added. In this embodiment, the overall evaluation is displayed in three stages of A (good), B (medium), and C (defect = needs care).

以上説明したように、本実施形態の肌評価装置として機能する携帯電話機1によれば、指紋センサ11により読み込んだ画像の基本周波数を算出してキメの細かさを判定し、さらに、その肌画像のx方向とy方向の基本周波数の比を算出してキメの形状を判定する。基本周波数は、肌画像が明瞭でない場合も算出することができるため、高価なカメラ等の機器を必要としなくても簡易に肌の状態を評価することが可能である。また、処理にかかる負荷が比較的軽いので、携帯電話と同様のCPU能力がそれほど高くない機器へ組み込んだ場合にも高速に処理が可能であり、好適である。   As described above, according to the mobile phone 1 that functions as the skin evaluation apparatus of the present embodiment, the basic frequency of the image read by the fingerprint sensor 11 is calculated to determine the fineness of the texture, and further, the skin image The shape of the texture is determined by calculating the ratio of the fundamental frequency in the x and y directions. Since the fundamental frequency can be calculated even when the skin image is not clear, it is possible to easily evaluate the skin condition without requiring an expensive device such as a camera. Further, since the processing load is relatively light, it is possible to perform processing at high speed even when it is incorporated in a device having the same CPU capability as a mobile phone, which is preferable.

上記実施の形態において、図3のフローチャートのS5で基本周波数の算出処理を実行するCPU21が本発明の周波数分析手段として機能する。また、図3のフローチャートのS7でキメ判定尺度の算出処理を実行するCPU21が本発明の特徴抽出手段として機能する。また、図3のフローチャートのS9及びS13でキメの細かさの判定処理を実行し、S31でキメ形状の判定処理を実行するCPU21が本発明の判定手段として機能する。また、図3のフローチャートのS19で流れ評価尺度の算出処理を実行するCPU21が本発明の周波数比算出手段として機能する。   In the above embodiment, the CPU 21 that executes the fundamental frequency calculation process in S5 of the flowchart of FIG. 3 functions as the frequency analysis means of the present invention. In addition, the CPU 21 that executes the texture determination scale calculation process in S7 of the flowchart of FIG. 3 functions as the feature extraction unit of the present invention. Further, the CPU 21 that executes the texture fineness determination process in S9 and S13 in the flowchart of FIG. 3 and executes the texture shape determination process in S31 functions as the determination means of the present invention. Further, the CPU 21 that executes the flow evaluation scale calculation processing in S19 of the flowchart of FIG. 3 functions as the frequency ratio calculation means of the present invention.

なお、上記実施の形態は、本発明の肌評価方法をコンピュータに実行させるプログラムを携帯電話機に組み込んで肌評価装置として機能させているが、本発明の実施形態は上記構成に限られるものではなく、パーソナルコンピュータのアプリケーションプログラムとして読み込んで実行するようにしてもよい。また、肌画像の入力は、指紋センサに限らず、カメラで撮像してもよい。   In the above embodiment, a program for causing a computer to execute the skin evaluation method of the present invention is incorporated in a mobile phone and functions as a skin evaluation apparatus. However, the embodiment of the present invention is not limited to the above configuration. Alternatively, it may be read and executed as an application program for a personal computer. Further, the input of the skin image is not limited to the fingerprint sensor, and may be captured by a camera.

携帯電話機1の外観図である。1 is an external view of a mobile phone 1. FIG. 携帯電話機1の電気的構成を示すブロック図である。2 is a block diagram showing an electrical configuration of the mobile phone 1. FIG. 肌評価処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a skin evaluation process. 指紋センサにより入力された肌画像とその肌画像から切り出した小領域の見本を示す説明図である。It is explanatory drawing which shows the sample of the small area cut out from the skin image input by the fingerprint sensor, and the skin image. 肌画像から抽出された基本周波数を示すグラフである。It is a graph which shows the fundamental frequency extracted from the skin image. 肌画像と基本周波数の見本を示す説明図である。It is explanatory drawing which shows the sample of a skin image and a fundamental frequency. キメの流れの評価尺度を求める際の肌画像と基本周波数の見本を示す説明図である。It is explanatory drawing which shows the sample of the skin image at the time of calculating | requiring the evaluation scale of a texture flow, and a fundamental frequency. 肌評価の判定結果を表す表示画面の見本を示す説明図である。It is explanatory drawing which shows the sample of the display screen showing the determination result of skin evaluation.

符号の説明Explanation of symbols

1 携帯電話機
2 表示画面
11 指紋センサ
21 CPU
22 RAM
20 制御部
30 不揮発メモリ
100 肌画像
101 小領域
1 Cellular Phone 2 Display Screen 11 Fingerprint Sensor 21 CPU
22 RAM
20 Control unit 30 Non-volatile memory 100 Skin image 101 Small region

Claims (10)

入力された肌の画像を周波数分析し、その周波数分析の結果得られた前記肌画像の周波数特徴に基づいて前記肌の状態を判定する肌評価方法。   A skin evaluation method for performing frequency analysis on an input skin image and determining the skin state based on frequency characteristics of the skin image obtained as a result of the frequency analysis. 前記周波数分析により、前記肌画像の基本周波数を前記周波数特徴として抽出し、当該基本周波数が予め定めた所定の閾値を超えている場合に前記肌の状態が良好であると判定することを特徴とする請求項1に記載の肌評価方法。   The frequency analysis extracts the fundamental frequency of the skin image as the frequency feature, and determines that the skin condition is good when the fundamental frequency exceeds a predetermined threshold value. The skin evaluation method according to claim 1. 前記周波数分析を前記肌画像のX方向とY方向のそれぞれについて行なうことにより、前記基本周波数を、前記肌画像のX方向とY方向のそれぞれについて抽出し、X方向の基本周波数とY方向の基本周波数の比を算出して、当該比が所定の閾値の範囲内であれば前記肌の状態が良好であると判定することを特徴とする請求項1又は2に記載の肌評価方法。   By performing the frequency analysis for each of the X direction and the Y direction of the skin image, the fundamental frequency is extracted for each of the X direction and the Y direction of the skin image, and the fundamental frequency in the X direction and the fundamental in the Y direction are extracted. The skin evaluation method according to claim 1 or 2, wherein a frequency ratio is calculated, and the skin condition is determined to be good if the ratio is within a predetermined threshold range. 前記周波数分析として、二次の線形予測分析を用いることを特徴とする請求項1乃至3のいずれかに記載の肌評価方法。   The skin evaluation method according to claim 1, wherein a second-order linear prediction analysis is used as the frequency analysis. 前記肌画像は、指紋センサにより入力されることを特徴とする請求項1乃至4のいずれかに記載の肌評価方法。   The skin evaluation method according to claim 1, wherein the skin image is input by a fingerprint sensor. 肌の画像を入力する画像入力手段と、
当該画像入力手段により入力された肌画像を周波数分析する周波数分析手段と、
当該周波数分析手段により周波数分析された結果得られた前記肌画像の周波数特徴を抽出する特徴抽出手段と、
当該特徴抽出手段により抽出された周波数特徴に基づき、前記肌の状態を判定する判定手段とを備えたことを特徴とする肌評価装置。
An image input means for inputting an image of the skin;
Frequency analysis means for frequency analysis of the skin image input by the image input means;
Feature extraction means for extracting frequency features of the skin image obtained as a result of frequency analysis by the frequency analysis means;
A skin evaluation apparatus comprising: a determination unit that determines the state of the skin based on the frequency feature extracted by the feature extraction unit.
前記特徴抽出手段は、前記肌画像の基本周波数を前記周波数特徴として抽出し、
前記判定手段は、当該基本周波数が予め定めた所定の閾値を超えている場合に前記肌の状態が良好であると判定することを特徴とする請求項6に記載の肌評価装置。
The feature extraction means extracts the fundamental frequency of the skin image as the frequency feature,
The skin evaluation apparatus according to claim 6, wherein the determination unit determines that the skin condition is good when the fundamental frequency exceeds a predetermined threshold value.
前記周波数分析手段は、前記肌画像のX方向とY方向のそれぞれについて周波数分析を行い、
前記特徴抽出手段は、前記基本周波数を、前記肌画像のX方向とY方向のそれぞれについて抽出し、
前記特徴抽出手段により抽出されたX方向の基本周波数とY方向の基本周波数の比を算出する周波数比算出手段を備え、
前記判定手段は、当該周波数比算出手段により算出された比が所定の閾値の範囲内であれば前記肌の状態が良好であると判定することを特徴とする請求項6又は7に記載の肌評価装置。
The frequency analysis means performs frequency analysis for each of the X direction and the Y direction of the skin image,
The feature extraction means extracts the fundamental frequency for each of the X direction and the Y direction of the skin image,
Frequency ratio calculating means for calculating a ratio of the fundamental frequency in the X direction and the fundamental frequency in the Y direction extracted by the feature extracting means;
The skin according to claim 6 or 7, wherein the determination means determines that the skin condition is good if the ratio calculated by the frequency ratio calculation means is within a predetermined threshold range. Evaluation device.
前記周波数分析手段は、二次の線形予測分析を用いることを特徴とする請求項6乃至8のいずれかに記載の肌評価装置。   The skin evaluation apparatus according to claim 6, wherein the frequency analysis unit uses a second-order linear prediction analysis. 前記画像入力手段は、指紋センサであることを特徴とする請求項6乃至9のいずれかに記載の肌評価装置。
The skin evaluation apparatus according to claim 6, wherein the image input unit is a fingerprint sensor.
JP2004375392A 2004-12-27 2004-12-27 Skin evaluation method and skin evaluation apparatus Active JP4739746B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2004375392A JP4739746B2 (en) 2004-12-27 2004-12-27 Skin evaluation method and skin evaluation apparatus
PCT/JP2005/003315 WO2006070487A1 (en) 2004-12-27 2005-02-28 Skin evaluating method and skin evaluating device
KR1020067010975A KR20070096778A (en) 2004-12-27 2005-02-28 Skin evaluation method and skin evaluation device
US10/586,968 US20070276206A1 (en) 2004-12-27 2005-02-28 Skin Evaluating Method And Skin Evaluation
CNA2005800115358A CN1942137A (en) 2004-12-27 2005-02-28 Skin evaluating method and skin evaluating device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004375392A JP4739746B2 (en) 2004-12-27 2004-12-27 Skin evaluation method and skin evaluation apparatus

Publications (2)

Publication Number Publication Date
JP2006180971A true JP2006180971A (en) 2006-07-13
JP4739746B2 JP4739746B2 (en) 2011-08-03

Family

ID=36614614

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004375392A Active JP4739746B2 (en) 2004-12-27 2004-12-27 Skin evaluation method and skin evaluation apparatus

Country Status (5)

Country Link
US (1) US20070276206A1 (en)
JP (1) JP4739746B2 (en)
KR (1) KR20070096778A (en)
CN (1) CN1942137A (en)
WO (1) WO2006070487A1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011240086A (en) * 2010-05-21 2011-12-01 Shiseido Co Ltd Analyzer for irregular color of skin, analysis method for irregular color of skin, and analysis program for irregular color of skin
CN109844814A (en) * 2016-10-07 2019-06-04 株式会社Dds Message handling program and information processing unit
JP2020018424A (en) * 2018-07-31 2020-02-06 株式会社Splink Dementia risk presentation system and dementia risk presentation method
JP2020160489A (en) * 2019-03-25 2020-10-01 カシオ計算機株式会社 Image processing device, image processing method, and program

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080200777A1 (en) * 2006-10-31 2008-08-21 Nathalie Issachar Acoustic systems and methods for evaluating skin texture
US20100145886A1 (en) * 2008-12-08 2010-06-10 Conopco, Inc., D/B/A Unilever Evaluation and Selection Process for Consumer Products
WO2011067162A1 (en) * 2009-12-02 2011-06-09 Unilever Plc Apparatus for and method of measuring skin age
CN101916334B (en) * 2010-08-16 2015-08-12 清华大学 A kind of skin Forecasting Methodology and prognoses system thereof
JP5733570B2 (en) * 2011-05-23 2015-06-10 ソニー株式会社 Image processing apparatus, image processing method, program, and recording medium
TW201410203A (en) * 2012-07-05 2014-03-16 Panasonic Corp Portable terminal and skin property measuring instrument
KR102175348B1 (en) * 2014-04-03 2020-11-09 주식회사 엘지생활건강 Apparatus and method for skin diagnosis
CN105225242A (en) * 2015-09-30 2016-01-06 联想(北京)有限公司 A kind of condition detection method and electronic equipment
KR102226583B1 (en) * 2016-10-31 2021-03-11 가부시끼가이샤 디디에스 Skin information processing program and skin information processing device
CN109952596B (en) * 2016-10-31 2023-07-07 株式会社Dds Skin information processing method and skin information processing device
KR102131290B1 (en) 2019-05-02 2020-07-07 (주)라즈웰 Paint ball

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0282947A (en) * 1988-09-20 1990-03-23 Kanebo Ltd Method for detecting and analyzing skin surface conformation
JPH04305113A (en) * 1991-04-02 1992-10-28 Pola Chem Ind Inc Method and device for evaluating skin surface form
JPH07116146A (en) * 1993-10-21 1995-05-09 Shiseido Co Ltd Measuring crease method and apparatus
JP2002269211A (en) * 2001-03-06 2002-09-20 Sharp Corp Server system, analyzer and information device
JP2003319910A (en) * 2002-02-26 2003-11-11 Kao Corp Beautification support system
JP2004237087A (en) * 2003-01-14 2004-08-26 L'oreal Sa Method and apparatus for evaluating hydration of skin and mucous membrane in particular
JP2006081847A (en) * 2004-09-17 2006-03-30 Inforward Inc Skin analysis network system

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5822393A (en) * 1997-04-01 1998-10-13 Siemens Aktiengesellschaft Method for adaptively modulating the power level of an x-ray tube of a computer tomography (CT) system
US7079672B2 (en) * 2000-01-28 2006-07-18 Chuo Hatsujo Kabushiki Kaisha Fingerprint image evaluating method and fingerprint matching device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0282947A (en) * 1988-09-20 1990-03-23 Kanebo Ltd Method for detecting and analyzing skin surface conformation
JPH04305113A (en) * 1991-04-02 1992-10-28 Pola Chem Ind Inc Method and device for evaluating skin surface form
JPH07116146A (en) * 1993-10-21 1995-05-09 Shiseido Co Ltd Measuring crease method and apparatus
JP2002269211A (en) * 2001-03-06 2002-09-20 Sharp Corp Server system, analyzer and information device
JP2003319910A (en) * 2002-02-26 2003-11-11 Kao Corp Beautification support system
JP2004237087A (en) * 2003-01-14 2004-08-26 L'oreal Sa Method and apparatus for evaluating hydration of skin and mucous membrane in particular
JP2006081847A (en) * 2004-09-17 2006-03-30 Inforward Inc Skin analysis network system

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011240086A (en) * 2010-05-21 2011-12-01 Shiseido Co Ltd Analyzer for irregular color of skin, analysis method for irregular color of skin, and analysis program for irregular color of skin
CN109844814A (en) * 2016-10-07 2019-06-04 株式会社Dds Message handling program and information processing unit
CN109844814B (en) * 2016-10-07 2022-12-06 株式会社Dds Information processing method and information processing apparatus
JP2020018424A (en) * 2018-07-31 2020-02-06 株式会社Splink Dementia risk presentation system and dementia risk presentation method
JP2020160489A (en) * 2019-03-25 2020-10-01 カシオ計算機株式会社 Image processing device, image processing method, and program
JP7383891B2 (en) 2019-03-25 2023-11-21 カシオ計算機株式会社 Image processing device, image processing method, and program

Also Published As

Publication number Publication date
JP4739746B2 (en) 2011-08-03
CN1942137A (en) 2007-04-04
KR20070096778A (en) 2007-10-02
US20070276206A1 (en) 2007-11-29
WO2006070487A1 (en) 2006-07-06

Similar Documents

Publication Publication Date Title
WO2006070487A1 (en) Skin evaluating method and skin evaluating device
TWI471117B (en) Human facial skin roughness and wrinkle inspection based on smart phone
CN104200480A (en) Image fuzzy degree evaluation method and system applied to intelligent terminal
JP6960997B2 (en) Image processing system, server device, image processing method, and image processing program
JP5722414B1 (en) Osteoporosis diagnosis support device
JP6234044B2 (en) Exterior material deterioration judging method and judging device
KR20160008220A (en) Transparency evaluation device, transparency evaluation method and transparency evaluation program
CN106934829A (en) The detection method and system of a kind of surface crack
TW202036366A (en) Method for Determining Imaging Ratio of Curved Display, Storage Medium and Electronic Device
CN108335310B (en) Portable grain shape and granularity detection method and system
JP4640619B2 (en) Hair fiber shape analysis system and analysis method
KR100924826B1 (en) Method for Measuring a Length Using Portable Telephone
CN110503159B (en) Character recognition method, device, equipment and medium
CN101299242B (en) Method and device for determining threshold value in human body skin tone detection
JP6850194B2 (en) Skin condition evaluation method and skin condition evaluation device
JP4921222B2 (en) Cosmetic adhesion state analysis method, cosmetic adhesion state analysis device, cosmetic adhesion state analysis program, and recording medium on which the program is recorded
KR20120117604A (en) Method and apparatus for skin status ananlysis
JP2017012384A (en) Wrinkle state analysis device and wrinkle state analysis method
CN113407774A (en) Cover determining method and device, computer equipment and storage medium
JP2007252892A (en) Estimation method of evaluation value by visual recognition of three-dimensional shape of skin surface
JP2005095326A (en) Method for calculating skin age from skin measured value and display method for the skin age
CN111443330B (en) Acoustic imaging method, acoustic imaging device, acoustic imaging equipment and readable storage medium
CN115330610A (en) Image processing method, image processing apparatus, electronic device, and storage medium
WO2021080007A1 (en) Cancer assessment device, cancer assessment method, and program
JP6234045B2 (en) Exterior material deterioration judging method and judging device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071219

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080212

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100824

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101015

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101214

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110210

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110419

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110428

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4739746

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140513

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250