JP2022518459A - 情報処理方法および装置、記憶媒体 - Google Patents
情報処理方法および装置、記憶媒体 Download PDFInfo
- Publication number
- JP2022518459A JP2022518459A JP2021541270A JP2021541270A JP2022518459A JP 2022518459 A JP2022518459 A JP 2022518459A JP 2021541270 A JP2021541270 A JP 2021541270A JP 2021541270 A JP2021541270 A JP 2021541270A JP 2022518459 A JP2022518459 A JP 2022518459A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- information
- image
- database
- class
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 115
- 238000003672 processing method Methods 0.000 title claims abstract description 71
- 238000004458 analytical method Methods 0.000 claims abstract description 108
- 238000012545 processing Methods 0.000 claims description 75
- 238000000034 method Methods 0.000 claims description 73
- 230000008569 process Effects 0.000 claims description 56
- 230000002776 aggregation Effects 0.000 claims description 48
- 238000004220 aggregation Methods 0.000 claims description 48
- 238000004590 computer program Methods 0.000 claims description 25
- 238000010586 diagram Methods 0.000 abstract description 17
- 230000006870 function Effects 0.000 description 8
- 230000006399 behavior Effects 0.000 description 6
- 102100024607 DNA topoisomerase 1 Human genes 0.000 description 4
- 101000830681 Homo sapiens DNA topoisomerase 1 Proteins 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000007621 cluster analysis Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000006467 substitution reaction Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000003203 everyday effect Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000011002 quantification Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 238000012098 association analyses Methods 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/55—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/587—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/23—Clustering techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2413—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
- G06F18/24133—Distances to prototypes
- G06F18/24143—Distances to neighbourhood prototypes, e.g. restricted Coulomb energy networks [RCEN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/18—Legal services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/26—Government or public services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/762—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using clustering, e.g. of similar faces in social networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
- G06V40/173—Classification, e.g. identification face re-identification, e.g. recognising unknown faces across different face tracks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/50—Maintenance of biometric data or enrolment thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/07—Target detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Library & Information Science (AREA)
- Tourism & Hospitality (AREA)
- Computing Systems (AREA)
- Human Computer Interaction (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Bioinformatics & Computational Biology (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Economics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Marketing (AREA)
- Evolutionary Biology (AREA)
- Educational Administration (AREA)
- Development Economics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Technology Law (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
人物画像ライブラリ内の同じ身分証明書番号を持つ個人情報ファイルを、身分IDを単位とした1つの個人情報ファイルに集約する。
身分証明書(ID)がない場合、身分証明書番号が0000000000000000と見なし、このタイプの各人物画像は、単独で1つの個人情報ファイルになる。
1)スナップ撮影ライブラリを増分する
a.スナップ撮影ライブラリは、増分でクラスタリングを毎日定期的に実行する。
a.既存の人物画像ライブラリと身分情報(身分証明書番号)の関連検索を行い、同じ身分情報がある場合、その個人情報ファイルに統合する。
1)[スナップ撮影レコード]タブで、ターゲットオブジェクトが出現された各位置を地図に表示し、[軌跡表示]ボタンをクリックして、位置を接続して軌跡を形成する。
1)同行者とは、ある人の各スナップ画像において、同じカメラで前後n秒間でスナップ撮影された人をクラスタリングして、その結果、出現回数がプリセットされた値以上である人を指す。
例えば、本願は以下の項目を提供する。
(項目1)
情報処理方法であって、
集約個人情報ファイルのデータに基づいてターゲットオブジェクトを決定することと、
前記ターゲットオブジェクトの第1スナップ撮影情報を取得することと、
前記第1スナップ撮影情報を分析して、第1分析結果を取得することと、
前記第1分析結果に基づいて、前記ターゲットオブジェクトの第1軌跡を決定することと、を含み、
前記第1分析結果は、前記ターゲットオブジェクトの出現情報を含む、
情報処理方法。
(項目2)
前記情報処理方法は、
集約個人情報ファイルのデータに基づいて前記ターゲットオブジェクトの同行者を決定することであって、前記同行者は、ターゲット時点の前後t秒間で画像収集装置によって前記ターゲットオブジェクトがスナップ撮影されているスナップ撮影画像に現れる前記ターゲットオブジェクト以外の人物であり、前記ターゲット時点は、前記画像収集装置が前記ターゲットオブジェクトをスナップ撮影した時点である、ことと、
前記同行者の第2スナップ撮影情報を取得することと、
前記第2スナップ撮影情報を分析して、第2分析結果を取得することと、
前記第2分析結果に基づいて前記同行者の第2軌跡を決定することと、をさらに含み、
前記第2分析結果は、前記同行者の出現情報を含む、
項目1に記載の情報処理方法。
(項目3)
前記第1スナップ撮影情報を分析して、第1分析結果を取得することは、
前記第1スナップ撮影情報に基づいて、分析対象スナップ画像を決定することと、
各前記スナップ画像における前記ターゲットオブジェクトの出現情報を決定することであって、前記出現情報は少なくとも出現地理位置および出現時間を含む、ことと、
前記出現情報に基づいて同一地理位置における前記ターゲットオブジェクトの出現回数を統計することと、を含む、
項目1または2に記載の情報処理方法。
(項目4)
前記第1分析結果は、
各スナップ画像と前記出現情報との対応関係、および
各スナップ画像とその前後に隣接するM(Mは正数である)枚のスナップ画像との関連関係のうちの少なくとも1つをさらに含む、
項目3に記載の情報処理方法。
(項目5)
前記第1分析結果に基づいて、前記ターゲットオブジェクトの第1軌跡を決定することは、
前記ターゲットオブジェクトの出現情報に基づいて、前記ターゲットオブジェクトの出現位置および出現回数を電子地図にマークすることと、
前記出現時間に従って電子地図上の出現位置を接続して、第1軌跡を形成することと、を含む、
項目3に記載の情報処理方法。
(項目6)
前記情報処理方法は、
前記ターゲットオブジェクトの同行者から第1同行者を決定することと、
前記第1同行者の第2軌跡を取り出すことと、
前記ターゲットオブジェクトの第1軌跡と前記第1同行者の第2軌跡とを対比表示することと、をさらに含む、
項目2に記載の情報処理方法。
(項目7)
前記情報処理方法は、
第1データベース内の画像データに対してクラスタリング処理を実行して、クラスタリング処理結果を取得することであって、前記第1データベースは、画像収集装置によってスナップ撮影された人物画像に基づいて形成される、ことと、
第2データベース内の画像データに対して集約処理を実行して、集約処理結果を取得することであって、前記第2データベースは、実名登録された画像情報に基づいて形成される、ことと、
前記クラスタリング処理結果と前記集約処理結果を関連分析して、集約個人情報ファイルのデータを得ることと、をさらに含む、
項目1ないし6のいずれか一項に記載の情報処理方法。
(項目8)
前記第1データベース内の画像データに対してクラスタリング処理を実行することは、
前記第1データベース内の画像データから顔画像データを抽出することと、
前記顔画像データを複数のクラスに分割することであって、前記複数のクラスのうちの各クラスはクラス中心を有し、前記クラス中心はクラス中心特徴値を含む、ことと、を含む、
項目7に記載の情報処理方法。
(項目9)
前記第2データベース内の画像データに対して集約処理を実行して、集約処理結果を取得することは、
身分証明書番号が同じである画像データを1つの画像ライブラリに集約することと、
前記画像ライブラリと前記身分証明書番号に対応するテキスト情報との関連関係を確立して、集約処理結果を取得することであって、前記集約処理結果内の各身分証明書番号は、唯一の個人情報ファイルのデータに対応する、ことと、を含む、
項目7に記載の情報処理方法。
(項目10)
前記クラスタリング処理結果と前記集約処理結果を関連分析することは、
前記第1データベース内の各クラス中心特徴値と前記第2データベース内の各参照クラス中心特徴値とを全量で比較して、全量比較結果を取得することと、
前記全量比較結果に基づいて、類似度が最も高く且つ類似度が所定閾値より大きいターゲット参照クラス中心特徴値を決定することと、
前記第2データベースから、前記ターゲット参照クラス中心特徴値に対応するターゲット人物画像および前記ターゲット人物画像に対応する身分情報を検索することと、
前記ターゲット人物画像に対応する身分情報と前記第1データベース内のクラス中心特徴値に対応する画像との関連関係を確立することと、を含む、
項目7に記載の情報処理方法。
(項目11)
前記情報処理方法は、
前記第1データベースに画像データを追加する場合、追加される画像データに対してクラスタリング処理を実行し、前記追加される画像データ内の顔画像データを複数のクラスに分割し、前記第1データベースから、前記複数のクラスと同じクラスがあるか否かを検索し、前記複数のクラス内の第1クラスと同じクラスがある場合、前記第1クラスの画像データを前記第1クラスの既存個人情報ファイルに統合し、前記複数のクラス内の第2クラスと同じクラスがない場合、前記第2クラスに基づいて新しい個人情報ファイルを作成して、前記第1データベースに追加することをさらに含む、
項目7に記載の情報処理方法。
(項目12)
前記情報処理方法は、
前記第2データベースに画像データを追加する場合、前記第2データベースから、追加される前記画像データと同じ身分証明書番号があるか否かを検索し、前記画像データ内の第1画像データと同じ第1身分証明書番号がある場合、前記第1画像データを前記第1身分証明書番号に対応する既存個人情報ファイルに統合し、前記画像データ内の第2画像データと同じ第2身分証明書番号がない場合、前記第2画像データの第2身分証明書番号に基づいて新しい個人情報ファイルを作成して、前記第2データベースに追加することをさらに含む、
項目7に記載の情報処理方法。
(項目13)
情報処理装置であって、
集約個人情報ファイルのデータに基づいてターゲットオブジェクトを決定するように構成される決定モジュールと、
前記ターゲットオブジェクトの第1スナップ撮影情報を取得するように構成される取得モジュールと、
前記第1スナップ撮影情報を分析して、第1分析結果を取得するように構成される分析モジュールと、
前記第1分析結果に基づいて、前記ターゲットオブジェクトの第1軌跡を決定するように構成される処理モジュールと、を備え、前記第1分析結果は前記ターゲットオブジェクトの出現情報を含む、
情報処理装置。
(項目14)
前記決定モジュールは、さらに、集約個人情報ファイルのデータに基づいて前記ターゲットオブジェクトの同行者を決定するように構成され、前記同行者は、ターゲット時点の前後t秒間で画像収集装置によって前記ターゲットオブジェクトがスナップ撮影されているスナップ撮影画像に現れる前記ターゲットオブジェクト以外の人物であり、前記ターゲット時点は、前記画像収集装置が前記ターゲットオブジェクトをスナップ撮影した時点であり、
前記取得モジュールは、さらに、前記同行者の第2スナップ撮影情報を取得するように構成され、
前記分析モジュールは、さらに、前記第2スナップ撮影情報を分析して、第2分析結果を取得するように構成され、
前記処理モジュールは、さらに、前記第2分析結果に基づいて前記同行者の第2軌跡を決定するように構成され、前記第2分析結果は前記同行者の出現情報を含む、
項目13に記載の情報処理装置。
(項目15)
前記分析モジュールは、さらに、
前記第1スナップ撮影情報に基づいて分析対象スナップ画像を決定し、
各前記スナップ画像における前記ターゲットオブジェクトの出現情報を決定し、前記出現情報は少なくとも出現地理位置および出現時間を含み、
前記出現情報に基づいて同一地理位置における前記ターゲットオブジェクトの出現回数を統計するように構成される、
項目13または14に記載の情報処理装置。
(項目16)
前記第1分析結果は、
各スナップ画像と前記出現情報との対応関係、および
各スナップ画像とその前後に隣接するM(Mは正数である)枚のスナップ画像との関連関係のうちの少なくとも1つをさらに含む、
項目15に記載の情報処理装置。
(項目17)
前記処理モジュールは、さらに、
前記ターゲットオブジェクトの出現情報に基づいて、電子地図に前記ターゲットオブジェクトの出現位置および出現回数をマークし、
前記出現時間に従って電子地図上の出現位置を接続して、第1軌跡を形成するように構成される、
項目15に記載の情報処理装置。
(項目18)
前記処理モジュールは、さらに、
前記ターゲットオブジェクトの同行者から第1同行者を決定し、
前記第1同行者の第2軌跡を取り出し、
前記ターゲットオブジェクトの第1軌跡と前記第1同行者の第2軌跡とを対比表示するように構成される、
項目14に記載の情報処理装置。
(項目19)
前記情報処理装置は、さらに、
第1データベース内の画像データに対してクラスタリング処理を実行して、クラスタリング処理結果を取得し、前記第1データベースは、画像収集装置によってスナップ撮影された人物画像に基づいて形成され、第2データベース内の画像データに対して集約処理を実行して、集約処理結果を取得し、前記第2データベースは、実名登録された画像情報に基づいて形成され、前記クラスタリング処理結果と前記集約処理結果を関連分析して、集約個人情報ファイルのデータを得るように構成される、個人情報ファイル作成モジュールを備える、
項目13に記載の情報処理装置。
(項目20)
前記個人情報ファイル作成モジュールは、さらに、前記第1データベース内の画像データから顔画像データを抽出し、前記顔画像データを複数のクラスに分割するように構成され、前記複数のクラスのうちの各クラスはクラス中心を有し、前記クラス中心はクラス中心特徴値を含む、
項目19に記載の情報処理装置。
(項目21)
前記個人情報ファイル作成モジュールは、さらに、身分証明書番号が同じである画像データを1つの画像ライブラリに集約し、前記画像ライブラリと前記身分証明書番号に対応するテキスト情報との関連関係を作成して、集約処理結果を取得するように構成され、前記集約処理結果内の各身分証明書番号は、唯一の個人情報ファイルのデータに対応する、
項目19に記載の情報処理装置。
(項目22)
前記個人情報ファイル作成モジュールは、さらに、前記第1データベース内の各クラス中心特徴値と前記第2データベース内の各参照クラス中心特徴値とを全量で比較して、全量比較結果を取得し、前記全量比較結果に基づいて、類似度が最も高く且つ類似度が所定閾値より大きいターゲット参照クラス中心特徴値を決定し、前記第2データベースから、前記ターゲット参照クラス中心特徴値に対応するターゲット人物画像および前記ターゲット人物画像に対応する身分情報を検索し、前記ターゲット人物画像に対応する身分情報と前記第1データベース内のクラス中心特徴値に対応する画像との関連関係を確立するように構成される、
項目19に記載の情報処理装置。
(項目23)
前記個人情報ファイル作成モジュールは、さらに、前記第1データベースに画像データを追加する場合、追加される画像データに対してクラスタリング処理を実行し、前記追加される画像データ内の顔画像データを複数のクラスに分割し、前記第1データベースから、前記複数のクラスと同じクラスがあるか否かを検索し、前記複数のクラス内の第1クラスと同じクラスがある場合、前記第1クラスの画像データを前記第1クラスの既存個人情報ファイルに統合し、前記複数のクラス内の第2クラスと同じクラスがない場合、前記第2クラスに基づいて新しい個人情報ファイルを作成して、前記第1データベースに追加するように構成される、
項目19に記載の情報処理装置。
(項目24)
前記個人情報ファイル作成モジュールは、さらに、前記第2データベースに画像データを追加する場合、前記第2データベースから、追加される前記画像データと同じ身分証明書番号があるか否かを検索し、前記画像データ内の第1画像データと同じ第1身分証明書番号がある場合、前記第1画像データを前記第1身分証明書番号に対応する既存個人情報ファイルに統合し、前記画像データ内の第2画像データと同じ第2身分証明書番号がない場合、前記第2画像データの第2身分証明書番号に基づいて新しい個人情報ファイルを作成して、前記第2データベースに追加するように構成される、
項目19に記載の情報処理装置。
(項目25)
情報処理装置であって、メモリと、プロセッサと、メモリに記憶され且つプロセッサで実行可能なコンピュータプログラムとを備え、前記プロセッサが前記コンピュータプログラムを実行するときに、項目1ないし13のいずれか一項に記載の情報処理方法を実現する、
情報処理装置。
(項目26)
コンピュータプログラムが記憶された記憶媒体であって、前記コンピュータプログラムがプロセッサによって実行されるときに、前記プロセッサに、項目1ないし13のいずれか一項に記載の情報処理方法を実行させる、
記憶媒体。
(項目27)
コンピュータ可読コードを含むコンピュータプログラムであって、前記コンピュータ可読コードが電子機器で実行されるときに、前記電子機器のプロセッサに、項目1ないし13のいずれか一項に記載の情報処理方法を実現するための命令を実行させる、
コンピュータプログラム。
Claims (27)
- 情報処理方法であって、
集約個人情報ファイルのデータに基づいてターゲットオブジェクトを決定することと、
前記ターゲットオブジェクトの第1スナップ撮影情報を取得することと、
前記第1スナップ撮影情報を分析して、第1分析結果を取得することと、
前記第1分析結果に基づいて、前記ターゲットオブジェクトの第1軌跡を決定することと、を含み、
前記第1分析結果は、前記ターゲットオブジェクトの出現情報を含む、
情報処理方法。 - 前記情報処理方法は、
集約個人情報ファイルのデータに基づいて前記ターゲットオブジェクトの同行者を決定することであって、前記同行者は、ターゲット時点の前後t秒間で画像収集装置によって前記ターゲットオブジェクトがスナップ撮影されているスナップ撮影画像に現れる前記ターゲットオブジェクト以外の人物であり、前記ターゲット時点は、前記画像収集装置が前記ターゲットオブジェクトをスナップ撮影した時点である、ことと、
前記同行者の第2スナップ撮影情報を取得することと、
前記第2スナップ撮影情報を分析して、第2分析結果を取得することと、
前記第2分析結果に基づいて前記同行者の第2軌跡を決定することと、をさらに含み、
前記第2分析結果は、前記同行者の出現情報を含む、
請求項1に記載の情報処理方法。 - 前記第1スナップ撮影情報を分析して、第1分析結果を取得することは、
前記第1スナップ撮影情報に基づいて、分析対象スナップ画像を決定することと、
各前記スナップ画像における前記ターゲットオブジェクトの出現情報を決定することであって、前記出現情報は少なくとも出現地理位置および出現時間を含む、ことと、
前記出現情報に基づいて同一地理位置における前記ターゲットオブジェクトの出現回数を統計することと、を含む、
請求項1または2に記載の情報処理方法。 - 前記第1分析結果は、
各スナップ画像と前記出現情報との対応関係、および
各スナップ画像とその前後に隣接するM(Mは正数である)枚のスナップ画像との関連関係のうちの少なくとも1つをさらに含む、
請求項3に記載の情報処理方法。 - 前記第1分析結果に基づいて、前記ターゲットオブジェクトの第1軌跡を決定することは、
前記ターゲットオブジェクトの出現情報に基づいて、前記ターゲットオブジェクトの出現位置および出現回数を電子地図にマークすることと、
前記出現時間に従って電子地図上の出現位置を接続して、第1軌跡を形成することと、を含む、
請求項3に記載の情報処理方法。 - 前記情報処理方法は、
前記ターゲットオブジェクトの同行者から第1同行者を決定することと、
前記第1同行者の第2軌跡を取り出すことと、
前記ターゲットオブジェクトの第1軌跡と前記第1同行者の第2軌跡とを対比表示することと、をさらに含む、
請求項2に記載の情報処理方法。 - 前記情報処理方法は、
第1データベース内の画像データに対してクラスタリング処理を実行して、クラスタリング処理結果を取得することであって、前記第1データベースは、画像収集装置によってスナップ撮影された人物画像に基づいて形成される、ことと、
第2データベース内の画像データに対して集約処理を実行して、集約処理結果を取得することであって、前記第2データベースは、実名登録された画像情報に基づいて形成される、ことと、
前記クラスタリング処理結果と前記集約処理結果を関連分析して、集約個人情報ファイルのデータを得ることと、をさらに含む、
請求項1ないし6のいずれか一項に記載の情報処理方法。 - 前記第1データベース内の画像データに対してクラスタリング処理を実行することは、
前記第1データベース内の画像データから顔画像データを抽出することと、
前記顔画像データを複数のクラスに分割することであって、前記複数のクラスのうちの各クラスはクラス中心を有し、前記クラス中心はクラス中心特徴値を含む、ことと、を含む、
請求項7に記載の情報処理方法。 - 前記第2データベース内の画像データに対して集約処理を実行して、集約処理結果を取得することは、
身分証明書番号が同じである画像データを1つの画像ライブラリに集約することと、
前記画像ライブラリと前記身分証明書番号に対応するテキスト情報との関連関係を確立して、集約処理結果を取得することであって、前記集約処理結果内の各身分証明書番号は、唯一の個人情報ファイルのデータに対応する、ことと、を含む、
請求項7に記載の情報処理方法。 - 前記クラスタリング処理結果と前記集約処理結果を関連分析することは、
前記第1データベース内の各クラス中心特徴値と前記第2データベース内の各参照クラス中心特徴値とを全量で比較して、全量比較結果を取得することと、
前記全量比較結果に基づいて、類似度が最も高く且つ類似度が所定閾値より大きいターゲット参照クラス中心特徴値を決定することと、
前記第2データベースから、前記ターゲット参照クラス中心特徴値に対応するターゲット人物画像および前記ターゲット人物画像に対応する身分情報を検索することと、
前記ターゲット人物画像に対応する身分情報と前記第1データベース内のクラス中心特徴値に対応する画像との関連関係を確立することと、を含む、
請求項7に記載の情報処理方法。 - 前記情報処理方法は、
前記第1データベースに画像データを追加する場合、追加される画像データに対してクラスタリング処理を実行し、前記追加される画像データ内の顔画像データを複数のクラスに分割し、前記第1データベースから、前記複数のクラスと同じクラスがあるか否かを検索し、前記複数のクラス内の第1クラスと同じクラスがある場合、前記第1クラスの画像データを前記第1クラスの既存個人情報ファイルに統合し、前記複数のクラス内の第2クラスと同じクラスがない場合、前記第2クラスに基づいて新しい個人情報ファイルを作成して、前記第1データベースに追加することをさらに含む、
請求項7に記載の情報処理方法。 - 前記情報処理方法は、
前記第2データベースに画像データを追加する場合、前記第2データベースから、追加される前記画像データと同じ身分証明書番号があるか否かを検索し、前記画像データ内の第1画像データと同じ第1身分証明書番号がある場合、前記第1画像データを前記第1身分証明書番号に対応する既存個人情報ファイルに統合し、前記画像データ内の第2画像データと同じ第2身分証明書番号がない場合、前記第2画像データの第2身分証明書番号に基づいて新しい個人情報ファイルを作成して、前記第2データベースに追加することをさらに含む、
請求項7に記載の情報処理方法。 - 情報処理装置であって、
集約個人情報ファイルのデータに基づいてターゲットオブジェクトを決定するように構成される決定モジュールと、
前記ターゲットオブジェクトの第1スナップ撮影情報を取得するように構成される取得モジュールと、
前記第1スナップ撮影情報を分析して、第1分析結果を取得するように構成される分析モジュールと、
前記第1分析結果に基づいて、前記ターゲットオブジェクトの第1軌跡を決定するように構成される処理モジュールと、を備え、前記第1分析結果は前記ターゲットオブジェクトの出現情報を含む、
情報処理装置。 - 前記決定モジュールは、さらに、集約個人情報ファイルのデータに基づいて前記ターゲットオブジェクトの同行者を決定するように構成され、前記同行者は、ターゲット時点の前後t秒間で画像収集装置によって前記ターゲットオブジェクトがスナップ撮影されているスナップ撮影画像に現れる前記ターゲットオブジェクト以外の人物であり、前記ターゲット時点は、前記画像収集装置が前記ターゲットオブジェクトをスナップ撮影した時点であり、
前記取得モジュールは、さらに、前記同行者の第2スナップ撮影情報を取得するように構成され、
前記分析モジュールは、さらに、前記第2スナップ撮影情報を分析して、第2分析結果を取得するように構成され、
前記処理モジュールは、さらに、前記第2分析結果に基づいて前記同行者の第2軌跡を決定するように構成され、前記第2分析結果は前記同行者の出現情報を含む、
請求項13に記載の情報処理装置。 - 前記分析モジュールは、さらに、
前記第1スナップ撮影情報に基づいて分析対象スナップ画像を決定し、
各前記スナップ画像における前記ターゲットオブジェクトの出現情報を決定し、前記出現情報は少なくとも出現地理位置および出現時間を含み、
前記出現情報に基づいて同一地理位置における前記ターゲットオブジェクトの出現回数を統計するように構成される、
請求項13または14に記載の情報処理装置。 - 前記第1分析結果は、
各スナップ画像と前記出現情報との対応関係、および
各スナップ画像とその前後に隣接するM(Mは正数である)枚のスナップ画像との関連関係のうちの少なくとも1つをさらに含む、
請求項15に記載の情報処理装置。 - 前記処理モジュールは、さらに、
前記ターゲットオブジェクトの出現情報に基づいて、電子地図に前記ターゲットオブジェクトの出現位置および出現回数をマークし、
前記出現時間に従って電子地図上の出現位置を接続して、第1軌跡を形成するように構成される、
請求項15に記載の情報処理装置。 - 前記処理モジュールは、さらに、
前記ターゲットオブジェクトの同行者から第1同行者を決定し、
前記第1同行者の第2軌跡を取り出し、
前記ターゲットオブジェクトの第1軌跡と前記第1同行者の第2軌跡とを対比表示するように構成される、
請求項14に記載の情報処理装置。 - 前記情報処理装置は、さらに、
第1データベース内の画像データに対してクラスタリング処理を実行して、クラスタリング処理結果を取得し、前記第1データベースは、画像収集装置によってスナップ撮影された人物画像に基づいて形成され、第2データベース内の画像データに対して集約処理を実行して、集約処理結果を取得し、前記第2データベースは、実名登録された画像情報に基づいて形成され、前記クラスタリング処理結果と前記集約処理結果を関連分析して、集約個人情報ファイルのデータを得るように構成される、個人情報ファイル作成モジュールを備える、
請求項13に記載の情報処理装置。 - 前記個人情報ファイル作成モジュールは、さらに、前記第1データベース内の画像データから顔画像データを抽出し、前記顔画像データを複数のクラスに分割するように構成され、前記複数のクラスのうちの各クラスはクラス中心を有し、前記クラス中心はクラス中心特徴値を含む、
請求項19に記載の情報処理装置。 - 前記個人情報ファイル作成モジュールは、さらに、身分証明書番号が同じである画像データを1つの画像ライブラリに集約し、前記画像ライブラリと前記身分証明書番号に対応するテキスト情報との関連関係を作成して、集約処理結果を取得するように構成され、前記集約処理結果内の各身分証明書番号は、唯一の個人情報ファイルのデータに対応する、
請求項19に記載の情報処理装置。 - 前記個人情報ファイル作成モジュールは、さらに、前記第1データベース内の各クラス中心特徴値と前記第2データベース内の各参照クラス中心特徴値とを全量で比較して、全量比較結果を取得し、前記全量比較結果に基づいて、類似度が最も高く且つ類似度が所定閾値より大きいターゲット参照クラス中心特徴値を決定し、前記第2データベースから、前記ターゲット参照クラス中心特徴値に対応するターゲット人物画像および前記ターゲット人物画像に対応する身分情報を検索し、前記ターゲット人物画像に対応する身分情報と前記第1データベース内のクラス中心特徴値に対応する画像との関連関係を確立するように構成される、
請求項19に記載の情報処理装置。 - 前記個人情報ファイル作成モジュールは、さらに、前記第1データベースに画像データを追加する場合、追加される画像データに対してクラスタリング処理を実行し、前記追加される画像データ内の顔画像データを複数のクラスに分割し、前記第1データベースから、前記複数のクラスと同じクラスがあるか否かを検索し、前記複数のクラス内の第1クラスと同じクラスがある場合、前記第1クラスの画像データを前記第1クラスの既存個人情報ファイルに統合し、前記複数のクラス内の第2クラスと同じクラスがない場合、前記第2クラスに基づいて新しい個人情報ファイルを作成して、前記第1データベースに追加するように構成される、
請求項19に記載の情報処理装置。 - 前記個人情報ファイル作成モジュールは、さらに、前記第2データベースに画像データを追加する場合、前記第2データベースから、追加される前記画像データと同じ身分証明書番号があるか否かを検索し、前記画像データ内の第1画像データと同じ第1身分証明書番号がある場合、前記第1画像データを前記第1身分証明書番号に対応する既存個人情報ファイルに統合し、前記画像データ内の第2画像データと同じ第2身分証明書番号がない場合、前記第2画像データの第2身分証明書番号に基づいて新しい個人情報ファイルを作成して、前記第2データベースに追加するように構成される、
請求項19に記載の情報処理装置。 - 情報処理装置であって、メモリと、プロセッサと、メモリに記憶され且つプロセッサで実行可能なコンピュータプログラムとを備え、前記プロセッサが前記コンピュータプログラムを実行するときに、請求項1ないし13のいずれか一項に記載の情報処理方法を実現する、
情報処理装置。 - コンピュータプログラムが記憶された記憶媒体であって、前記コンピュータプログラムがプロセッサによって実行されるときに、前記プロセッサに、請求項1ないし13のいずれか一項に記載の情報処理方法を実行させる、
記憶媒体。 - コンピュータ可読コードを含むコンピュータプログラムであって、前記コンピュータ可読コードが電子機器で実行されるときに、前記電子機器のプロセッサに、請求項1ないし13のいずれか一項に記載の情報処理方法を実現するための命令を実行させる、
コンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910577496.1A CN110334231A (zh) | 2019-06-28 | 2019-06-28 | 一种信息处理方法及装置、存储介质 |
CN201910577496.1 | 2019-06-28 | ||
PCT/CN2020/089594 WO2020259100A1 (zh) | 2019-06-28 | 2020-05-11 | 一种信息处理方法及装置、存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022518459A true JP2022518459A (ja) | 2022-03-15 |
Family
ID=68143715
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021541270A Pending JP2022518459A (ja) | 2019-06-28 | 2020-05-11 | 情報処理方法および装置、記憶媒体 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20210357678A1 (ja) |
JP (1) | JP2022518459A (ja) |
CN (1) | CN110334231A (ja) |
SG (1) | SG11202108246UA (ja) |
TW (1) | TWI740537B (ja) |
WO (1) | WO2020259100A1 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110334231A (zh) * | 2019-06-28 | 2019-10-15 | 深圳市商汤科技有限公司 | 一种信息处理方法及装置、存储介质 |
CN110765121B (zh) * | 2019-10-31 | 2022-09-20 | 上海意臣信息科技有限公司 | 一种大数据智能采集处理方法和系统 |
CN111435435B (zh) * | 2019-12-10 | 2024-06-07 | 杭州海康威视数字技术股份有限公司 | 一种同伴识别方法、装置、服务器及系统 |
CN111104915B (zh) * | 2019-12-23 | 2023-05-16 | 云粒智慧科技有限公司 | 一种同行分析方法、装置、设备和介质 |
CN111291682A (zh) * | 2020-02-07 | 2020-06-16 | 浙江大华技术股份有限公司 | 确定目标对象的方法、装置、存储介质及电子装置 |
CN111625686A (zh) * | 2020-05-20 | 2020-09-04 | 深圳市商汤科技有限公司 | 数据处理方法及装置、电子设备和存储介质 |
CN112528099A (zh) * | 2020-12-17 | 2021-03-19 | 青岛以萨数据技术有限公司 | 一种基于大数据的人员同行分析方法、系统、设备及介质 |
CN113793363A (zh) * | 2021-09-27 | 2021-12-14 | 重庆紫光华山智安科技有限公司 | 目标跟踪方法及相关装置 |
CN114155360A (zh) * | 2021-11-17 | 2022-03-08 | 浙江大华技术股份有限公司 | 一种图像集补全方法、装置、设备及介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013192154A (ja) * | 2012-03-15 | 2013-09-26 | Omron Corp | 監視装置、信頼度算出プログラム、および信頼度算出方法 |
WO2015111312A1 (ja) * | 2014-01-23 | 2015-07-30 | 株式会社日立国際電気 | 画像検索システム及び画像検索方法 |
JP2018011263A (ja) * | 2016-07-15 | 2018-01-18 | パナソニックIpマネジメント株式会社 | 監視システム、監視カメラ、及び管理装置 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI647632B (zh) * | 2014-06-25 | 2019-01-11 | 沈鉦諺 | Cluster data sharing method and system thereof |
CN104133917B (zh) * | 2014-08-15 | 2018-08-10 | 百度在线网络技术(北京)有限公司 | 照片的分类存储方法及装置 |
CN109844747A (zh) * | 2017-04-01 | 2019-06-04 | 深圳市大疆创新科技有限公司 | 身份认证服务器、身份认证终端、身份认证系统及方法 |
CN108229335A (zh) * | 2017-12-12 | 2018-06-29 | 深圳市商汤科技有限公司 | 关联人脸识别方法和装置、电子设备、存储介质、程序 |
CN108733819B (zh) * | 2018-05-22 | 2021-07-06 | 深圳云天励飞技术有限公司 | 一种人员档案建立方法和装置 |
CN109034944B (zh) * | 2018-06-19 | 2022-07-15 | 创新先进技术有限公司 | 同人多用户的数据信息维护方法及装置 |
CN109117714B (zh) * | 2018-06-27 | 2021-02-26 | 北京旷视科技有限公司 | 一种同行人员识别方法、装置、系统及计算机存储介质 |
CN109086829A (zh) * | 2018-08-14 | 2018-12-25 | 东方网力科技股份有限公司 | 一种社会人口治理的方法及装置 |
CN109241378A (zh) * | 2018-08-29 | 2019-01-18 | 北京旷视科技有限公司 | 档案建立方法、装置、设备及存储介质 |
CN109711874A (zh) * | 2018-12-17 | 2019-05-03 | 平安科技(深圳)有限公司 | 用户画像生成方法、装置、计算机设备和存储介质 |
CN109800673A (zh) * | 2018-12-28 | 2019-05-24 | 上海依图网络科技有限公司 | 一种归档方法及装置 |
CN109858365B (zh) * | 2018-12-28 | 2021-03-05 | 深圳云天励飞技术有限公司 | 一种特殊人群聚集行为分析方法、装置及电子设备 |
CN109784217A (zh) * | 2018-12-28 | 2019-05-21 | 上海依图网络科技有限公司 | 一种监控方法及装置 |
CN109800329B (zh) * | 2018-12-28 | 2021-07-02 | 上海依图网络科技有限公司 | 一种监控方法及装置 |
CN110334231A (zh) * | 2019-06-28 | 2019-10-15 | 深圳市商汤科技有限公司 | 一种信息处理方法及装置、存储介质 |
-
2019
- 2019-06-28 CN CN201910577496.1A patent/CN110334231A/zh active Pending
-
2020
- 2020-05-11 SG SG11202108246UA patent/SG11202108246UA/en unknown
- 2020-05-11 WO PCT/CN2020/089594 patent/WO2020259100A1/zh active Application Filing
- 2020-05-11 JP JP2021541270A patent/JP2022518459A/ja active Pending
- 2020-06-12 TW TW109119861A patent/TWI740537B/zh active
-
2021
- 2021-07-27 US US17/386,490 patent/US20210357678A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013192154A (ja) * | 2012-03-15 | 2013-09-26 | Omron Corp | 監視装置、信頼度算出プログラム、および信頼度算出方法 |
WO2015111312A1 (ja) * | 2014-01-23 | 2015-07-30 | 株式会社日立国際電気 | 画像検索システム及び画像検索方法 |
JP2018011263A (ja) * | 2016-07-15 | 2018-01-18 | パナソニックIpマネジメント株式会社 | 監視システム、監視カメラ、及び管理装置 |
Also Published As
Publication number | Publication date |
---|---|
TWI740537B (zh) | 2021-09-21 |
WO2020259100A1 (zh) | 2020-12-30 |
TW202101443A (zh) | 2021-01-01 |
US20210357678A1 (en) | 2021-11-18 |
SG11202108246UA (en) | 2021-08-30 |
CN110334231A (zh) | 2019-10-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2022518459A (ja) | 情報処理方法および装置、記憶媒体 | |
US20210357624A1 (en) | Information processing method and device, and storage medium | |
CN110175549B (zh) | 人脸图像处理方法、装置、设备及存储介质 | |
US20220092881A1 (en) | Method and apparatus for behavior analysis, electronic apparatus, storage medium, and computer program | |
CN108733819B (zh) | 一种人员档案建立方法和装置 | |
CN109740004B (zh) | 一种归档方法及装置 | |
TWI747341B (zh) | 檔案應用方法及裝置、儲存媒體 | |
WO2017212813A1 (ja) | 画像検索装置、画像検索システム及び画像検索方法 | |
CN111222373B (zh) | 一种人员行为分析方法、装置和电子设备 | |
CN109426785A (zh) | 一种人体目标身份识别方法及装置 | |
CN111078922A (zh) | 一种信息处理方法及装置、存储介质 | |
CN112818149A (zh) | 一种基于时空轨迹数据的人脸聚类方法、装置及存储介质 | |
CN109740003B (zh) | 一种归档方法及装置 | |
US9665773B2 (en) | Searching for events by attendants | |
JP2023505864A (ja) | ターゲット移動軌跡の構築方法、機器及びコンピュータ記憶媒体 | |
CN109800664B (zh) | 一种确定路人轨迹的方法及装置 | |
CN109784220B (zh) | 一种确定路人轨迹的方法及装置 | |
CN109857891A (zh) | 一种查询方法及装置 | |
CN110598551B (zh) | 一种提高行人身份识别效率的方法、装置、设备及介质 | |
US20210319226A1 (en) | Face clustering in video streams | |
CN110543584A (zh) | 一种建立人脸索引的方法、装置、处理服务器及存储介质 | |
CN111435435B (zh) | 一种同伴识别方法、装置、服务器及系统 | |
WO2021102760A1 (zh) | 一种人员行为分析方法、装置和电子设备 | |
CN114863364B (zh) | 一种基于智能视频监控的安防检测方法及系统 | |
JP2014042170A (ja) | 撮影システム、撮影支援方法、撮影装置及びその制御方法、管理装置及びその制御方法、並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210716 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210716 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220818 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220905 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230329 |