FR2855005A1 - Video sequence quality evaluation having sequence broadcast/user personal assistant file filled then server transmitted and processed statistics specialised information equipment electronic file placed - Google Patents
Video sequence quality evaluation having sequence broadcast/user personal assistant file filled then server transmitted and processed statistics specialised information equipment electronic file placed Download PDFInfo
- Publication number
- FR2855005A1 FR2855005A1 FR0305913A FR0305913A FR2855005A1 FR 2855005 A1 FR2855005 A1 FR 2855005A1 FR 0305913 A FR0305913 A FR 0305913A FR 0305913 A FR0305913 A FR 0305913A FR 2855005 A1 FR2855005 A1 FR 2855005A1
- Authority
- FR
- France
- Prior art keywords
- video sequence
- quality
- estimating
- video
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
Description
PROCEDE D'EVALUATION DE LA QUALITE VIDEOVIDEO QUALITY ASSESSMENT PROCESS
La présente invention se rapporte au domaine de la vidéo. The present invention relates to the field of video.
La présente invention se rapporte plus particulièrement à un procédé permettant d'évaluer la qualité d'une séquence vidéo. The present invention relates more particularly to a method for evaluating the quality of a video sequence.
L'art antérieur connaît déjà de nombreux procédés et 10 systèmes pour l'évaluation de la qualité de séquences vidéo. The prior art already knows many methods and systems for evaluating the quality of video sequences.
L'art antérieur connaît, par le brevet américain US 6 493 023 (les Etats-Unis représentés par l'administrateur de 15 la Nasa), un procédé et un dispositif pour évaluer la qualité visuelle des séquences vidéo numériques. Le dispositif décrit dans ce document intègre un modèle de la sensibilité visuelle humaine pour prédire la visibilité des artefacts. Le procédé de cette invention comporte 20 différentes étapes techniques et notamment un échantillonnage, une transformation des séquences de régions d'intérêt en coefficients de contraste locaux, un filtrage, une conversion des composants filtrés. The prior art knows, from American patent US 6,493,023 (the United States represented by the administrator of NASA), a method and a device for evaluating the visual quality of digital video sequences. The device described in this document integrates a model of human visual sensitivity to predict the visibility of artefacts. The method of this invention comprises 20 different technical steps and in particular a sampling, a transformation of the sequences of regions of interest into local contrast coefficients, a filtering, a conversion of the filtered components.
L'art antérieur connaît également, par la demande de brevet PCT WO 02/056605 (Philips) un système et un procédé améliorés permettant de fournir une métrique objective évolutive afin d'évaluer automatiquement la qualité vidéo d'une image vidéo. Ce système est doté d'un contrôleur 30 métrique capable de recevoir plusieurs nombres métriques objectifs de mérite depuis plusieurs unités de modèle métrique objectif. Certaines unités de modèle métrique objectif sont indépendantes et certaines sont interdépendantes. Ce système détermine une métrique 35 objective évolutive provenant de plusieurs nombres métriques objectifs de mérite. La métrique objective adaptative évolutive représente la meilleure corrélation des mesures métriques objectives d'image vidéo par des mesures subjectives d'image vidéo. Ce système est capable 5 de déterminer en permanence une nouvelle valeur de métrique objective évolutive alors que les différentes unités de modèle métrique objectif reçoivent des images vidéo. The prior art also knows, from PCT patent application WO 02/056605 (Philips), an improved system and method making it possible to provide an objective scalable metric in order to automatically evaluate the video quality of a video image. This system has a metric controller capable of receiving multiple objective metric numbers of merit from multiple objective metric model units. Some objective metric model units are independent and some are interdependent. This system determines a scalable objective metric from several objective merit metric numbers. The adaptive adaptive objective metric represents the best correlation of objective metrics of video image by subjective measures of video image. This system is capable of permanently determining a new evolving objective metric value while the different objective metric model units receive video images.
L'art antérieur connaît également, par la demande de 10 brevet PCT WO 97/37324 (Sarnoff) un appareil pour évaluer la visibilité de différences entre deux séquences d'images d'entrée. Ledit appareil comprend une paire de processeurs pré-filtre, une paire de constructeurs de pyramides et un processeur de différences juste perceptibles (processeur 15 JND). Chaque processeur pré-filtre reçoit une séquence d'images d'entrée séparée et effectue un filtrage temporel de façon à produire une réponse temporelle passe-bas (A LOW et B LOW) et une réponse temporelle passe-bande (A HIGH et B HIGH). Ensuite, les constructeurs de pyramides reçoivent 20 les réponses temporelles et génèrent des pyramides de contraste correspondant aux réponses temporelles. Le processeur JND évalue les pyramides de contraste de façon à produire une image métrique qui est utilisée pour évaluer la visibilité de différences entre les deux séquences 25 d'images d'entrée. The prior art also knows from PCT patent application WO 97/37324 (Sarnoff) an apparatus for evaluating the visibility of differences between two sequences of input images. The apparatus includes a pair of pre-filter processors, a pair of pyramid builders and a just noticeable difference processor (15 JND processor). Each pre-filter processor receives a separate input image sequence and performs time filtering to produce a low pass time response (A LOW and B LOW) and a band pass time response (A HIGH and B HIGH ). Then, the pyramid builders receive the temporal responses and generate contrast pyramids corresponding to the temporal responses. The JND processor evaluates the contrast pyramids to produce a metric image which is used to assess the visibility of differences between the two sequences of input images.
Le protocole classique consiste à demander à des personnes de remplir une fiche sous forme de papier ou bien d'utiliser un potentiomètre. Ces moyens, bien connus de 30 l'homme du métier, sont lents et souvent peu agréables pour l'utilisateur. The traditional protocol consists in asking people to fill in a form in the form of paper or to use a potentiometer. These means, well known to those skilled in the art, are slow and often not pleasant for the user.
La présente invention entend remédier aux inconvénients de l'art antérieur en proposant à 35 l'échantillon de personnes remplissant un questionnaire au sujet de la qualité des séquences vidéos visualisées d'utiliser un PDA (assistant personnel numérique). Un but de l'invention est d'automatiser la saisie des résultats et leurs interprétations. The present invention intends to remedy the drawbacks of the prior art by proposing to the sample of persons filling out a questionnaire concerning the quality of the video sequences viewed using a PDA (digital personal assistant). An object of the invention is to automate the capture of results and their interpretations.
A cet effet, l'invention concerne, dans son acception la plus générale, un procédé d'estimation de la qualité d'une séquence vidéo comprenant les étapes suivantes: * acquisition d'au moins une séquence vidéo; * diffusion de la séquence vidéo à au moins une personne au moyen d'un écran de visualisation; * remplissage par ladite personne d'une fiche électronique au moyen d'un PDA (assistant personnel numérique) ; * transmission de ladite fiche électronique à un serveur informatique; * traitement statistique des résultats inscrits sur ladite fiche électronique par un équipement informatique spécialisé. To this end, the invention relates, in its most general sense, to a method for estimating the quality of a video sequence comprising the following steps: * acquisition of at least one video sequence; * broadcasting of the video sequence to at least one person by means of a display screen; * filling by said person of an electronic form by means of a PDA (personal digital assistant); * transmission of said electronic file to a computer server; * statistical processing of the results entered on said electronic sheet by specialized computer equipment.
Avantageusement, l'étape de remplissage de la fiche électronique et l'étape de transmission de ladite fiche électronique sont synchronisées par l'enchaînement des étapes d'un questionnaire contenu dans la fiche. Advantageously, the step of filling in the electronic record and the step of transmitting said electronic record are synchronized by the sequence of the steps of a questionnaire contained in the record.
Selon une première variante, l'étape d'acquisition de la séquence vidéo est réalisée au moyen d'un logiciel d'acquisition vidéo. According to a first variant, the step of acquiring the video sequence is carried out by means of video acquisition software.
Selon une autre variante, l'étape d'acquisition de la séquence vidéo est réalisée par la fourniture d'un fichier 30 vidéo. According to another variant, the step of acquiring the video sequence is carried out by providing a video file.
De préférence, le fichier vidéo est de type MPEG. Preferably, the video file is of the MPEG type.
Selon un mode de mise en oeuvre particulier, l'étape d'acquisition de la séquence vidéo est réalisée au moyen 35 d'une caméra. According to a particular embodiment, the step of acquiring the video sequence is carried out by means of a camera.
Avantageusement, la caméra est associée à un téléphone mobile ou à un appareil de type PDA. Advantageously, the camera is associated with a mobile telephone or with a device of the PDA type.
Selon une autre variante avantageuse, la caméra est intégrée à un téléphone mobile ou à un appareil de type PDA. According to another advantageous variant, the camera is integrated into a mobile telephone or a device of the PDA type.
De préférence, la transmission de ladite fiche électronique à un serveur informatique est réalisée par une liaison Bluetooth. Preferably, the transmission of said electronic file to a computer server is carried out by a Bluetooth link.
Selon un mode de mise en oeuvre particulier, la 10 transmission de ladite fiche électronique à un serveur informatique est réalisée par une liaison infrarouge. According to a particular embodiment, the transmission of said electronic file to a computer server is carried out by an infrared link.
Selon une autre variante, la transmission de ladite fiche électronique à un serveur informatique est réalisée 15 au moyen d'un câble. According to another variant, the transmission of said electronic card to a computer server is carried out by means of a cable.
La présente invention se rapporte également à un système d'estimation de la qualité d'une séquence vidéo pour la mise en oeuvre du procédé comprenant un écran de 20 visualisation, au moins un PDA (assistant personnel numérique), des moyens d'échange de données entre un PDA et un serveur informatique, un serveur informatique et un équipement informatique pour le traitement statistique de données numériques. The present invention also relates to a system for estimating the quality of a video sequence for implementing the method comprising a display screen, at least one PDA (personal digital assistant), means for exchanging data between a PDA and a computer server, a computer server and computer equipment for the statistical processing of digital data.
On comprendra mieux l'invention à l'aide de la description, faite ciaprès à titre purement explicatif, d'un mode de réalisation de l'invention, en référence aux figures annexées: * la figure 1 représente l'interface du questionnaire sur PDA; et * la figure 2 représente le système selon l'invention. The invention will be better understood using the description, given below for purely explanatory purposes, of an embodiment of the invention, with reference to the appended figures: * FIG. 1 represents the interface of the questionnaire on PDA ; and * Figure 2 shows the system according to the invention.
Considérons un exemple non limitatif de réalisation. 35 Prenons l'exemple d'une séance d'évaluation pendant laquelle un testeur émet un jugement sur le degré de présence de dégradations spatiales (effets de bloc, ringing, blur) et temporelles (fluidité). Le testeur peut également émettre un jugement relatif à la perception de la 5 qualité globale de la séquence compressée. Pour cela, la séquence de référence et la séquence dégradée sont visualisées en simultanée par le testeur sur un écran d'ordinateur. Let us consider a nonlimiting example of realization. 35 Take the example of an evaluation session during which a tester makes a judgment on the degree of presence of spatial (block effects, ringing, blur) and temporal (fluidity) degradations. The tester can also make a judgment relating to the perception of the overall quality of the compressed sequence. For this, the reference sequence and the degraded sequence are displayed simultaneously by the tester on a computer screen.
Les testeurs remplissent ensuite le questionnaire 10 sous forme de fiche électronique adaptée sur un PDA. Ceci permet d'obtenir, à l'issue de la session de test, un fichier informatique contenant les résultats de chaque testeur. The testers then fill in the questionnaire 10 in the form of an electronic form adapted to a PDA. This makes it possible to obtain, at the end of the test session, a computer file containing the results of each tester.
Un des nombreux avantages de l'implémentation sur un 15 PDA consiste en l'utilisation d'une interface à écran tactile. One of the many advantages of implementing on a PDA is the use of a touch screen interface.
La synchronisation entre l'interface de visualisation et le PDA permet de récolter sans erreur l'avis de l'utilisateur sur la séquence vidéo. La synchronisation 20 peut être visuelle (affichage sur l'interface de visualisation et sur l'écran du PDA du numéro d'ordre de la séquence, l'utilisateur étant lui-même à l'origine de la synchronisation) ou automatisée (par exemple au travers d'une liaison sans-fil de type Bluetooth). Synchronization between the visualization interface and the PDA makes it possible to collect the user's opinion on the video sequence without error. Synchronization 20 can be visual (display on the display interface and on the PDA screen of the sequence number, the user being the originator of synchronization) or automated (for example via a Bluetooth type wireless link).
Ensuite, les résultats obtenus sont traités par un module statistique de données numériques. Then, the results obtained are processed by a statistical module of digital data.
Le procédé selon l'invention permet par exemple de réaliser des études sur la qualité de la technologie de 30 compression conforme à la norme MPEG-4 qui est une technologie de compression avec pertes, tirant parti des limitations du système visuel humain (HVS). Les pertes induisent des dégradations qui sont alors appelées artéfacts visuels, lorsqu'elles sont suffisamment 35 importantes pour être vues. Ces dégradations peuvent soit être internes à l'image (dégradation spatiale), soit affecter la cadence avec laquelle les images sont présentées (dégradation temporelle). The method according to the invention makes it possible, for example, to carry out studies on the quality of the compression technology in accordance with the MPEG-4 standard which is a lossy compression technology, taking advantage of the limitations of the human visual system (HVS). The losses induce degradations which are then called visual artefacts, when they are large enough to be seen. These degradations can either be internal to the image (spatial degradation), or affect the rate with which the images are presented (temporal degradation).
Les dégradations recherchées dans le cadre de ce 5 protocole sont caractéristiques des techniques employées par le standard de compression vidéo MPEG-4: le blocking et le ringing. En plus de ces dégradations, le testeur est amené à s'exprimer sur le degré de présence de flou dans l'image ainsi que sur sa perception de la fluidité du 10 vidéogramme. The degradations sought in the context of this protocol 5 are characteristic of the techniques used by the MPEG-4 video compression standard: blocking and ringing. In addition to these degradations, the tester is required to express himself on the degree of blurring of the image as well as on his perception of the fluidity of the videogram.
L'effet de blocs - ou blocking est la dégradation spatiale la plus visible introduite par un algorithme de compression basé sur une décomposition de l'image en blocs, sur lesquels est appliquée une DCT (Discrete Cosinus 15 Transform ou Transformation Cosinus Discret). Les blocs adjacents sont traités indépendamment les uns des autres, sans tenir compte d'une éventuelle corrélation. Une quantification trop importante des composantes DC de blocs adjacents, des coefficients AC (provoquant une perte 20 d'informations dans les hautes fréquences) ou des deux, provoque l'apparition de sauts de luminance ou de chrominance à la frontière de ces blocs. Ces artéfacts sont particulièrement visibles à de faibles débits. The block effect - or blocking is the most visible spatial degradation introduced by a compression algorithm based on a decomposition of the image into blocks, on which a DCT (Discrete Cosinus 15 Transform or Discrete Cosine Discret) is applied. The adjacent blocks are treated independently of each other, without taking into account any correlation. Too much quantification of the DC components of adjacent blocks, the AC coefficients (causing loss of information in the high frequencies) or both, causes the appearance of luminance or chrominance jumps at the border of these blocks. These artefacts are particularly visible at low flow rates.
L'effet de ringing est également une dégradation spatiale liée à une compression basée sur un découpage de l'image en blocs auxquels est appliquée une DCT. Cet artéfact est provoqué par une troncature inappropriée, résultante d'une quantification trop importante, des 30 composantes hautes fréquences d'un bloc contenant une frontière entre une zone homogène et un objet. Il se traduit par une variation des niveaux de luminance et/ou chrominance aux voisinages des frontières contenues dans le bloc. The ringing effect is also a spatial degradation linked to a compression based on a division of the image into blocks to which a DCT is applied. This artifact is caused by an inappropriate truncation, resulting from an excessive quantification, of the high frequency components of a block containing a border between a homogeneous zone and an object. It results in a variation in the luminance and / or chrominance levels in the vicinity of the borders contained in the block.
Le flou ne correspond pas à une dégradation spatiale engendrée par le processus de compression en tant que tel. 5 Cette dégradation est la résultante de filtres (smoothing, de-ringing, anti-aliasing) permettant d'amoindrir l'impact visuel de dégradations comme le blocking ou le ringing. The blurring does not correspond to a spatial degradation caused by the compression process as such. 5 This degradation is the result of filters (smoothing, de-ringing, anti-aliasing) making it possible to lessen the visual impact of degradations such as blocking or ringing.
La dernière dégradation, dont on essaye d'établir l'impact sur la qualité vidéo perçue par l'utilisateur, 10 est la fluidité du vidéogramme (dégradation temporelle). The last degradation, the impact of which on the video quality perceived by the user is tried to establish, 10 is the fluidity of the videogram (temporal degradation).
L'impression de fluidité est liée à la cadence à laquelle sont présentées les photogrammes d'un vidéogramme ou aux variations de cette cadence dans le temps. Une cadence image nominale trop faible, ou de trop fortes variations de 15 cette cadence image, sont susceptibles de dégrader l'impression de fluidité d'un vidéogramme. The impression of fluidity is linked to the rate at which the photograms of a videogram are presented or to variations in this rate over time. Too low a nominal frame rate, or too large variations in this frame rate, are likely to degrade the impression of fluidity of a videogram.
L'invention est décrite dans ce qui précède à titre d'exemple. Il est entendu que l'homme du métier est à même 20 de réaliser différentes variantes de l'invention sans pour autant sortir du cadre du brevet. The invention is described in the foregoing by way of example. It is understood that a person skilled in the art is able to carry out different variants of the invention without going beyond the scope of the patent.
Claims (12)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR0305913A FR2855005B1 (en) | 2003-05-16 | 2003-05-16 | METHOD FOR EVALUATING VIDEO QUALITY |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR0305913A FR2855005B1 (en) | 2003-05-16 | 2003-05-16 | METHOD FOR EVALUATING VIDEO QUALITY |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| FR2855005A1 true FR2855005A1 (en) | 2004-11-19 |
| FR2855005B1 FR2855005B1 (en) | 2005-08-26 |
Family
ID=33306419
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| FR0305913A Expired - Fee Related FR2855005B1 (en) | 2003-05-16 | 2003-05-16 | METHOD FOR EVALUATING VIDEO QUALITY |
Country Status (1)
| Country | Link |
|---|---|
| FR (1) | FR2855005B1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120150849A1 (en) * | 2009-06-19 | 2012-06-14 | Thomson Licensing | Method for selecting versions of a document from a plurality of versions received after a search, and related receiver |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6261229B1 (en) * | 1999-07-15 | 2001-07-17 | International Business Machines Corporation | Method and system for gathering and analyzing psychophysics data |
| WO2002037179A2 (en) * | 2000-11-01 | 2002-05-10 | Koninklijke Philips Electronics N.V. | Method and apparatus for tracking an object using a camera in a hand-held processing device |
| FR2827463A1 (en) * | 2001-07-10 | 2003-01-17 | Sagem | Television signal control system has decoder to extract control information for internet link to user |
| WO2003021886A2 (en) * | 2001-08-28 | 2003-03-13 | Toshiba Research Europe Limited | Channel adaptation in a communication network |
-
2003
- 2003-05-16 FR FR0305913A patent/FR2855005B1/en not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6261229B1 (en) * | 1999-07-15 | 2001-07-17 | International Business Machines Corporation | Method and system for gathering and analyzing psychophysics data |
| WO2002037179A2 (en) * | 2000-11-01 | 2002-05-10 | Koninklijke Philips Electronics N.V. | Method and apparatus for tracking an object using a camera in a hand-held processing device |
| FR2827463A1 (en) * | 2001-07-10 | 2003-01-17 | Sagem | Television signal control system has decoder to extract control information for internet link to user |
| WO2003021886A2 (en) * | 2001-08-28 | 2003-03-13 | Toshiba Research Europe Limited | Channel adaptation in a communication network |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120150849A1 (en) * | 2009-06-19 | 2012-06-14 | Thomson Licensing | Method for selecting versions of a document from a plurality of versions received after a search, and related receiver |
| US9678959B2 (en) | 2009-06-19 | 2017-06-13 | Thomson Licensing | Method of selecting versions of a document from a plurality of versions received after a search, and related receiver |
Also Published As
| Publication number | Publication date |
|---|---|
| FR2855005B1 (en) | 2005-08-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Ghadiyaram et al. | A subjective and objective study of stalling events in mobile streaming videos | |
| Kiran Adhikarla et al. | Towards a quality metric for dense light fields | |
| Bampis et al. | Learning to predict streaming video QoE: Distortions, rebuffering and memory | |
| US20180342086A1 (en) | System and Method for Encoding and Decoding Using Texture Replacement | |
| Lin et al. | Visual distortion gauge based on discrimination of noticeable contrast changes | |
| Leszczuk et al. | Recent developments in visual quality monitoring by key performance indicators | |
| Seshadrinathan et al. | Automatic prediction of perceptual quality of multimedia signals—a survey | |
| Lee et al. | A subjective and objective study of space-time subsampled video quality | |
| Pinson et al. | Selecting scenes for 2D and 3D subjective video quality tests | |
| EP3750311B1 (en) | Techniques for predicting perceptual video quality based on complementary perceptual quality models | |
| Bampis et al. | Feature-based prediction of streaming video QoE: Distortions, stalling and memory | |
| Mackin et al. | A study of subjective video quality at various spatial resolutions | |
| EP2466906B1 (en) | System and methods to measure noise and to generate picture quality prediction from source having no reference | |
| Shahid et al. | Subjective quality assessment of H. 264/AVC encoded low resolution videos | |
| Guo et al. | Perceptual quality assessment of immersive images considering peripheral vision impact | |
| Hewage et al. | A study on the perceived quality of 3D video subject to packet losses | |
| FR2855005A1 (en) | Video sequence quality evaluation having sequence broadcast/user personal assistant file filled then server transmitted and processed statistics specialised information equipment electronic file placed | |
| Ghadiyaram et al. | Subjective and objective quality assessment of mobile videos with in-capture distortions | |
| Malekmohamadi et al. | A new reduced reference metric for color plus depth 3D video | |
| Kim et al. | Modern trends on quality of experience assessment and future work | |
| Ryu et al. | No-reference sharpness metric based on inherent sharpness | |
| Appina et al. | Subjective and objective study of the relation between 3D and 2D views based on depth and bitrate | |
| Gracheva et al. | Subjective assessment of the quality of static and video images from mobile phones | |
| da Silva et al. | Perceptual strengths of video impairments that combine blockiness, blurriness, and packet-loss artifacts | |
| Al-Juboori et al. | Content characterization for live video compression optimization |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| ST | Notification of lapse |
Effective date: 20130131 |