CA2284884C - Systeme de visioconference - Google Patents

Systeme de visioconference Download PDF

Info

Publication number
CA2284884C
CA2284884C CA002284884A CA2284884A CA2284884C CA 2284884 C CA2284884 C CA 2284884C CA 002284884 A CA002284884 A CA 002284884A CA 2284884 A CA2284884 A CA 2284884A CA 2284884 C CA2284884 C CA 2284884C
Authority
CA
Canada
Prior art keywords
site
screen
images
participants
sites
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CA002284884A
Other languages
English (en)
Other versions
CA2284884A1 (fr
Inventor
Georges Buchner
Yannick Mahieux
Christian Wipliez
Jean-Pascal Jullien
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
France Telecom SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by France Telecom SA filed Critical France Telecom SA
Publication of CA2284884A1 publication Critical patent/CA2284884A1/fr
Application granted granted Critical
Publication of CA2284884C publication Critical patent/CA2284884C/fr
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display

Abstract

L'invention concerne un système de visioconférence entre participants localisés sur des sites distants, comprenant sur chaque site un écran de visualisation. Selon l'invention, l'écran de visualisation est un grand écran (10) du type écran de projection ou de rétroprojection ou de type à vision directe, formé par un ou plusieurs systèmes de visualisation formant un mur d'images pour visualiser simultanément tous les participants distants dans un espace reconstitué sur le mur d'images que forme cet écran (10), et le système comprend pour chaque site donné des moyens de répartition spatiale du son (100A, 100K, Hi, Mj) pour établir une correspondance entre le son généré par chaque participant distant et son image visualisée sur l'écran du site considéré.

Description

SYSTEME DE VISIOCONE'ÉRENCE.
L'invention concerne un système de visioconférence ou téléréunion entre participants localisés sur des sites distincts généralement distants.
Elle s'applique à des systèmes multi-points, c'est-à-dire à des systèmes permettant d'effectuer une liaison audiovisuelle entre des participants de plusieurs sites.
Elle concerne aussi des systèmes point à point, c'est-à-dire des systèmes ne mettant en liaison audiovisuelle que deux sites. Elle s'applique également à des visiophones raccordés par des ponts de conférence.
Les équipements d'un système de visioconférence pour un site donné sont placés dans un local que l'on appelle dans la suite indifféremment salle ou studio. Les participants sont le plus souvent assis autour d'une table de conférence face à un écran de visualisation.
Aujourd'hui, les services et systèmes de visioconférence commercialisés proposent des liaisons en multi-points ayant une qualité audiovisuelle limitée due soit à la qualité des équipements d'extrémité (restitution du son et restitution d'image) soit intrinsèquement par l'absence de débit résultant de la limitation en bande passante due au réseau utilisé.
En effet, les systèmes de conférence sont raccordés sur des réseaux numériques, principalement sur le réseau RNIS selon plusieurs configurations en mode point à
point ou en mode multi-points.
Ainsi sur le réseau NUMERIS le débit offert pour ce service varie entre 128 kbit/s pour le bas de gamme à 384 kbit/s pour le service de haut gamme.
Les terminaux utilisés sont conformes principalement à des standards ITU tels que l'ensemble des normes H320.
2 Dans certains systèmes, on ne peut voir qu'une seule salle distante à la fois. Cela gêne les utilisateurs qui ne peuvent pas voir tout le monde en même temps. Un système de commutation, manuel ou automatique, sélectionne la salle qui est présentée sur l'écran. En général, il s'agit de la salle qui transmet le signal audio le plus fort (commutation à la voix). C'est le cas des ponts de conférence qui commutent l'image en fonction d'une détection vocale, celle de la salle la plus active au niveau sonore.
D'autres systèmes utilisant la normalisation ITU de type H 320 ou H 323 ou autre, font intervenir une unité
centrale pour recevoir les images de tous les Équipements Visioconférence Multipoints (EVM) (ou Multi Conférence Unit MCU) définis par les normes H 231 et H 243. Cette unité restitue des images en partageant la bande passante pour la transmission vers un EVM autant de fois que d'images transmises.
Pour cela on réalise un codage qui comprime fortement le débit en ligne avec un facteur de compression de 40 à
50. On perd donc en définition environ les 3/4 de l' image transmise par chaque salle (multi-points jusqu'à 5 salles).
La compression numérique des images utilisée peut être de type H 320 avec un codage H 261 ou de type H 323 avec un codage H 263 ou de type moving JPEG (norme ISO) ou de type MPEG1 ou de type MPEG2.
Dans l'un quelconque des ces profils, les images envoyées peuvent être de type fichier informatique.
Dans tous les cas, les images reçues sont dégradées et ne reconstituent en aucun cas l'effet de co-présence.
3 On pourra se reporter à l'état de la technique le plus proche que constitue le document D1 - WO 94 16517.
Dans le cas de l'audio on utilise des systèmes de codage ou compression de débit de type 6722 ou 6711 qui ne respectent pas la qualité originale du signal de parole tant en largeur de bande qu'en qualité de codage elle-même.
Le système de visioconférence selon l'invention a pour but d'offrir des réunions à distance avec le maximum de téléprésence en dépassant les limites des systèmes commercialisés aujourd'hui. Il permet d'obtenir une visualisation des participants distants sur écrans (échelle proche de 1), avec une grande perception des textures et des comportements et une correspondance des images visuelles et des images sonores grâce à une spatialisation sonore des participants distants, asservie aux conditions de prise de vue.
Il permet d'obtenir une présence continue des participants distants , même en situation multi-points. Le système permet en outre une minimisation des défauts de parallaxe (eye contact en anglais) en utilisant n caméras de prises de vue assez proches des images à filmer (logées par exemple dans des fenêtres de l'écran) comme cela est indiqué dans la suite. Il permet également une reproduction sonore haute fidélité.
La présente invention a plus particulièrement pour objet un système de visioconférence selon la revendication 1.
L'image des participants distants est à une échelle proche de 1 sur l'écran du studio, cette échelle dépend de la distance entre l'écran et la table où se trouvent les participants. Cela conduit par exemple à un écran avec les
4 dimensions typiques environ de 5x2 m pour visualiser 4 salles distantes avec environ 4 personnes dans chaque salle.
Le système de visioconférence comporte un ou plusieurs ensembles de prise de vue (CA1), (CA2) et des systèmes de prise de son (microphones ou antennes acoustiques). Les données de prise de son sont associées à
l' un ou à l' autre des ensembles de prise de vue selon que les signaux vidéo transmis proviennent de l'un ou de l'autre des ensembles (CA1), (CA2).
Plus précisément, l'association permet d'avoir une "superposition subjective", la source sonore étant proche (dans l'axe) de l'image associée.
Selon une autre caractéristique de l'invention les moyens de prise et de restitution de son comportent .
- une unité d'acquisition des signaux et de numérisation;
- une unité de restitution des signaux et de conversion numérique analogique;
- n microphones distribués devant les participants dudit site;
- p haut-parleurs distribués le long de l'écran, p étant proportionnel à la taille de l'écran; ' - des moyens d'établissement de la correspondance entre un ou plusieurs microphones, le signal issu de ce ou ces microphones) et le ou les haut-parleurs) des sites distants destiné à restituer ces signaux;
- des moyens d'adaptation au réseau consistant en la réduction de débit;
- des moyens de contrôle de l'écho.
La spatialisation sonore permet de faire correspondre les images sonores et les images visuelles. Outre que cette disposition renforce fortement l'effet de téléprésence, elle permet d'établir plusieurs conversations parallèles entre les deux salles distantes;
le suivi des conversations est simplifié par la possibilité de se focaliser sur la personne que l' on veut écouter, comme dans une réunion naturelle.
Les moyens d'établissement de la correspondance entre microphone, signal issu de ce microphone et haut-parleur des sites distants destiné à restituer ce signal sont réalisés par programmation de la configuration désirée.
Cette programmation peut consister à mémoriser une ou plusieurs configurations prédéterminées.
Selon une autre caractéristique les moyens de prise de vue comportent pour chaque site q caméras, ce nombre est de préférence supérieur ou égal à 2. Les caméras sont disposées devant les participants dudit site de manière à
être réparties dans des zones distinctes d'affichage des différents participants distants sur l'écran ou à
proximité de ces zones. De façon pratique, les caméras peuvent être réparties, dans la partie basse ou dans la partie haute, ou autour de l'écran.
Ainsi, chaque salle peut posséder plusieurs caméras de prise de vue qui cadrent les participants sous des angles différents. Les prises de vue qui sont transmises vers un site sont celles qui sont prises par la caméra qui se trouve à proximité de l'image projetée pour ce site.
Cela permet de diminuer l'effet de parallaxe, de différencier les points de vue, et de reconstituer une localisation de chaque intervenant en fonction de sa disposition physique dans le site puis dans l'ensemble.
En situation de point à point où plusieurs images sont juxtaposées sur la largeur de l'écran, chaque image est construite avec une prise de vue partielle de la salle. Cela permet de mieux savoir qui regarde qui sur l'écran et donc de mieux suivre la dynamique de la réunion.
En pratique, les caméras sont placées sous les (ou dans le bas des) images écran projetées sur l'écran 10.
Pour une configuration à deux images concaténées (l'une à côté de l'autre), les caméras sont recentrées et se trouvent à une distance du centre de l'écran correspondant à environ un tiers de la largeur de l'image, c'est-à-dire un sixième de la largeur totale de l'écran.
Ce recentrage minimise le problème de recouvrement aux bords des deux images prises par les deux caméras.
Les sites sont reliés par réseau à haut débit soit en point à point, soit en multi-points, soit à travers une unité centrale EVM (pont de visioconférence).
D'autres particularités et avantages de l'invention apparaîtront à la lecture de la description qui est faite ci-après et qui est donnée à titre d'exemple illustratif et non limitatif et en regard des dessins sur lesquels .
- les figures 1 et 2, illustrent de façon schématique le problème de la coprésence que l'invention résout, - la figure 3 illustre le schéma de principe de l'invention, - la figure 4 illustre le schéma de réalisation pratique des équipements dans un studio, - la figure 5 correspond à un schéma de réalisation particulière correspondant à une liaison entre 3 studios, - la figure 6 correspond à un schéma de réalisation particulière correspondant à un liaison entre 2 studios, - les figures 7 à 9 illustrent un exemple de différentes "images écrans" formant le mur d'image sur le grand écran, - les figures 10 à 13 correspondent à différents modes de liaison entre les équipements studios ou terminaux visiophoniques selon l'invention dans les configurations réseaux différentes.
Afin de décrire une approche de l'effet de coprésence, la figure 1 illustre la réunion suivant une visualisation se rapprochant de la réalité.
Considérons 12 personnes installées autour d'une table ronde virtuelle. L'un des personnages voit 4 autres personnes adjacentes du groupe à travers une lucarne et en développant la surface on peut considérer qu'il voit ces 4 personnes sur un écran plan ou quasi plan. Ainsi verra-t-il les 8 autres personnes regroupées en 4 dans 2 studios différents sur 2 écrans pratiquement en situation plane.
En général, la table virtuelle n'est pas ronde mais est disposée en long avec les groupes installés de part et d'autre. Ainsi, le personnage E verra A à sa gauche et F à
sa droite avec continuité d'adjacence entre tous les individus.
La figure 2 illustre le ou les écrans qui sont légèrement courbes pour reproduire une situation d'immersion.
Cet environnement permet entre autre de restituer les effets de regards échangés entre les participants en reproduisant une approximation du jeu des yeux qui se tournent et s'observent. Par exemple, A peut observer E et toute autre personne verra A regardant F avec une approximation des angles de visée subjective.

Le schéma de la figure 3 est un schéma de principe illustrant un système de téléconférence selon l'invention.
Bien entendu, d'autres choix peuvent être faits en ce qui concerne la position des participants (assis ou debout, autour d' une table ou non) , en ce qui concerne la position de la caméra ou des caméras et en ce qui concerne la position des enceintes acoustiques (haut-parleurs) dès l'instant où ces positions permettent d'obtenir une répartition spatiale sonore et un mur d'image simulant une immersion totale de tous les participants.
Un site A est relié à d' autres sites B . . . K par un réseau à haut débit. Les différentes possibilités de liaison pour ces sites seront détaillées par la suite avec les figures 10 à 13. On pourra par exemple utiliser le réseau RNIS (à intégration de service) en regroupant plusieurs accès S0, on peut aussi utiliser des autoroutes de l'information ou le réseau Internet ou des accès à
HDSL. De tels réseaux ne sont pas des obstacles pour des signaux son analogiques de bande passante supérieure à
7 kHz dès l' instant où l' on met en oeuvre des systèmes de compression de débit qui préservent la qualité originale.
Ceci procure une haute qualité sonore équivalente à celle d'un disque numérique compact (CD).
Le réseau de transmission utilisé pourra être le réseau à mode de transfert asynchrone (ATM) ou tout autre réseau de débit élevé de type numérique ou même analogique. Toutes les images pourront être transmises vers les différents sites à des débits suffisamment élevés sans nécessité d'augmenter le facteur de compression lors du codage.

Ä titre d'exemple, les images codées sont transmises entre 384 kbit/s sur Numéris et 2 Mbit/s selon 1e type de réseau.
La visioconférence est pilotée ou télépilot~e par des unités 100A, 100K qui dialoguent à travers le (ou les) réseaux) R pour notamment s'accorder sur la correspondance établie entre participant, image sonore et image visuelle. Autrement dit, les unités de pilotage transmettent soit une description de la configuration avec les signaux transmis si la configuration n' a pas été déjà
prédéfinie, soit le mode de configuration choisi parmi plusieurs configurations déjà définies pour tous les sites. Elles sont aptes à gérer tous les équipements du studio selon la configuration désirée. Parmi les configurations possibles pour une conférence, on peut avoir une liaison point à point ou des liaisons multi-points entre 3 ou 4, ou 5 et plus, sites.
De façon pratique, la configuration consiste à
décrire le lien entre un participant d'un site P1(A), le ou les systèmes de prise de son M1 (microphones ou antennes acoustiques) qui captent son discours, la caméra qui le filme CA1 de manière à ce l'image IP1(A) sur le site B soit en correspondance avec le ou les haut-parleur(s) H1 qui restituent) le son issu du ou des microphones M1.
Pour cela, un site A comporte n microphones, p haut-parleur, q caméras. Pour un site donné, le nombre de haut-parleurs est proportionnel à la taille de l' écran ( soit à
la largeur, soit à la surface de cet écran).
Pour des participants assis autour d'une table, le grand écran 10 est disposé devant la table de conférence d'un site considéré et les images écran (de chaque site) sont projetées sur cet écran de manière à ce que les participants distants soient par exemple au même niveau que les participants du site de façon à reconstituer une table virtuelle.
Lorsque le participant P1(A) s'adresse au participant P1(B), ce sont les prises de vue de la caméra CA1 du site A qui sont transmises vers les autres sites B à K. De même, ce sont les prises de vue de la caméra CAl du site B
qui sont transmises vers les sites A, C à K. Si aucun participant ne prend la parole sur les autres sites, la caméra qui effectue les prises de vue sur ces sites est indifférente, mais les images de tous les participants sont quand même transmises.
Les commandes des prises de vue par les caméras adéquates sont pilotées par les unités de pilotage 100A-100K présentes sur les sites ou télépilotées à partir d'un site de surveillance.
L'asservissement entre la prise de son effectuée et la caméra qui doit réaliser la prise de vue, est obtenu par un programme de commande à la portée de .L' homme de métier. Ce programme est mis en oeuvre par les unités 100A
à 100K pour obtenir des images donnant l'impression lorsqu'elles sont projetées sur les écrans que les personnes intéressées se regardent vraiment.
De façon pratique, l'usage de seulement deux caméras permet d'obtenir cet effet.
Les images transmises par le réseau sont reçues à
chaque site et traitées par les unités vidéo 300 pour être projetées de manière juxtaposée et/ou superposée sur l'écran. Toutes les images reçues sont visualisées sur l'écran 10 de chaque site, l'écran formant un mur d'images.

Dans le cas particulier d'un système point à point les images projetées sur chaque écran correspondent à une seule salle. Cette situation permet d'améliorer la qualité
de l'image. Pour ce faire il est proposé dans ce cas de transmettre les deux images chacune obtenue par une caméra. Chaque caméra réalise des prises de vue partielle de la salle. En pratique, une caméra filme une moitié de la scène, l'autre caméra filme l'autre moitié.
La juxtaposition des images est pilotée par les unités de traitement 100A, 100B qui commandent les unités de traitement vidéo pour former à l' écran une seule image à partir des signaux issus des deux caméras. La concaténation d'image est un traitement classique en soi.
Sur la figure 4, on a représenté de façon plus détaillée les unités de traitement et de pilotage présentes dans le système. I1 s'agit là encore d'un exemple correspondant au cas où l'on a deux caméras par studio.
Pour la partie vidéo .
La première caméra CA1 est reliée à un codeur vidéo 303 et un ensemble de décodage vidéo 304 est relié à un premier projecteur PR1. L'ensemble de décodage est formé
d'un ou plusieurs décodeurs pour que chaque décodeur décode les signaux vidéo provenant d'un site. Dans la suite de la description, on parlera pour simplifier de décodeur 304 sachant qu'il peut s'agir d'un ensemble de décodeurs.
Le codeur et le décodeur sont reliés à une interface 301 d'adaptation et de transmission des signaux vidéo sur le réseau R. Ä titre d'exemple, cette interface sera une interface AALl (Adaptation Layer) dans le cas d'une transmission sur réseau ATM.

Cette interface est reliée à une interface support physique 400.
L'unité de pilotage 100A envoie, par exemple à
travers un réseau local RL, les signaux de pilotage CD1, DC1, IV1 respectivement pour le codeur, le décodeur et l'interface d'adaptation 301 selon la configuration de la visioconférence.
De la même façon, la deuxième caméra CA2 est reliée à
un codeur 305 qui est lui-même relié à une interface 302 d'adaptation à la transmission sur le réseau. Un décodeur 306 est relié au deuxième projecteur PR2 et à l' interface 302. L'interface 302 est reliée à l'interface support physique 400.
L'unité de pilotage envoie les signaux de pilotage CD2, DC2, et IV2 respectivement au codeur, décodeur et interface d'adaptation selon la configuration.
Un codeur vidéo peut être relié fonctionnellement à
plusieurs décodeurs selon des techniques hors de la portée de l'invention.
On pourrait avoir une troisième caméra sur un site qui serait alors reliée à l'un des codeurs 303 ou 305 et transmettre de cette façon des prises de vue d'une personne que l'on désire favoriser. Les prises de vue de cette caméra seraient codées par le codeur auquel elle est reliée et transmises à tous les autres sites . I1 faudrait alors prévoir sur les autres sites un décodeur supplémentaire dans l'ensemble décodeur 303 ou 306 de ces sites pour traiter le signal vidéo issu de cette caméra et visualiser sur l'écran 10 des sites, les images d'écran relatives à ces prises de vue.

Les projecteurs sont soit des projecteurs vidéo, soit des rétroprojecteurs à cristaux liquides. La projection peut être directe si l'on utilise un écran à plasma.
Pour la partie audio .
Les n microphones sont reliés à une unité
d'acquisition des signaux 201 réalisant la numérisation des signaux. Les sorties de cette unité 201 sont appliquées aux entrées d'une unité d'atténuation 207 pour le contrôle de l'écho. Les sorties de l'unité
d'atténuation sont appliquées aux entrées d'un codeur réducteur de débit pour le signal audio 202 piloté par l'unité 100A. Le codeur 202 effectue également le matriçage des signaux microphoniques pour s'adapter au nombre de canaux disponibles sur le réseau pour le transport audio. Pour cela, le codeur reçoit le signal de gestion de la configuration CA. Le codeur adaptateur audio 202 est relié à une interface 204 d'adaptation à la transmission sur le réseau R qui sera une interface AAL5 pour le réseau ATM. Cette interface est reliée à
l'interface support physique 400.
L'interface 204 est apte à émettre les signaux audio codés sur le réseau et à recevoir les signaux audio codés émis par les autres sites. Les signaux reçus sont traités par l'interface 204 et appliqués à une unité de décodage et de dématriçage 203 des signaux audio.
Les signaux délivrés par l'unité de décodage et de matriçage 203 sont appliqués aulx) haut-parleurs) désirés) au moyen d'une unité 205 de restitution et de conversion numérique analogiques des signaux audio. Cette unité 205 peut ainsi envoyer vers les hauts-parleurs qui conviennent les signaux reçus requis.

Dans le cas où la configuration est prévue et mémorisée dans une mémoire 110 de l'unité de pilotage, l'unité 100A aura dans la table mémorisée une information indiquant que la sortie S1 du décodeur délivre le signal qui a été capté soit par le micro M1, soit par un ensemble de microphones dont Ml fait partie d' un site B et que, en conséquence, cette sortie doit être aiguillée vers le haut-parleur Hn ou un ensemble de haut-parleurs dont Hl fait partie pour être à proximité de l'image du participant qui a parlé.
Les systèmes d'acquisition (microphone et unité 205) sont choisis de manière à respecter la bande passante du signal de parole et de manière à fonctionner pour des bandes de fréquences 3 à 7 kHz (ce qui constitue la limite basse du système en terme de qualité). Le système de codage est également choisi pour respecter cette qualité
originale et on choisira par exemple des algorithmes de réduction de débit décrit par les normes MPEGl ou MPEG2.
Les systèmes d'acquisition sont choisis aussi de manière à
procurer un bon rapport signal/bruit.
Ä titre d'exemple de configuration possible dans le cas de deux salles en point à point on aura 6 canaux pour le son soit un par exemple pour chaque microphone. Dans le cas de 3 salles on aura deux fois 3 canaux pour le son sur chaque site. Pour le site A, 3 canaux permettront la liaison audio entre A et B et les trois autres permettront la liaison audio entre A et C (idem pour B, et pour C).
L'image et le son sont transmis avec un décalage dans le temps le plus faible possible (de l'ordre de la centaine de millisecondes) ce qui, combiné avec la qualité
et la taille de l' image vidéo, peut par exemple permettre à un sourd de lire sur les lèvres des correspondants distants.
L'équipement audio comporte en outre un circuit de contrôle d'écho 206 agissant par variation du gain sur les signaux microphoniques au moyen de l'unité d'atténuation variable 207 selon des procédés classiques en soi. Ce circuit est relié aux sorties de l'unité 201 et aux entrées de l'unité 205.
Le schéma de la figure 5 illustre un cas particulier de configuration possible. I1 s'agit d'une configuration vidéo entre trois sites A, B, C.
Pour simplifier cette figure, on a représenté les liens directs réalisés selon cette configuration entre les différents sites en faisant abstraction du réseau de transmission.
Cette configuration est décrite à partir de 3 sites A, B, C.
Les sites A et B ont chacun deux caméras CAl et CA2 qui permettent d'avoir des vues sous des angles différents d'un même site.
Selon cette configuration on réalise des liaisons point à point pour les codeurs et les décodeurs.
La caméra CAl est reliée au codeur 303 du site A, ce codeur est relié au décodeur 304 qui est relié au projecteur qui permet d'avoir l'image d'écran E1(A) (image provenant de la caméra CA1 du site A).
Le codeur 303 du site B est relié à la caméra CA1 du site B. Le signal fourni par le décodeur est décodé par le décodeur 304 du site A pour fournir l' image d' ér_ran E1 (B) (image provenant de la caméra CA1 du site B).
Dans le studio C on a placé une seule caméra portant la référence CAl. Cette caméra est reliée aux deux codeurs 304(A2) et 304(B2). Le codeur 304(A2) est relié au décodeur 306 du site A associé à l' image d' écran E1 (C) et le codeur 304(B2) est relié au décodeur 306 du site B
associé à l'image d'écran El(C).
En revanche les décodeurs 306 du site C sont reliés l'un au codeur 305 du signal de la caméra CA2 du site A, l'autre au codeur 305 du signal de la caméra CA2 du site B
pour afficher respectivement sur le site C les images d'écran site A, c'est-à-dire E2(A) et site B, c'est-à-dire E2 (B) .
Les unités de traitement audio sont également doublées d'après cette configuration de manière à mettre en liaison une unité audio 202, 203, 205 avec chaque site.
La figure 6 illustre une liaison point à point entre un site A et un site B. Dans ce cas chaque caméra CA1, CA2 effectue une prise de vue partielle du site.
Dans le cas de la transmission de 6 flux audio (6 microphones) on utilisera deux codeurs-décodeurs à 3 voies pour chaque site.
Les figures 7 à 9 illustrent respectivement les images d'écran projetées sur les sites A, B et C. Sur le site A, figure 7, l'image d'écran E(4,3,2,1) permet de visualiser des images provenant de terminaux individuels et l'image d'écran E(C,B) permet de visualiser les images superposées des sites C et B.
La figure 8 correspond à la visualisation sur le site B et la figure 9 à la visualisation sur le site C.
Les figures 10 à 13 illustrent des exemples de liaisons possibles entre les sites.
La figure 10 correspond à 4 studios reliés par un réseau ATM ou liaison spécialisées.

La figure 11 correspond à des liaisons réalisées à
travers une unité centralisée EVM (MCU) (pont de visioconférence).
La figure 12 correspond à des liaisons mixtes réseau et un équipement EVM (MCU), c'est-à-dire un pont de visioconférence du commerce comprenant un traitement de suppression des signaux audio des studios 1, 2 et 3 car les sites qui ont des liaisons directes et une liaison à
travers cet équipement seraient gênés par la superposition avec décalage temporel des signaux qui proviennent des liaisons réseaux directes et des liaisons EVM.
La figure 13 illustre le cas de liaison à travers des réseaux de types différents Numéris, ATM, liaison spécialisée.

Claims (14)

REVENDICATIONS
1. Système de visioconférence entre participants localisés sur N, N>2 sites distincts, comprenant sur chaque site un écran de visualisation, des moyens de prise de vue et de restitution d' images, des moyens de prise de son et de restitution de son, dans lequel :
l'écran de visualisation est un grand écran de type écran de projection ou de rétroprojection ou de type à
vision directe, formé par au moins un système de visualisation formant un mur d'images pour visualiser simultanément tous les participants dans un espace reconstitué sur un mur d'images que forme cet écran;
les moyens de prise du son et de restitution comprennent pour chaque site donné des moyens de répartition spatiale du son pour établir une correspondance entre un son généré par chaque participant et son image visualisée sur l'écran du site considéré, caractérisé en ce que :
un site considéré reçoit des images et des signaux audio émis par les autres sites et les restitue en fonction de la correspondance établie, la vision et l'écoute des autres sites étant simultanée et se faisant par des échanges de voix entre plusieurs à la fois sans interruption ou gêne des autres participants, chaque site comprenant pour cela :
des moyens de prise et de restitution de son, comportant:
une unité d'acquisition des signaux et de numérisation;
une unité de restitution des signaux et de conversion numérique analogique;

n microphones distribués devant les participants dudit site;
p haut-parleurs distribués le long de l'écran, p étant proportionnel à une taille de l'écran;
des moyens d'adaptation au réseau consistant en une réduction de débit;
des moyens de contrôle d'un écho; et des moyens d'établissement d'une correspondance entre microphones, signal issu des microphones et haut-parleurs destinés à restituer ce signal, comportant des moyens de mémorisation d'au moins une configuration établissant les correspondances désirées.
2. Le système de visioconférence selon la revendication 1, caractérisé en ce que des dimensions de l'écran constituant le mur d'images sont choisies de manière à permettre un affichage des images de tous les sites avec une représentation des participants proche de l'échelle un.
3. Le système de visioconférence selon la revendication 1, caractérisé en ce que les moyens de prise de vues comportent un premier et un deuxième ensemble de prise de vues et en ce que les données de prise de son sont associées à l'un ou à l'autre desdits ensembles de prise de vue selon que les signaux vidéo transmis proviennent de l'un ou de l'autre desdits ensembles.
4. Le système de visioconférence selon la revendication 1, caractérisé en ce que les moyens de prise de son comportent plusieurs microphones, des moyens d'acquisition des signaux audio, des moyens de codage et de matriçage desdits signaux.
5. Le système de visioconférence selon la revendication 1, caractérisé en ce que les moyens de restitution du son comportent des moyens de décodage et dématriçage des signaux audio, des moyens de restitution des signaux audio et plusieurs haut-parleurs.
6. Le système de visioconférence selon l'une quelconque des revendications 1 à 5, caractérisé en ce que chaque ensemble de prise de vue comporte pour chaque site q caméras disposées devant les participants dudit site de manière à ce que chaque caméra se trouve dans des zones distinctes d'affichage sur l'écran des différents groupes de participants distants.
7. Le système de visioconférence selon l'une quelconque des revendications 1 à 6, dans lequel la visioconférence est réalisée entre les N sites, caractérisé en ce que le nombre q de caméras par site est au moins égal à 2 pour reconstituer des effets de perspective de prise de vue.
8. Le système de visioconférence selon l'une quelconque des revendications 1 à 6, dans lequel la visioconférence est réalisée entre uniquement deux sites distants, caractérisé en ce qu'une première caméra réalise une prise de vue partielle d'un site local comprenant un premier ensemble de participants, en ce qu'une seconde autre caméra réalise une prise de vue partielle du site local comprenant un deuxième ensemble de participants, et en ce que les deux images sont juxtaposées pour permettre la visualisation de l'ensemble des participants.
9. Le système de visioconférence selon l'une quelconque des revendications 1 à 8, dans lequel plusieurs caméras sont utilisées pour les prises de vues, caractérisé en ce que lesdites caméras sont placées sous les images projetées.
10. Le système de visioconférence selon l'une quelconque des revendications 1 à 9, caractérisé en qu'il comporte en outre plusieurs projecteurs vidéo ou rétroprojecteurs du type tubes cathodiques ou à cristaux liquides pour obtenir une restitution des images à
l'échelle proche de 1.
11. Le système de visioconférence selon l'une quelconque des revendications 1 à 10, caractérisé en ce qu'il comporte des moyens de traitement d'image pour chaque site aptes à obtenir une juxtaposition ou superposition des images reçues des sites distants pour permettre l'affichage de toutes les images sur l'écran.
12. Le système de visioconférence selon l'une quelconque des revendications 1 à 11, dans lequel les sites sont reliés directement par un réseau de transmission (R) haut débit, ou indirectement à travers un pont de visioconférence ou par réseau et pont de visioconférence.
13. Le système de visioconférence selon l'une quelconque des revendications 1 à 12, caractérisé en ce que les moyens de traitement comportent :
une unité de traitement et de gestion de type micro-ordinateur ou station de travail;
des codeurs-décodeurs vidéo et des codeurs-décodeurs audio pilotés par l'unité de traitement; et des interfaces d'adaptation à la transmission pour ledit réseau.
14. Le système de visioconférence selon la revendication 13, caractérisé en ce que le réseau est un réseau de transmission en mode de transfert asynchrone de type ATM, en ce que les interfaces de transmission pour les signaux audiovisuel sont des interfaces de type AAL1 et en ce que les interfaces de transmission pour les signaux de pilotage de la visioconférence entre les unités de traitement sont des interfaces de type AAL5.
CA002284884A 1997-03-27 1998-03-26 Systeme de visioconference Expired - Fee Related CA2284884C (fr)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR97/03785 1997-03-27
FR9703785A FR2761562B1 (fr) 1997-03-27 1997-03-27 Systeme de visioconference
PCT/FR1998/000625 WO1998044734A1 (fr) 1997-03-27 1998-03-26 Systeme de visioconference

Publications (2)

Publication Number Publication Date
CA2284884A1 CA2284884A1 (fr) 1998-10-08
CA2284884C true CA2284884C (fr) 2006-06-13

Family

ID=9505254

Family Applications (1)

Application Number Title Priority Date Filing Date
CA002284884A Expired - Fee Related CA2284884C (fr) 1997-03-27 1998-03-26 Systeme de visioconference

Country Status (10)

Country Link
US (1) US6624841B1 (fr)
EP (1) EP0970584B1 (fr)
JP (2) JP4699574B2 (fr)
CN (1) CN1147143C (fr)
CA (1) CA2284884C (fr)
DE (1) DE69803168T2 (fr)
DK (1) DK0970584T3 (fr)
ES (1) ES2171016T3 (fr)
FR (1) FR2761562B1 (fr)
WO (1) WO1998044734A1 (fr)

Families Citing this family (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7224962B1 (en) 1997-10-03 2007-05-29 Karen Jeanne Kite Remote operational screener
FR2811501B1 (fr) * 2000-07-04 2003-06-13 France Telecom Terminal et systeme de communication
US6577333B2 (en) * 2000-12-12 2003-06-10 Intel Corporation Automatic multi-camera video composition
US6989801B2 (en) * 2001-03-22 2006-01-24 Koninklijke Philips Electronics N.V. Two-way presentation display system
US20020194606A1 (en) * 2001-06-14 2002-12-19 Michael Tucker System and method of communication between videoconferencing systems and computer systems
EP1425909A4 (fr) * 2001-08-07 2006-10-18 Polycom Inc Systeme et procede pour videoconference a haute resolution
FR2832282B1 (fr) * 2001-11-12 2004-07-30 France Telecom Systeme audiovisuel modulaire avec modules concatenables pour mettre en presence une scene locale et une scene distante
EP1454451A1 (fr) * 2001-12-15 2004-09-08 Thomson Licensing S.A. Mecanisme de selection de bande passante de videoconference
US7352809B2 (en) * 2003-02-21 2008-04-01 Polycom, Inc. System and method for optimal transmission of a multitude of video pictures to one or more destinations
US8659636B2 (en) * 2003-10-08 2014-02-25 Cisco Technology, Inc. System and method for performing distributed video conferencing
CN100484230C (zh) * 2004-01-16 2009-04-29 华为技术有限公司 控制会议电视系统中会场的方法
JP2005285091A (ja) * 2004-03-04 2005-10-13 Sony Corp 画像表示装置、情報端末装置、ネットワークシステム及びネットワーク設定方法
US20050228673A1 (en) * 2004-03-30 2005-10-13 Nefian Ara V Techniques for separating and evaluating audio and video source data
US20060075449A1 (en) * 2004-09-24 2006-04-06 Cisco Technology, Inc. Distributed architecture for digital program insertion in video streams delivered over packet networks
US7870590B2 (en) * 2004-10-20 2011-01-11 Cisco Technology, Inc. System and method for fast start-up of live multicast streams transmitted over a packet network
JP2006238330A (ja) * 2005-02-28 2006-09-07 Sony Corp 通信システムおよび通信サービス移行方法
US8457614B2 (en) 2005-04-07 2013-06-04 Clearone Communications, Inc. Wireless multi-unit conference phone
US7817180B2 (en) * 2005-04-28 2010-10-19 Apple Inc. Video processing in a multi-participant video conference
US7692682B2 (en) * 2005-04-28 2010-04-06 Apple Inc. Video encoding in a video conference
US7899170B2 (en) * 2005-04-28 2011-03-01 Apple Inc. Multi-participant conference setup
US7949117B2 (en) * 2005-04-28 2011-05-24 Apple Inc. Heterogeneous video conferencing
US7864209B2 (en) * 2005-04-28 2011-01-04 Apple Inc. Audio processing in a multi-participant conference
US8861701B2 (en) * 2005-04-28 2014-10-14 Apple Inc. Multi-participant conference adjustments
US7612793B2 (en) * 2005-09-07 2009-11-03 Polycom, Inc. Spatially correlated audio in multipoint videoconferencing
US7680047B2 (en) * 2005-11-22 2010-03-16 Cisco Technology, Inc. Maximum transmission unit tuning mechanism for a real-time transport protocol stream
US8624975B2 (en) * 2006-02-23 2014-01-07 Robert Bosch Gmbh Audio module for a video surveillance system, video surveillance system and method for keeping a plurality of locations under surveillance
US7965771B2 (en) 2006-02-27 2011-06-21 Cisco Technology, Inc. Method and apparatus for immediate display of multicast IPTV over a bandwidth constrained network
US8760485B2 (en) * 2006-03-02 2014-06-24 Cisco Technology, Inc. System and method for displaying participants in a videoconference between locations
US8218654B2 (en) 2006-03-08 2012-07-10 Cisco Technology, Inc. Method for reducing channel change startup delays for multicast digital video streams
US20070263824A1 (en) * 2006-04-18 2007-11-15 Cisco Technology, Inc. Network resource optimization in a video conference
US7692680B2 (en) 2006-04-20 2010-04-06 Cisco Technology, Inc. System and method for providing location specific sound in a telepresence system
US8326927B2 (en) * 2006-05-23 2012-12-04 Cisco Technology, Inc. Method and apparatus for inviting non-rich media endpoints to join a conference sidebar session
US20070279483A1 (en) * 2006-05-31 2007-12-06 Beers Ted W Blended Space For Aligning Video Streams
CN100442837C (zh) * 2006-07-25 2008-12-10 华为技术有限公司 一种具有声音位置信息的视频通讯系统及其获取方法
US8358763B2 (en) * 2006-08-21 2013-01-22 Cisco Technology, Inc. Camping on a conference or telephony port
US8031701B2 (en) 2006-09-11 2011-10-04 Cisco Technology, Inc. Retransmission-based stream repair and stream join
FR2908583B1 (fr) * 2006-11-10 2009-04-24 France Telecom Systeme d'interaction collaborative autour d'objets partages, par fusion d'images
FR2908584A1 (fr) * 2006-11-10 2008-05-16 France Telecom Systeme d'interaction collaborative autour d'objets partages, par integration d'images
US7693190B2 (en) * 2006-11-22 2010-04-06 Cisco Technology, Inc. Lip synchronization for audio/video transmissions over a network
US8085290B2 (en) * 2006-12-06 2011-12-27 Cisco Technology, Inc. System and method for displaying a videoconference
US8121277B2 (en) * 2006-12-12 2012-02-21 Cisco Technology, Inc. Catch-up playback in a conferencing system
FR2910770A1 (fr) * 2006-12-22 2008-06-27 France Telecom Dispositif pour permettre une communication par visioconference et procede de communication associe.
US8769591B2 (en) 2007-02-12 2014-07-01 Cisco Technology, Inc. Fast channel change on a bandwidth constrained network
NO20071401L (no) * 2007-03-16 2008-09-17 Tandberg Telecom As System og arrangement for naturtro videokommunikasjon
US20080253369A1 (en) 2007-04-16 2008-10-16 Cisco Technology, Inc. Monitoring and correcting upstream packet loss
US8477177B2 (en) * 2007-08-10 2013-07-02 Hewlett-Packard Development Company, L.P. Video conference system and method
US8289362B2 (en) * 2007-09-26 2012-10-16 Cisco Technology, Inc. Audio directionality control for a multi-display switched video conferencing system
CN101132516B (zh) * 2007-09-28 2010-07-28 华为终端有限公司 一种视频通讯的方法、系统及用于视频通讯的装置
JP2009118316A (ja) * 2007-11-08 2009-05-28 Yamaha Corp 音声通信装置
US20090164575A1 (en) * 2007-11-26 2009-06-25 Haivision Systems Inc. Method and system for the establishment of complex network telepresence conference
KR100947027B1 (ko) * 2007-12-28 2010-03-11 한국과학기술원 가상음장을 이용한 다자간 동시 통화 방법 및 그 기록매체
US8787153B2 (en) 2008-02-10 2014-07-22 Cisco Technology, Inc. Forward error correction based data recovery with path diversity
US20110012988A1 (en) * 2008-03-17 2011-01-20 Gorzynski Mark E Telepresence System
EP2342894A4 (fr) * 2008-11-04 2013-12-25 Hewlett Packard Development Co Réglage d'une position de fenêtre vidéo par rapport à une position de caméra vidéo
CN101534413B (zh) 2009-04-14 2012-07-04 华为终端有限公司 一种远程呈现的系统、装置和方法
US8860775B2 (en) 2009-04-14 2014-10-14 Huawei Device Co., Ltd. Remote presenting system, device, and method
US8301697B2 (en) * 2009-06-16 2012-10-30 Microsoft Corporation Adaptive streaming of conference media and data
EP2352290B1 (fr) * 2009-12-04 2012-11-21 Swisscom AG Méthode et dispositif pour aligner des signaux audio et vidéo pendant une vidéconférence
US8433755B2 (en) 2010-04-07 2013-04-30 Apple Inc. Dynamic designation of a central distributor in a multi-participant conference
US8717404B2 (en) * 2010-04-27 2014-05-06 Lifesize Communications, Inc. Recording a videoconference based on recording configurations
CN104038725B (zh) * 2010-09-09 2017-12-29 华为终端有限公司 多屏视频会议中对与会者图像显示进行调整的方法及装置
US8711736B2 (en) 2010-09-16 2014-04-29 Apple Inc. Audio processing in a multi-participant conference
GB2484944A (en) * 2010-10-27 2012-05-02 David Roger Sherriff Mimic video conference meeting place
US9015555B2 (en) 2011-11-18 2015-04-21 Cisco Technology, Inc. System and method for multicast error recovery using sampled feedback
US9232183B2 (en) * 2013-04-19 2016-01-05 At&T Intellectual Property I, Lp System and method for providing separate communication zones in a large format videoconference
WO2015178949A1 (fr) * 2014-05-19 2015-11-26 Tiskerling Dynamics Llc Utilisation de la localisation d'un utilisateur proche dans un flux video pour regler des parametres audio d'un systeme eloigne
KR101685466B1 (ko) * 2014-08-28 2016-12-12 삼성에스디에스 주식회사 다자간 영상 회의 서비스의 참여자 확장 방법
CN105898185A (zh) * 2014-11-19 2016-08-24 杜比实验室特许公司 调节视频会议系统中的空间一致性
JP6507049B2 (ja) * 2015-06-30 2019-04-24 Necネッツエスアイ株式会社 映像システム
JP6284505B2 (ja) 2015-06-30 2018-02-28 Necネッツエスアイ株式会社 コミュニケーションシステム及びコミュニケーション方法
CN107333117B (zh) * 2016-04-29 2022-10-28 中兴通讯股份有限公司 投影设备、会议系统及投影设备控制方法
US10587978B2 (en) * 2016-06-03 2020-03-10 Nureva, Inc. Method, apparatus and computer-readable media for virtual positioning of a remote participant in a sound space
EP3465392B1 (fr) 2016-06-06 2021-02-17 Nureva Inc. Entrée de commandes tactiles et vocales à corrélation temporelle
EP4243013A3 (fr) 2016-06-06 2023-11-08 Nureva Inc. Procédé, appareil et support lisible par ordinateur pour une interface tactile et vocale avec emplacement audio
CN107333094A (zh) * 2017-08-07 2017-11-07 西安万像电子科技有限公司 会议系统及显示处理方法、装置
CN109547734A (zh) * 2019-01-02 2019-03-29 姚树财 一种融入式vr视频会议远程呈现装置及系统
EP3926442A1 (fr) 2020-06-19 2021-12-22 Brainbox GmbH Procédé de vidéo conférence et système de vidéo conférence
US11792353B2 (en) * 2020-12-07 2023-10-17 Avaya Management L.P. Systems and methods for displaying users participating in a communication session
KR102326212B1 (ko) * 2021-05-25 2021-11-12 김우영 비대면 온오프라인 화상회의 시스템
US11758089B2 (en) * 2021-08-13 2023-09-12 Vtech Telecommunications Limited Video communications apparatus and method

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB1438293A (en) * 1972-09-28 1976-06-03 Post Office Television system for transmitting two or more pictures along a common communication channel
FR2484747A1 (fr) * 1980-06-11 1981-12-18 Faye Andre Procede et dispositif pour etablir des communications bidirectionnelles et/ou multidirectionnelles entre differentes personnes regroupees en differentes stations geographiquement eloignees et reliees entre elles par des lignes telephoniques
US5206721A (en) * 1990-03-08 1993-04-27 Fujitsu Limited Television conference system
FR2674090A1 (fr) * 1991-03-15 1992-09-18 Video Scoper France Procede pour generer simultanement un ensemble d'images video sur un support de visualisation, et systemes pour sa mise en óoeuvre.
US5280540A (en) * 1991-10-09 1994-01-18 Bell Communications Research, Inc. Video teleconferencing system employing aspect ratio transformation
US5335011A (en) * 1993-01-12 1994-08-02 Bell Communications Research, Inc. Sound localization system for teleconferencing using self-steering microphone arrays
JP3305037B2 (ja) * 1993-04-07 2002-07-22 富士通株式会社 多地点制御装置、テレビ会議端末装置及び多地点テレビ会議システム
US5818616A (en) * 1993-08-23 1998-10-06 Canon Kabushiki Kaisha Optical communication apparatus and conference system
US5548346A (en) * 1993-11-05 1996-08-20 Hitachi, Ltd. Apparatus for integrally controlling audio and video signals in real time and multi-site communication control method
JPH07135646A (ja) * 1993-11-11 1995-05-23 Nec Eng Ltd テレビ会議システム
US5533021A (en) * 1995-02-03 1996-07-02 International Business Machines Corporation Apparatus and method for segmentation and time synchronization of the transmission of multimedia data
US5793415A (en) * 1995-05-15 1998-08-11 Imagetel International Inc. Videoconferencing and multimedia system
EP0765084A3 (fr) * 1995-09-21 1997-10-15 At & T Corp Système automatique de poursuite vidéo

Also Published As

Publication number Publication date
FR2761562A1 (fr) 1998-10-02
FR2761562B1 (fr) 2004-08-27
CA2284884A1 (fr) 1998-10-08
CN1147143C (zh) 2004-04-21
DE69803168T2 (de) 2002-08-22
EP0970584A1 (fr) 2000-01-12
JP4699574B2 (ja) 2011-06-15
CN1257631A (zh) 2000-06-21
DE69803168D1 (de) 2002-02-21
DK0970584T3 (da) 2002-04-22
JP4885928B2 (ja) 2012-02-29
ES2171016T3 (es) 2002-08-16
JP2009081861A (ja) 2009-04-16
US6624841B1 (en) 2003-09-23
JP2001517395A (ja) 2001-10-02
WO1998044734A1 (fr) 1998-10-08
EP0970584B1 (fr) 2002-01-02

Similar Documents

Publication Publication Date Title
CA2284884C (fr) Systeme de visioconference
EP2622853B1 (fr) Système de visioconférence bidirectionnel
US6466248B1 (en) Videoconference recording
EP2352290B1 (fr) Méthode et dispositif pour aligner des signaux audio et vidéo pendant une vidéconférence
JP2001517395A5 (fr)
US20220225050A1 (en) Head tracked spatial audio and/or video rendering
EP1444827A1 (fr) Systeme audiovisuel modulaires pour met tre en presence une scene locale et une scene distante
FR2811501A1 (fr) Terminal et systeme de communication
EP3721248B1 (fr) Traitement de données d'une séquence vidéo pour un zoom sur un locuteur détecté dans la séquence
CN1745584A (zh) 用于增加内容显示的方法和系统
EP1088452B1 (fr) Systeme de visioconference multipoints par satellite
Schreer et al. Media production, delivery and interaction for platform independent systems: format-agnostic media
WO2011087356A2 (fr) Visioconférence utilisant une caméra panoramique unique
US20230283976A1 (en) Device and rendering environment tracking
US20230254660A1 (en) Head tracking and hrtf prediction
Thomas et al. State‐of‐the‐Art and Challenges in Media Production, Broadcast and Delivery
WO2023150486A1 (fr) Rendu audio et/ou visuel commandé par geste
Naemura et al. Multiresolution stereoscopic immersive communication using a set of four cameras
CN116095295A (zh) 一种全景多屏互动数字展示系统
Kropp et al. Format-Agnostic approach for 3d audio
FR2711874A1 (fr) Terminal de télécommunications visuelles et sonores.
Gräff et al. Immersive High Quality Communication.
FR2722356A1 (fr) Terminal de communication audiovisuelle de type visiophone
FR2834603A1 (fr) Procede et dispositif de telediffusion de signaux contenant au moins une composante image grand angle brute non corrigee, dispositif et ligne de traitement locaux de ces signaux diffuses

Legal Events

Date Code Title Description
EEER Examination request
MKLA Lapsed