EP0719070A1 - Sound pick-up device, comprising a video system for the adjustment of parameters and process for adjusting - Google Patents

Sound pick-up device, comprising a video system for the adjustment of parameters and process for adjusting Download PDF

Info

Publication number
EP0719070A1
EP0719070A1 EP95402816A EP95402816A EP0719070A1 EP 0719070 A1 EP0719070 A1 EP 0719070A1 EP 95402816 A EP95402816 A EP 95402816A EP 95402816 A EP95402816 A EP 95402816A EP 0719070 A1 EP0719070 A1 EP 0719070A1
Authority
EP
European Patent Office
Prior art keywords
sound
values
parameters
coefficients
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP95402816A
Other languages
German (de)
French (fr)
Other versions
EP0719070B1 (en
Inventor
Yves Grenier
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
France Telecom SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by France Telecom SA filed Critical France Telecom SA
Publication of EP0719070A1 publication Critical patent/EP0719070A1/en
Application granted granted Critical
Publication of EP0719070B1 publication Critical patent/EP0719070B1/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones

Definitions

  • the invention relates to a sound recording device with which a video pointing system has been associated.
  • This device can be particularly useful in certain applications and in particular during conferences, concerts or any other event deserving of perfect quality sound recording.
  • the device according to the invention makes it possible to simultaneously and independently capture the sounds coming from several sound sources, without having to approach the sensors close to these sources, while giving the auditory impression that the sound is picked up near each source. For this, it reduces the reverberation of the sound as well as the level of ambient noise.
  • These devices include networks of sensors, a control unit using in particular filters for processing the signals received by the sensors, and means for adjusting the parameters characteristic of the sound recording.
  • Patent EP 0 381 498 further describes a sound pickup device comprising a circuit for changing the coefficients of the digital filters which makes it possible to vary, arbitrarily, the directional characteristics of the sound reception channels.
  • the present invention overcomes this problem. Its object is in fact a device comprising a network of sensor elements, a control unit using in particular filters for processing the signals received by the sensors, a camera and a video screen.
  • the camera provides a video signal to the screen corresponding to the image of the area where the sound sources are located from which the sound is captured.
  • the video screen for its part, makes it possible to visualize, at the same time, the sound sources, filmed by the camera, and the variations of the characteristic parameters of each of the sound reception channels. Thus, a very precise adjustment of the parameters is carried out, taking into account the position and the size of the sound sources.
  • a more particular subject of the invention is a device for taking sounds, comprising a network of sensors, a control unit and means for adjustment of the characteristic parameters of the sound recording, mainly characterized in that it further comprises a video camera, a video screen which displays a first video image, corresponding to the signal from the camera, and means for coupling the screen with means for adjusting the characteristic parameters of each of the sound reception channels.
  • These coupling means make it possible to produce, for each of the sound reception channels, another video image, showing variations in the characteristic parameters, and to superimpose this image on the first video image, so as to control the adjustment of these parameters.
  • the optical field of a camera 100 covers the entire area where there are sound sources from which the device picks up sounds.
  • the video signal from the camera is then transmitted to a video screen 200 which displays a corresponding first video image.
  • the concept of screen covers any type of screen such as, for example, the screen of a video monitor.
  • the camera supplies, on the other hand, a value of its focal length to a control unit 300, this value is useful for performing angle calculations which will be described in more detail in the following.
  • adjustment means 400 make it possible to adjust the characteristic parameters of each of the sound reception channels.
  • the signal from these adjustment means 400 is transmitted to coupling means 500 of the screen 200 to the adjustment means 400.
  • the coupling means 500 make it possible to produce, for each of the sound reception channels, another video image. and superimpose it on the first image. This superimposition of images makes it possible to perform a precise adjustment of the characteristic parameters of each sound reception channel, and to control the variations of this adjustment with respect to the position and size of the sound sources from which the device picks up the sounds.
  • the signal representing the values of the adjustment parameters is also transmitted to the control unit 300 which has in particular the task of filtering the signals received by the network 600 of sensors, and of updating, periodically, the coefficients of the filters.
  • Figure 2 provides a more detailed diagram of a device according to the invention.
  • the network 600 of sensors comprises a number M of sensors 610 having the task of capturing the sounds coming from several sound sources and of transmitting the corresponding signals to a control unit 300. This control unit then processes these signals, in particular by filtering.
  • the number M of sensors 610 is preferably at least equal to 2 and the number m associated with each sensor 610 therefore varies from 1 to M.
  • the control unit To be able to process the signals received by the M sensors 610, the control unit must also know the values of the characteristic parameters of each sound reception channel. This is why signals, corresponding to the values of these parameters, are sent from the network 400 of adjustment means to the control unit.
  • This network 400 comprises a number R of adjustment means 410.
  • Each of these adjustment means 410 of the parameters characteristic of the sound pickup corresponds to a sound reception channel.
  • the number R of adjusting means 410, and consequently the number of sound reception channels, is preferably at least equal to 1 and the number r associated with each of these means therefore varies from 1 to R.
  • each channel r for receiving sound is associated with an output 710 where the signals are available.
  • means 500 of the video screen 200 are introduced into the structure of the device to the adjustment means 400.
  • These coupling means 500 advantageously comprise, for each of the means 410 for adjusting the parameters of each of the sound reception channels, a video generator 510 and a video mixer 520.
  • the video generator 510 makes it possible to transform the signal from of the corresponding adjustment means, into a video signal.
  • the mixer 520 makes it possible to mix, between them, the signals coming from the video generators, and to also mix them with the signal coming from the camera.
  • the signal from the last video mixer is then sent to the screen 200.
  • FIG. 3 illustrates the construction of a sensor 610.
  • a sensor comprises a microphone 611, a preamplifier 612, a low-pass filter 613 and an analog-digital converter 614.
  • the signal picked up by the microphone 611 is injected into a preamplifier 612 then is filtered by the low-pass filter 613 to eliminate the spectral aliasing that could be introduced by the analog-digital converter 614.
  • Each sensor receives a clock signal which regulates the frequency sampling of the converter 614.
  • the sampled signal is quantified by the converter 614 and is transmitted, in digital form, to the control unit which will process it.
  • FIG. 4 A preferred diagram of the realization of a means of adjustment, 410, of the parameters corresponding to a reception channel r is illustrated in FIG. 4.
  • a command 411 makes it possible to set the values of the characteristic parameters of the channel r for receiving the corresponding sound.
  • This control can be mechanical or electronic. This will be, for example, a joystick, a rotary or linear button, a mouse acting on a potentiometer.
  • Each of the parameters is converted into a digital value, at a fixed rate, by an analog-digital converter 412.
  • These digital values are advantageously between 1 and a limit value.
  • the sampling rate of the values will preferably be lower than the sampling rate in the sensors 610.
  • a value of 25 Hz is chosen.
  • the set of parameter values is transmitted to the control unit 300 so that it proceeds to the processing of the signals.
  • the abscissa of the point aimed on the screen is in one-to-one relation with the horizontal angle of sight noted a (r), and the ordinate of the point aimed on the screen is in one-to-one relationship with the vertical angle of sight noted b (r).
  • the width and height of the video screen correspond to the value of the focal length of the camera.
  • the camera 100 supplies the value of its focal length to the control unit 300, so that the latter can correspond values of angles to the abscissa and to the ordinate of the point targeted on the screen, which is identified in an arbitrary system of units such as, for example, the percentage.
  • the control unit knowing the value of the focal length of the camera, that is to say the value of the maximum opening angle corresponding to the width of the screen, defined by the value 100%; can, by a simple report, determine the value of the horizontal viewing angle, corresponding to any value of the abscissa of a target point on the screen.
  • A the maximum number of values corresponding to a (r)
  • B the maximum number of values corresponding to b (r)
  • C the maximum number of values corresponding to c (r)
  • D the number maximum of values corresponding to d (r)
  • P the maximum number of values corresponding to p (r).
  • a user advantageously fixes the value of a parameter, at least, among all these parameters.
  • the values of the parameters which are not set by the user advantageously receive a default value, or else a value deduced from another parameter.
  • the value taken can be equal to the width c (r) of the reception channel r.
  • the control unit 300 makes it possible to process the signals coming from the sensors 610. It also processes the signals, coming from the adjustment means, representing the values of the parameters. These parameter values influence the calculation of the values of the coefficients of the digital filters 310, that is to say on the directional characteristics of the sound reception channels. Consequently, the values of the parameters of the reception channels play an important role in the processing of the signals coming from the sensors, since these signals will not be treated in the same way according to the directional characteristic which one fixes for each reception channel.
  • the processing which must be carried out on the signals coming from the M sensors 610 consists in forming, at each instant n, the R signals at the output of the focused channels. These signals will be available at outputs 710.
  • the signals received by the M sensors and converted into digital signals, by the analog-digital converters 614, at the sampling instants n, are denoted x (m, n).
  • the signal s (r, n) in the channel r is supplied, in digital form, by the control unit 300 to the corresponding output 710.
  • a variant would consist in supplying the corresponding output 710, the signal s (r, n) in the channel r, in analog form, after passing through a digital-analog converter.
  • the processing which must be carried out on the signals coming from the R adjustment means consists in modifying, at each instant n, the values of the coefficients of the filters in order to modify the directional characteristics of the sound reception channels.
  • the coefficients h (q, r, m, n) of the filter r in the path r, for the sensor m, depend on the instant n.
  • the coefficients are updated on the basis of information, that is to say on the basis of the parameter values acquired by the control unit 300 from the R adjustment means 400 and transmitted every N samples to the unit. control 300.
  • the coefficients are updated at time n o , they will be updated again at time n o + N.
  • a method of adjusting the characteristic parameters of the sound recording furthermore consists in reconstituting, by calculation, the values of the coefficients of the filters, between these two instants n o and n o + N.
  • the control unit 300 calculates at all times n the values of the coefficients h (q, r, m, n) of the filters 310 from the values of parameters received, at the sampling rate of the converters 412, of the R means of settings 410.
  • the control unit determines, for each channel r of reception of the sound, the values of the coefficients h (q, r, m, n o + N) of the filters, which serve at interpolate, using equation (3), the values of the coefficients h (q, r, m, n), between the present time n o and the time n o + N where the following information is received.
  • the values of the coefficients are therefore interpolated over time, at each sampling instant, between these two values, n o and n o + N, which are modified at a regular rate but, preferably, slower than the sampling frequency .
  • equations (1) and (2) can be applied twice. Indeed, these equations are applied for the first time for filters with coefficients h (q, r, m, n o ), which gives the following signals: y o (r, m, n) and s o (r, n ). These equations are applied a second time for filters of coefficients h (q, r, m, n o + N) which gives the following signals: y N (r, m, n) and s N (r, n).
  • s (r, n) [(nn o ) / N] S NOT (r, n) + [(n o + Nn) / N] s o (r, n)
  • Another variant of this method would consist in interpolating the values of the coefficients of the filters 310, not only in time but also in space.
  • the filter coefficients would also be interpolated between two positions, displayed on the screen, corresponding to the renewal of the filter coefficients.
  • the values of the coefficients of the filters 310 are a function of the settings, given by the manipulator through the commands 411 of the adjusting means 410, and described by the parameters a (r), b (r), c (r), d (r ), p (r).
  • F (a, b, c, d, p) this function. It provides, for each quintuplet value (a, b, c, d, p) of parameters, a vector QxM representing the Q coefficients of the filters, corresponding to the R channels for receiving the sound of the M sensors, when the settings are (a, b, c, d, p).
  • the control unit applies R times this function F to obtain the values of the coefficients of the filters corresponding to the R reception channels formed.
  • a first step consists in determining the coordinates of the position of an actual sound source and the coordinates of the positions of fictitious sound sources taken as a reference.
  • the coordinates of a real sound source we determine, for example, the horizontal angle u a of the beam centered on the direction defined by a, the vertical angle v b of the beam centered on the direction defined by b , the horizontal angles, u a1 and u a2 , which form the horizontal limits of the beam centered on the direction defined by a and of width defined by c, and finally, the vertical angles, v b1 and v b2 which form the vertical limits of beam centered on the direction defined by b and of width defined by d.
  • the origin in three-dimensional space is advantageously defined by the position of the camera 100.
  • the coordinates of the positions of the reference sources are then calculated from their expression which is as follows: [pCos (u k ) Cos (v k ), pcos (u k ) Cos (v k ), psin (u k )]
  • the distance z (k, m) between the source and the sensor is calculated.
  • the transfer functions are also calculated from the reference sources to the sensors, for the reference frequencies.
  • This transfer function makes it possible, in a second step, to establish the expressions of the gains obtained, for the fictitious sounds coming from reference sound sources, and to fix the gains, which one wishes to obtain, for these same fictitious sounds.
  • the filter whose coefficients are f (m, q)
  • the sound from a source, located at a position k will be received, for a frequency f i , with a gain g (k, f i ) which is determined according to the equation:
  • q o f (m, q) t (m, k, f i ) e -j2 ⁇ f i q
  • the desired gains g s (k, f i ) corresponding to the sounds originating from the sound sources situated at the reference positions are fixed, this for reference frequencies f i .
  • a third step an expression of the difference between the gains obtained and the desired gains is established.
  • This difference represents an error, which can be reduced to a threshold value, which has been fixed, using, for example, the least squares calculation method.
  • This equation (7) represents a sum of squares and double products. This means that the criterion given by equation (7) is quadratic in g (k, f i ). Likewise the criterion given by equation (6) is quadratic in f (m, q). The reduction of the error to a threshold value leads to a system in these unknowns f (m, q), which admits a unique solution. The solution of F is obtained by derivation of equation (7) with respect to the values of the coefficients f (m, q).
  • the values of the filter coefficients can be determined from the expression of the function F thus found. To be able to determine the values of these coefficients, there are two possibilities.
  • the values of the coefficients are determined, before any manipulation, from the function F and for fixed values of parameters, then they are stored in a table.
  • This table can, for example, be a two-dimensional table comprising QxM rows and AxBxCxDxP columns.
  • quintuplets (a, b, c, d, p) of parameters for example, define the indices of the columns and the numbers q of the coefficients of the filters corresponding to each sensor m define the indices of the lines.
  • the dimension of the table can be higher if we decide to separate the quintuplets into 2, 3, 4, or 5 distinct parameters and if we decide to distinguish the Q coefficients and the M sensors to store them in rows and columns separated.
  • This memorization of the values of the coefficients in a table makes it possible to change the values of the coefficients more quickly during the manipulation of sound recording, for fixed values of parameters.
  • the coefficients will change values only when the values of the quintuplets of parameters, which are fixed and stored in the table, are reached. Between these quintuplet values, corresponding to the updating of filters, the values of the coefficients could, for example, be interpolated.
  • the values of the coefficients of each filter are determined in real time, from the expression of the function F and for values of parameters varying continuously.
  • the coefficients of the filters are preferably updated at regular rate and their values are interpolated according to equation (3) previously established.
  • the orientation of the camera and that of the sensor network must be connected, by any means, in order to avoid any discrepancy between, on the one hand, the image representing the position of the sound sources, and on the other hand, the images showing the variation of the characteristic parameters of the sound reception channels. In this way, one can visualize very precisely the variation of the parameters compared to the position and the size of the sound sources.
  • Another embodiment of a device according to the invention therefore relates to fixing the camera 100 relative to the network 600 of sensors.
  • the camera 100 is advantageously fixed on the same frame as the network 600 of sensors so that its pointing is strictly invariant with respect to the position of the sensors.
  • a variant of this system consists in not fixing the camera 100 on the same frame as the network 600 of sensors.
  • the sensor network must have a fixed position in space and the camera must also have a fixed position and orientation in space to obtain a pointing of the sound sources. which is invariant with respect to the positions of the sensors.
  • the device it is possible to add a remote control making it possible to remotely adjust the video pointing system.
  • a user does not necessarily have access to the video system, so that he cannot view the settings made.
  • a hearing feedback system it is also preferable to equip the device with a hearing feedback system, allowing the user to make the adjustments directly, using the audible signals reaching him.
  • Hearing feedback is for example achieved by means of an earpiece placed in the user's ear canal and connected to the device by a cable, or better, via a Hertzian channel.

Abstract

The equipment includes an array (600) of sensors (610) which pick-up sounds from several sources, and corresp. signals are transmitted to a control unit (300) where the coeffts. of the digital filters (310) are affected by reception channel characteristic parameters evaluated and adjusted (410) individually. The variations of these parameters are represented by an image produced by video signal generators (510) and mixers (520) for superposition on the image displayed on the screen (200) from the video camera (100). The latter communicates its focal distance to the control unit for relating horizontal and vertical angles to abscissae and ordinates.

Description

L'invention concerne un dispositif de prise de sons auquel on a associé un système vidéo de pointage.The invention relates to a sound recording device with which a video pointing system has been associated.

Ce dispositif peut être particulièrement utile dans certaines applications et notamment lors de conférences, concerts ou tout autre évènement méritant une prise de sons de parfaite qualité.This device can be particularly useful in certain applications and in particular during conferences, concerts or any other event deserving of perfect quality sound recording.

Le dispositif selon l'invention permet de capter simultanément et indépendamment les sons provenants de plusieurs sources sonores, sans avoir à approcher les capteurs à proximité de ces sources, tout en donnant l'impression auditive que le son est capté près de chaque source. Pour cela, il permet de réduire la réverbération du son ainsi que le niveau du bruit ambiant.The device according to the invention makes it possible to simultaneously and independently capture the sounds coming from several sound sources, without having to approach the sensors close to these sources, while giving the auditory impression that the sound is picked up near each source. For this, it reduces the reverberation of the sound as well as the level of ambient noise.

De nombreux dispositifs de prise de sons ont déjà été élaborés en vue de capter des sons sans avoir à approcher les capteurs à proximité des sources.Many sound recording devices have already been developed with a view to picking up sounds without having to approach the sensors close to the sources.

Ces dispositifs comprennent des réseaux de capteurs, une unité de contrôle utilisant notamment des filtres pour le traitement des signaux reçus par les capteurs, et des moyens de réglage des paramètres caractéristiques de la prise de sons.These devices include networks of sensors, a control unit using in particular filters for processing the signals received by the sensors, and means for adjusting the parameters characteristic of the sound recording.

Cependant, de tels dispositifs ne permettent pas de régler indépendamment les paramètres caractéristiques de chacune des voies de réception du son, afin de capter séparément les sons issus de plusieurs sources sonores. On ne peut pas, non plus, contrôler les variations de ces paramètres par rapport à la position et à la taille des sources sonores à partir desquelles les sons sont captés.However, such devices do not make it possible to independently adjust the characteristic parameters of each of the sound reception channels, in order to separately capture the sounds coming from several sound sources. Nor can one control the variations of these parameters with respect to the position and size of the sound sources from which the sounds are picked up.

Le brevet EP 0 381 498 décrit, en outre, un dispositif de prise de sons comprenant un circuit de changement des coefficients des filtres numériques qui permet de faire varier, arbitrairement, les caractéristiques directionnelles des voies de réception du son.Patent EP 0 381 498 further describes a sound pickup device comprising a circuit for changing the coefficients of the digital filters which makes it possible to vary, arbitrarily, the directional characteristics of the sound reception channels.

Toutefois, lors du changement des coefficients des filtres, de petites perturbations sont audibles et nuisent à la qualité du son. Ces perturbations sont dues au changement brutal du jeu de paramètres caractéristiques de la prise de son, qui est régit par le changement des coefficients des filtres.However, when changing the filter coefficients, small disturbances are audible and affect the sound quality. These disturbances are due to the sudden change in the set of parameters characteristic of the sound recording, which is governed by the change in the coefficients of the filters.

Ces dispositifs ne permettent pas, en outre, d'obtenir toute la précision désirée pour le réglage des paramètres caractéristiques des voies de réception du son.These devices do not make it possible, moreover, to obtain all the precision desired for the adjustment of the parameters characteristic of the sound reception channels.

La présente invention permet de remédier à ce problème. Elle a en effet pour objet un dispositif comportant un réseau d'éléments capteurs, une unité de contrôle utilisant notamment des filtres pour le traitement des signaux reçus par les capteurs, une caméra et un écran vidéo. La caméra permet de fournir à l'écran un signal vidéo correspondant à l'image de la zone où se trouvent les sources sonores à partir desquelles le son est capté. L'écran vidéo, quant à lui, permet de visualiser, à la fois, les sources sonores, filmées par la caméra, et les variations des paramètres caractéristiques de chacune des voies de réception du son. Ainsi, on réalise un réglage très précis des paramètres en tenant compte de la position et de la taille des sources sonores.The present invention overcomes this problem. Its object is in fact a device comprising a network of sensor elements, a control unit using in particular filters for processing the signals received by the sensors, a camera and a video screen. The camera provides a video signal to the screen corresponding to the image of the area where the sound sources are located from which the sound is captured. The video screen, for its part, makes it possible to visualize, at the same time, the sound sources, filmed by the camera, and the variations of the characteristic parameters of each of the sound reception channels. Thus, a very precise adjustment of the parameters is carried out, taking into account the position and the size of the sound sources.

L'invention a plus particulièrement pour objet, un dispositif de prise de sons, comportant un réseau de capteurs, une unité de contrôle et des moyens de réglage des paramètres caractéristiques de la prise de sons, principalement caractérisé en ce qu'il comprend en outre une caméra vidéo, un écran vidéo qui affiche une première image vidéo, correspondant au signal issu de la caméra, et des moyens de couplage de l'écran aux moyens de réglage des paramètres caractéristiques de chacune des voies de réception du son. Ces moyens de couplage permettent de réaliser, pour chacune des voies de réception du son, une autre image vidéo, faisant apparaître les variations des paramètres caractéristiques, et de superposer cette image à la première image vidéo, de manière à contrôler le réglage de ces paramètres.A more particular subject of the invention is a device for taking sounds, comprising a network of sensors, a control unit and means for adjustment of the characteristic parameters of the sound recording, mainly characterized in that it further comprises a video camera, a video screen which displays a first video image, corresponding to the signal from the camera, and means for coupling the screen with means for adjusting the characteristic parameters of each of the sound reception channels. These coupling means make it possible to produce, for each of the sound reception channels, another video image, showing variations in the characteristic parameters, and to superimpose this image on the first video image, so as to control the adjustment of these parameters. .

L'invention a également pour objet un procédé de réglage des paramètres caractéristiques de la prise de sons caractérisé en ce que l'unité de contrôle réalise un traitement sur les signaux captés et sur les signaux, correspondants aux valeurs des paramètres, fournis par les moyens de réglage, comportant les étapes suivantes :

  • filtrage des signaux captés par les filtres à interpolation linéaire,
  • modification des coefficients des filtres pour chaque modification de paramètres,
  • interpolation linéaire dans le temps, à chaque instant d'échantillonnage, entre deux valeurs, correspondant au renouvellement des filtres, qui sont modifiées à cadence régulière mais plus lente que la fréquence d'échantillonnage.
The invention also relates to a method for adjusting the parameters characteristic of the sound recording, characterized in that the control unit performs processing on the signals picked up and on the signals, corresponding to the values of the parameters, supplied by the means adjustment, comprising the following steps:
  • filtering of signals picked up by filters with linear interpolation,
  • modification of the filter coefficients for each modification of parameters,
  • linear interpolation in time, at each sampling instant, between two values, corresponding to the renewal of the filters, which are modified at a regular rate but slower than the sampling frequency.

D'autres particularités et avantages de l'invention apparaîtront à la lecture de la description faite à titre d'exemple illustratif et non limitatif en référence aux figures annexées qui représentent :

  • la figure 1, une vue d'ensemble d'un dispositif selon l'invention,
  • la figure 2, un schéma plus détaillé du dispositif de la figure 1,
  • la figure 3, un schéma de réalisation d'un capteur,
  • la figure 4, un schéma de réalisation d'un moyen de réglage des paramètres caractéristiques d'une voie r de réception du son.
Other features and advantages of the invention will appear on reading the description given by way of illustrative and nonlimiting example with reference to the appended figures which represent:
  • FIG. 1, an overall view of a device according to the invention,
  • FIG. 2, a more detailed diagram of the device of FIG. 1,
  • FIG. 3, a diagram of an embodiment of a sensor,
  • FIG. 4, a diagram of an embodiment of a means for adjusting the parameters characteristic of a channel r for receiving sound.

Un mode de réalisation d'un dispositif selon l'invention sera mieux compris au regard de la figure 1 qui décrit une vue d'ensemble d'un tel dispositif.An embodiment of a device according to the invention will be better understood with reference to Figure 1 which describes an overview of such a device.

Dans un premier temps, le champ optique d'une caméra 100 couvre toute la zone où se trouvent des sources sonores à partir desquelles le dispositif capte des sons. Le signal vidéo, issu de la caméra, est alors transmis à un écran vidéo 200 qui affiche une première image vidéo correspondante. La notion d'écran couvre tout type d'écran comme, par exemple, l'écran d'un moniteur vidéo.First, the optical field of a camera 100 covers the entire area where there are sound sources from which the device picks up sounds. The video signal from the camera is then transmitted to a video screen 200 which displays a corresponding first video image. The concept of screen covers any type of screen such as, for example, the screen of a video monitor.

La caméra fournit, d'autre part, une valeur de sa focale à une unité de contrôle 300, cette valeur est utile pour effectuer des calculs d'angles qui seront décrits de façon plus détaillée dans ce qui suit.The camera supplies, on the other hand, a value of its focal length to a control unit 300, this value is useful for performing angle calculations which will be described in more detail in the following.

Dans un deuxième temps, des moyens de réglages 400 permettent de régler les paramètres caractéristiques de chacune des voies de réception du son. Le signal issu de ces moyens de réglage 400 est transmis à des moyens de couplage 500 de l'écran 200 aux moyens de réglage 400. Les moyens de couplage 500 permettent de réaliser, pour chacune des voies de réception du son, une autre image vidéo et de la superposer à la première image. Cette superposition d'images permet d'effectuer un réglage précis des paramètres caractéristiques de chaque voie de réception du son, et de contrôler les variations de ce réglage par rapport à la position et à la taille des sources sonores à partir desquelles le dispositif capte les sons.Secondly, adjustment means 400 make it possible to adjust the characteristic parameters of each of the sound reception channels. The signal from these adjustment means 400 is transmitted to coupling means 500 of the screen 200 to the adjustment means 400. The coupling means 500 make it possible to produce, for each of the sound reception channels, another video image. and superimpose it on the first image. This superimposition of images makes it possible to perform a precise adjustment of the characteristic parameters of each sound reception channel, and to control the variations of this adjustment with respect to the position and size of the sound sources from which the device picks up the sounds.

Le signal représentant les valeurs des paramètres de réglage est également transmis à l'unité de contrôle 300 qui a notamment pour tâche de filtrer les signaux reçus par le réseau 600 de capteurs, et de remettre à jour, périodiquement, les coefficients des filtres.The signal representing the values of the adjustment parameters is also transmitted to the control unit 300 which has in particular the task of filtering the signals received by the network 600 of sensors, and of updating, periodically, the coefficients of the filters.

La figure 2 fournit un schéma plus détaillé d'un dispositif conforme à l'invention.Figure 2 provides a more detailed diagram of a device according to the invention.

Le réseau 600 de capteurs comprend un nombre M de capteurs 610 ayant pour tâches de capter les sons issus de plusieurs sources sonores et de transmettre les signaux correspondants à une unité de contrôle 300. Cette unité de contrôle traite alors ces signaux, notamment par filtrage. Le nombre M de capteurs 610 est, de préférence, au moins égal à 2 et le numéro m associé à chaque capteur 610 varie par conséquent de 1 à M.The network 600 of sensors comprises a number M of sensors 610 having the task of capturing the sounds coming from several sound sources and of transmitting the corresponding signals to a control unit 300. This control unit then processes these signals, in particular by filtering. The number M of sensors 610 is preferably at least equal to 2 and the number m associated with each sensor 610 therefore varies from 1 to M.

Pour pouvoir effectuer le traitement des signaux reçus par les M capteurs 610, l'unité de contrôle doit également connaître les valeurs des paramètres caractéristiques de chaque voie de réception du son. C'est pourquoi des signaux, correspondant aux valeurs de ces paramètres, sont envoyés depuis le réseau 400 de moyens de réglage vers l'unité de contrôle. Ce réseau 400 comprend un nombre R de moyens de réglage 410. Chacun de ces moyens de réglage 410 des paramètres caractéristiques de la prise de sons correspond à une voie de réception du son. Le nombre R de moyens de réglage 410, et par conséquent le nombre de voies de réception du son, est, de préférence, au moins égal à 1 et le numéro r associé à chacun de ces moyens varie donc de 1 à R.To be able to process the signals received by the M sensors 610, the control unit must also know the values of the characteristic parameters of each sound reception channel. This is why signals, corresponding to the values of these parameters, are sent from the network 400 of adjustment means to the control unit. This network 400 comprises a number R of adjustment means 410. Each of these adjustment means 410 of the parameters characteristic of the sound pickup corresponds to a sound reception channel. The number R of adjusting means 410, and consequently the number of sound reception channels, is preferably at least equal to 1 and the number r associated with each of these means therefore varies from 1 to R.

En outre, à chaque voie r de réception du son, est associée une sortie 710 où les signaux sont disponibles.In addition, each channel r for receiving sound is associated with an output 710 where the signals are available.

Pour réaliser une superposition d'images vidéo, on introduit, dans la structure du dispositif, des moyens de couplage 500 de l'écran vidéo 200 aux moyens de reglage 400.To achieve a superimposition of video images, means 500 of the video screen 200 are introduced into the structure of the device to the adjustment means 400.

Ces moyens de couplage 500 comprennent, de manière avantageuse, pour chacun des moyens de réglage 410 des paramètres de chacune des voies de réception du son, un générateur vidéo 510 et un mélangeur vidéo 520. Le générateur vidéo 510 permet de transformer le signal, issu du moyen de réglage correspondant, en un signal vidéo. Le mélangeur 520 permet de mélanger, entre-eux, les signaux issus des générateurs vidéo, et de les mélanger également au signal issu de la caméra. Le signal issu du dernier mélangeur vidéo est alors envoyé vers l'écran 200. Ainsi, on obtient, sur la première image vidéo correspondant au signal issu de la caméra, une superposition des images faisant apparaître les variations des paramètres caractéristiques de chacune des voies de réception du son.These coupling means 500 advantageously comprise, for each of the means 410 for adjusting the parameters of each of the sound reception channels, a video generator 510 and a video mixer 520. The video generator 510 makes it possible to transform the signal from of the corresponding adjustment means, into a video signal. The mixer 520 makes it possible to mix, between them, the signals coming from the video generators, and to also mix them with the signal coming from the camera. The signal from the last video mixer is then sent to the screen 200. Thus, one obtains, on the first video image corresponding to the signal from the camera, a superposition of the images showing the variations of the characteristic parameters of each of the channels of sound reception.

La figure 3 illustre la réalisation d'un capteur 610. Un tel capteur comprend un microphone 611, un préamplificateur 612, un filtre passe-bas 613 et un convertisseur analogique-numérique 614.FIG. 3 illustrates the construction of a sensor 610. Such a sensor comprises a microphone 611, a preamplifier 612, a low-pass filter 613 and an analog-digital converter 614.

Le signal capté par le microphone 611 est injecté dans un préamplificateur 612 puis est filtré par le filtre passe-bas 613 pour éliminer le repliement spectral que pourrait introduire le convertisseur analogique-numérique 614. Chaque capteur reçoit un signal d'horloge qui règle la fréquence d'échantillonnage du convertisseur 614. Le signal échantillonné est quantifié par le convertisseur 614 et est transmis, sous forme numérique, à l'unité de contrôle qui le traitera.The signal picked up by the microphone 611 is injected into a preamplifier 612 then is filtered by the low-pass filter 613 to eliminate the spectral aliasing that could be introduced by the analog-digital converter 614. Each sensor receives a clock signal which regulates the frequency sampling of the converter 614. The sampled signal is quantified by the converter 614 and is transmitted, in digital form, to the control unit which will process it.

Un schéma préféré de la réalisation d'un moyen de réglage, 410, des paramètres correspondant à une voie r de réception est illustré sur la figure 4.A preferred diagram of the realization of a means of adjustment, 410, of the parameters corresponding to a reception channel r is illustrated in FIG. 4.

Une commande 411 permet de fixer les valeurs des paramètres caractéristiques de la voie r de réception du son correspondante. Cette commande peut être mécanique ou électronique. Ce sera, par exemple, une manette, un bouton rotatif ou linéaire, une souris agissant sur un potentiomètre.A command 411 makes it possible to set the values of the characteristic parameters of the channel r for receiving the corresponding sound. This control can be mechanical or electronic. This will be, for example, a joystick, a rotary or linear button, a mouse acting on a potentiometer.

Chacun des paramètres est converti en valeur numérique, à cadence fixe, par un convertisseur analogique-numérique 412. Ces valeurs numériques sont avantageusement comprises entre 1 et une valeur limite.Each of the parameters is converted into a digital value, at a fixed rate, by an analog-digital converter 412. These digital values are advantageously between 1 and a limit value.

La cadence d'échantillonnage des valeurs sera, de préférence, inférieure à la cadence d'échantillonnage dans les capteurs 610. On choisit, par exemple, une valeur de 25 Hz. Selon une variante, il est également possible de choisir une valeur dans la plage de fréquences comprises entre 1Hz et 50Hz.The sampling rate of the values will preferably be lower than the sampling rate in the sensors 610. For example, a value of 25 Hz is chosen. According to a variant, it is also possible to choose a value in the frequency range between 1Hz and 50Hz.

Après échantillonnage dans les convertisseurs 412, l'ensemble des valeurs des paramètres est transmis à l'unité de contrôle 300 de manière à ce qu'elle procède au traitement des signaux.After sampling in the converters 412, the set of parameter values is transmitted to the control unit 300 so that it proceeds to the processing of the signals.

Les paramètres de réglage caractéristiques de chaque voie r de réception du son, sont les suivants :

  • l'abscisse du point visé sur l'écran vidéo,
  • l'ordonnée du point visé sur l'écran,
  • la largeur de la voie r de réception formée notée c(r),
  • la hauteur de la voie r de réception formée, notée d(r),
  • la profondeur de la voie r de réception formée notée, p(r).
The characteristic adjustment parameters of each sound reception channel r are as follows:
  • the abscissa of the target point on the video screen,
  • the ordinate of the target point on the screen,
  • the width of the received reception channel r denoted c (r),
  • the height of the reception channel r formed, denoted d (r),
  • the depth of the reception channel r noted, p (r).

L'abscisse du point visé sur l'écran est en relation biunivoque avec l'angle horizontal de visée noté a(r), et l'ordonnée du point visé sur l'écran est en relation biunivoque avec l'angle vertical de visée noté b(r). La largeur et la hauteur de l'écran vidéo correspondent à la valeur de la focale de la caméra.The abscissa of the point aimed on the screen is in one-to-one relation with the horizontal angle of sight noted a (r), and the ordinate of the point aimed on the screen is in one-to-one relationship with the vertical angle of sight noted b (r). The width and height of the video screen correspond to the value of the focal length of the camera.

De ce fait, la caméra 100 fournit la valeur de sa focale à l'unité de contrôle 300, afin que cette dernière puisse faire correspondre des valeurs d'angles à l'abscisse et à l'ordonnée du point visé sur l'écran, qui est repéré dans un système d'unités arbitraire comme, par exemple, le pourcentage.As a result, the camera 100 supplies the value of its focal length to the control unit 300, so that the latter can correspond values of angles to the abscissa and to the ordinate of the point targeted on the screen, which is identified in an arbitrary system of units such as, for example, the percentage.

Ainsi, on fixe à 0%, par exemple, la valeur minimum de l'abscisse, correspondant à la valeur du point le plus à gauche sur l'écran, et on fixe à 100% la valeur maximum de l'abscisse, correspondant à la valeur du point le plus à droite sur l'écran. L'unité de contrôle connaissant la valeur de la focale de la caméra, c'est à dire la valeur de l'angle maximum d'ouverture correspondant à la largeur de l'écran, définie par la valeur 100%; peut, par un simple rapport, déterminer la valeur de l'angle horizontal de visée, correspondant à une valeur quelconque de l'abscisse d'un point visé sur l'écran.Thus, we set at 0%, for example, the minimum value of the abscissa, corresponding to the value of the leftmost point on the screen, and we set at 100% the maximum value of the abscissa, corresponding to the value of the rightmost point on the screen. The control unit knowing the value of the focal length of the camera, that is to say the value of the maximum opening angle corresponding to the width of the screen, defined by the value 100%; can, by a simple report, determine the value of the horizontal viewing angle, corresponding to any value of the abscissa of a target point on the screen.

De préférence, on définit par A, le nombre maximal de valeurs correspondantes à a(r), B le nombre maximal de valeurs correspondantes à b(r), C, le nombre maximal de valeurs correspondantes à c(r), D le nombre maximum de valeurs correspondantes à d(r) et P le nombre maximal de valeurs correspondante à p(r).Preferably, we define by A, the maximum number of values corresponding to a (r), B the maximum number of values corresponding to b (r), C, the maximum number of values corresponding to c (r), D the number maximum of values corresponding to d (r) and P the maximum number of values corresponding to p (r).

Selon un mode de mise en oeuvre de l'invention, un utilisateur fixe, de manière avantageuse, la valeur d'un paramètre, au moins, parmi tous ces paramètres. Les valeurs des paramètres qui ne sont pas fixées par l'utilisateur reçoivent, de manière avantageuse, une valeur par défaut, ou alors une valeur déduite d'un autre paramètre. Ainsi, par exemple, si la hauteur d(r) de la voie r de réception n'est pas réglée par l'utilisateur, la valeur prise peut être égale à la largeur c(r) de la voie r de réception.According to an embodiment of the invention, a user advantageously fixes the value of a parameter, at least, among all these parameters. The values of the parameters which are not set by the user advantageously receive a default value, or else a value deduced from another parameter. Thus, for example, if the height d (r) of the reception channel r is not adjusted by the user, the value taken can be equal to the width c (r) of the reception channel r.

Selon une autre variante, on considère que si un des paramètres n'est pas pertinent pour la réalisation du dispositif, sa valeur maximale et donc aussi sa valeur courante, sont fixées à 1.According to another variant, it is considered that if one of the parameters is not relevant for the production of the device, its maximum value and therefore also its current value, are fixed at 1.

L'unité de contrôle 300 permet de traiter les signaux issus des capteurs 610. Elle traite également les signaux, issus des moyens de réglage, représentant les valeurs des paramètres. Ces valeurs de paramètres influent sur le calcul des valeurs des coefficients des filtres numériques 310, c'est à dire sur les caractéristiques directionnelles des voies de réception du son. Par conséquent, les valeurs des paramètres des voies de réception jouent un rôle important dans le traitement des signaux issus des capteurs, puisque ces signaux ne seront pas traités de la même façon selon la caractéristique directionnelle que l'on fixe pour chaque voie de réception.The control unit 300 makes it possible to process the signals coming from the sensors 610. It also processes the signals, coming from the adjustment means, representing the values of the parameters. These parameter values influence the calculation of the values of the coefficients of the digital filters 310, that is to say on the directional characteristics of the sound reception channels. Consequently, the values of the parameters of the reception channels play an important role in the processing of the signals coming from the sensors, since these signals will not be treated in the same way according to the directional characteristic which one fixes for each reception channel.

Dans un premier temps, le traitement qui doit être réalisé sur les signaux provenant des M capteurs 610, consiste à former, à chaque instant n, les R signaux en sortie des voies focalisées. Ces signaux seront disponibles aux sorties 710.Firstly, the processing which must be carried out on the signals coming from the M sensors 610, consists in forming, at each instant n, the R signals at the output of the focused channels. These signals will be available at outputs 710.

Les signaux reçus par les M capteurs et convertis en signaux numériques, par les convertisseurs analogiques-numériques 614, aux instants d'échantillonnage n, sont notés x(m,n).The signals received by the M sensors and converted into digital signals, by the analog-digital converters 614, at the sampling instants n, are denoted x (m, n).

Ces signaux sont filtrés par R filtres numériques ayant un nombre Q de coefficients h(q,r,m,n), où q représente le numéro du coefficient et varie de 1 à Q, pour donner R signaux notés y(r,m,n) représentant les contributions à l'instant n du capteur m dans la voie r, selon l'équation suivante : y(r,m,n) = Σ Q q=1 h(q,r,m,n) x (m,n-q)

Figure imgb0001
These signals are filtered by R digital filters having a number Q of coefficients h (q, r, m, n), where q represents the number of the coefficient and varies from 1 to Q, to give R signals denoted y (r, m, n) representing the contributions at time n of the sensor m in the channel r, according to the following equation: y (r, m, n) = Σ Q q = 1 h (q, r, m, n) x (m, nq)
Figure imgb0001

Conformément aux structures habituelles de la formation de voies large bande, décrites par S. Haykin et T. Kesler dans l'article "Relation between the radiation pattern of an array and the two-dimensional Discrete Fourier Transform", paru dans la revue IEEE transactions on Antennas and Propagation, Volume 23, numéro 3, pages 419-420, 1975, chaque sortie s(r,n) dans une voie r à l'instant n est obtenue en faisant la somme des M signaux y(r,m,n) suivant l'équation : s(r,n) =Σ M m=i y(r,m,n)

Figure imgb0002
In accordance with the usual structures of broadband channel formation, described by S. Haykin and T. Kesler in the article "Relation between the radiation pattern of an array and the two-dimensional Discrete Fourier Transform", published in the journal IEEE transactions on Antennas and Propagation, Volume 23, number 3, pages 419-420, 1975, each output s (r, n) in a channel r at time n is obtained by summing the M signals y (r, m, n) according to the equation: s (r, n) = Σ M m = i y (r, m, n)
Figure imgb0002

Le signal s(r,n) dans la voie r, est fourni, sous forme numérique, par l'unité de contrôle 300 à la sortie 710 correspondante.The signal s (r, n) in the channel r, is supplied, in digital form, by the control unit 300 to the corresponding output 710.

Une variante consisterait à fournir à la sortie 710 correspondante, le signal s(r,n) dans la voie r, sous forme analogique, après passage dans un convertisseur numérique-analogique.A variant would consist in supplying the corresponding output 710, the signal s (r, n) in the channel r, in analog form, after passing through a digital-analog converter.

Dans un deuxième temps, le traitement qui doit être réalisé sur les signaux provenant des R moyens de réglage, consiste à modifier, à chaque instant n, les valeurs des coefficients des filtres afin de modifier les caractéristiques directionnelles des voies de réception du son.In a second step, the processing which must be carried out on the signals coming from the R adjustment means, consists in modifying, at each instant n, the values of the coefficients of the filters in order to modify the directional characteristics of the sound reception channels.

Les coefficients h(q,r,m,n) du filtre r dans la voie r, pour le capteur m, dépendent de l'instant n. Les coefficients sont remis à jour sur la base d'informations, c'est à dire sur la base des valeurs de paramètres acquises par l'unité de contrôle 300 depuis les R moyens de réglage 400 et transmises tous les N échantillons à l'unité de contrôle 300. Ainsi, si les coefficients sont mis à jour à l'instant no, ils le seront à nouveau à l'instant no+N.The coefficients h (q, r, m, n) of the filter r in the path r, for the sensor m, depend on the instant n. The coefficients are updated on the basis of information, that is to say on the basis of the parameter values acquired by the control unit 300 from the R adjustment means 400 and transmitted every N samples to the unit. control 300. Thus, if the coefficients are updated at time n o , they will be updated again at time n o + N.

De préférence, un procédé de réglage des paramètres caractéristiques de la prise de sons, consiste en outre, à reconstituer, par le calcul, les valeurs des coefficients des filtres, entre ces deux instants no et no + N. Ainsi, les valeurs des coefficients pourront être interpolées linéairement suivant l'équation : h(q,r,m,n) =[(n-n o )/N] h(q,r,m,n o + N) + [( n o + N-n)/N] h(q,r,m,n o )

Figure imgb0003
Preferably, a method of adjusting the characteristic parameters of the sound recording, furthermore consists in reconstituting, by calculation, the values of the coefficients of the filters, between these two instants n o and n o + N. Thus, the values coefficients can be interpolated linearly according to the equation: h (q, r, m, n) = [(nn o ) / N] h (q, r, m, n o + N) + [(n o + Nn) / N] h (q, r, m, n o )
Figure imgb0003

L'unité de contrôle 300 calcule à chaque instant n les valeurs des coefficients h(q,r,m,n) des filtres 310 à partir des valeurs de paramètres reçues, à la cadence d'échantillonnage des convertisseurs 412, des R moyens de réglages 410.The control unit 300 calculates at all times n the values of the coefficients h (q, r, m, n) of the filters 310 from the values of parameters received, at the sampling rate of the converters 412, of the R means of settings 410.

Lorsque les informations sont reçues à un instant noté no, l'unité de contrôle détermine, pour chaque voie r de réception du son, les valeurs des coefficients h(q,r,m,no + N) des filtres, qui servent à interpoler, au moyen de l'équation (3), les valeurs des coefficients h(q,r,m,n), entre l'instant présent no et l'instant no + N où sont reçues les informations suivantes.When the information is received at a time denoted n o , the control unit determines, for each channel r of reception of the sound, the values of the coefficients h (q, r, m, n o + N) of the filters, which serve at interpolate, using equation (3), the values of the coefficients h (q, r, m, n), between the present time n o and the time n o + N where the following information is received.

Les valeurs des coefficients sont donc interpolées dans le temps, à chaque instant d'échantillonnage, entre ces deux valeurs, no et no+N, qui sont modifiées à cadence régulière mais, de préférence, plus lente que la fréquence d'échantillonnage.The values of the coefficients are therefore interpolated over time, at each sampling instant, between these two values, n o and n o + N, which are modified at a regular rate but, preferably, slower than the sampling frequency .

Selon une variante, on peut appliquer deux fois les équations (1) et (2). En effet, on applique une première fois ces équations pour des filtres de coefficients h(q,r,m,no), ce qui donne les signaux suivants : yo(r,m,n) et so(r,n). On applique une deuxième fois ces équations pour des filtres de coefficients h(q,r,m,no+N) ce qui donne les signaux suivants : yN(r,m,n) et sN(r,n).Alternatively, equations (1) and (2) can be applied twice. Indeed, these equations are applied for the first time for filters with coefficients h (q, r, m, n o ), which gives the following signals: y o (r, m, n) and s o (r, n ). These equations are applied a second time for filters of coefficients h (q, r, m, n o + N) which gives the following signals: y N (r, m, n) and s N (r, n).

L'interpolation est alors effectuée au niveau des signaux de sortie s(r,n) selon la relation : s(r,n) = [(n-n o )/N] S N (r,n) + [(n o +N-n)/N] s o (r,n)

Figure imgb0004
The interpolation is then carried out at the level of the output signals s (r, n) according to the relation: s (r, n) = [(nn o ) / N] S NOT (r, n) + [(n o + Nn) / N] s o (r, n)
Figure imgb0004

Une autre variante de ce procédé consisterait à interpoler les valeurs des coefficients des filtres 310, non seulement dans le temps mais aussi dans l'espace. Dans ce cas, les coefficients des filtres seraient aussi interpolés entre deux positions, visualisées sur l'écran, correspondant au renouvellement des coefficients des filtres.Another variant of this method would consist in interpolating the values of the coefficients of the filters 310, not only in time but also in space. In this case, the filter coefficients would also be interpolated between two positions, displayed on the screen, corresponding to the renewal of the filter coefficients.

Les valeurs des coefficients des filtres 310 sont fonctions des réglages, donnés par le manipulateur à travers les commandes 411 des moyens de réglage 410, et décrits par les paramètres a(r), b(r), c(r), d(r), p(r).The values of the coefficients of the filters 310 are a function of the settings, given by the manipulator through the commands 411 of the adjusting means 410, and described by the parameters a (r), b (r), c (r), d (r ), p (r).

On note F(a,b,c,d,p) cette fonction. Elle fournit, pour chaque valeur de quintuplet (a,b,c,d,p) de paramètres, un vecteur QxM représentant les Q coefficients des filtres, correspondants aux R voies de réception du son des M capteurs, lorsque les réglages sont (a,b,c,d,p). Ainsi, les coefficients h(q,r,m,no) sont lus dans le vecteur QxM dont les composantes sont notées f(m,q) pour m variant de 1 à M et q variant de 1 à Q et on obtient : h(q,r,m, n o ) = f(m,q)

Figure imgb0005
We denote by F (a, b, c, d, p) this function. It provides, for each quintuplet value (a, b, c, d, p) of parameters, a vector QxM representing the Q coefficients of the filters, corresponding to the R channels for receiving the sound of the M sensors, when the settings are (a, b, c, d, p). Thus, the coefficients h (q, r, m, n o ) are read in the vector QxM whose components are noted f (m, q) for m varying from 1 to M and q varying from 1 to Q and we obtain: h (q, r, m, n o ) = f (m, q)
Figure imgb0005

L'unité de contrôle applique R fois cette fonction F pour obtenir les valeurs des coefficients des filtres correspondants aux R voies de réception formées.The control unit applies R times this function F to obtain the values of the coefficients of the filters corresponding to the R reception channels formed.

Pour aboutir à une expression de la fonction permettant de calculer les valeurs des coefficients des filtres, on procède en plusieurs étapes.To obtain an expression of the function used to calculate the values of the filter coefficients, we proceed in several stages.

Une première étape consiste à déterminer les coordonnées de la position d'une source sonore réelle et les coordonnées des positions de sources sonores fictives prises comme référence. Ainsi, pour trouver les coordonnées d'une source sonore réelle, on détermine, par exemple, l'angle horizontal ua du faisceau centré sur la direction définie par a, l'angle vertical vb du faisceau centré sur la direction définie par b, les angles horizontaux, ua1 et ua2, qui forment les limites horizontales du faisceau centré sur la direction définie par a et de largeur définie par c, et enfin, les angles verticaux, vb1 et vb2 qui forment les limites verticales du faisceau centré sur la direction définie par b et de largeur définie par d.A first step consists in determining the coordinates of the position of an actual sound source and the coordinates of the positions of fictitious sound sources taken as a reference. Thus, to find the coordinates of a real sound source, we determine, for example, the horizontal angle u a of the beam centered on the direction defined by a, the vertical angle v b of the beam centered on the direction defined by b , the horizontal angles, u a1 and u a2 , which form the horizontal limits of the beam centered on the direction defined by a and of width defined by c, and finally, the vertical angles, v b1 and v b2 which form the vertical limits of beam centered on the direction defined by b and of width defined by d.

Pour trouver les coordonnées des positions de sources sonores fictives, on choisit tout d'abord un nombre K de positions de référence, définie chacune par le couple d'angles horizontal et vertical (uk, vk) pour k variant de 1 à K.To find the coordinates of the positions of fictitious sound sources, we first choose a number K of reference positions, each defined by the pair of horizontal and vertical angles (u k , v k ) for k varying from 1 to K.

Ces sources de référence sont avantageusement réparties de manière uniforme, dans le carré
   [-Π,Π] x[-Π,Π] privé de sa partie centrale
   [u1,u2] x [v1, v2]. On choisit ensuite L fréquences de référence notées fi, pour i variant de 1 à L, et une distance de référence qui est, de préférence, une valeur de profondeur p.
These reference sources are advantageously distributed uniformly, in the square
[-Π, Π] x [-Π, Π] deprived of its central part
[u 1 , u 2 ] x [v 1 , v 2 ]. We then choose L reference frequencies noted f i , for i varying from 1 to L, and a reference distance which is preferably a depth value p.

L'origine dans l'espace à trois dimensions est avantageusement définie par la position de la caméra 100. Les coordonnées des positions des sources de référence sont alors calculées à partir de leur expression qui est la suivante : [pCos(u k )Cos(v k ), pcos(u k )Cos(v k ), psin(u k )]

Figure imgb0006
The origin in three-dimensional space is advantageously defined by the position of the camera 100. The coordinates of the positions of the reference sources are then calculated from their expression which is as follows: [pCos (u k ) Cos (v k ), pcos (u k ) Cos (v k ), psin (u k )]
Figure imgb0006

Pour chaque source fictive k et pour chaque capteur m, on calcule la distance z(k,m) entre la source et le capteur. On calcule également les fonctions de transfert depuis les sources de référence jusqu'aux capteurs, pour les fréquences de référence. La fonction de transfert t(m,k,fi), pour le capteur m, la source k et la fréquence fi, est donnée par l'équation (5) où j désigne la racine de -1 et V la vitesse du son : t(m,k,fi) = 1/z(k,m) e -j2Πf i [z(k,m)/V]

Figure imgb0007
For each fictitious source k and for each sensor m, the distance z (k, m) between the source and the sensor is calculated. The transfer functions are also calculated from the reference sources to the sensors, for the reference frequencies. The transfer function t (m, k, f i ), for the sensor m, the source k and the frequency f i , is given by equation (5) where j denotes the root of -1 and V the speed of the his : t (m, k, fi) = 1 / z (k, m) e -j2Πf i [z (k, m) / V]
Figure imgb0007

Cette fonction de transfert permet, dans une deuxième étape, d'établir les expressions des gains obtenus, pour les sons fictifs issus de sources sonores de référence, et de fixer les gains, que l'on souhaite obtenir, pour ces mêmes sons fictifs. Avec le filtre, dont les coefficients sont f(m,q), le son issu d'une source, située à une position k, sera reçu, pour une fréquence fi, avec un gain g(k,fi) qui se détermine selon l'équation : q(k,f i )=Σ M m=i Σ Q-1 q=o f(m,q) t(m,k,f i )e -j2Πf i q

Figure imgb0008
This transfer function makes it possible, in a second step, to establish the expressions of the gains obtained, for the fictitious sounds coming from reference sound sources, and to fix the gains, which one wishes to obtain, for these same fictitious sounds. With the filter, whose coefficients are f (m, q), the sound from a source, located at a position k, will be received, for a frequency f i , with a gain g (k, f i ) which is determined according to the equation: q (k, f i ) = Σ M m = i Σ Q-1 q = o f (m, q) t (m, k, f i ) e -j2Πf i q
Figure imgb0008

On fixe les gains souhaités gs(k,fi) correspondants aux sons issus des sources sonores situées aux positions de référence, ceci pour des fréquences de référence fi.The desired gains g s (k, f i ) corresponding to the sounds originating from the sound sources situated at the reference positions are fixed, this for reference frequencies f i .

Dans une troisième étape, on établit une expression de l'écart entre les gains obtenus et les gains souhaités. Cet écart représente une erreur, qui peut être réduite à une valeur seuil, que l'on s'est fixée, en utilisant, par exemple, la méthode de calcul des moindres carrés. On obtient alors une expression, qui représente le carré de l'erreur que l'on désire réduire à une valeur seuil et qui s'écrit sous la forme : Σ K k=o L i=1 [g(k,f i )-g s (k,f i )] 2 }

Figure imgb0009
In a third step, an expression of the difference between the gains obtained and the desired gains is established. This difference represents an error, which can be reduced to a threshold value, which has been fixed, using, for example, the least squares calculation method. We then obtain an expression, which represents the square of the error which we wish to reduce to a threshold value and which is written in the form: Σ K k = o L i = 1 [g (k, f i ) -g s (k, f i )] 2 }
Figure imgb0009

Cette équation (7) représente une somme de carrés et de doubles produits. Cela signifie que le critère donné par l'équation (7) est quadratique en g(k,fi). De même le critère donné par l'équation (6) est quadratique en f(m,q). La réduction de l'erreur à une valeur seuil conduit à un système en ces inconnues f(m,q), qui admet une solution unique. La solution de F est obtenue par dérivation de l'équation (7) par rapport aux valeurs des coefficients f(m,q).This equation (7) represents a sum of squares and double products. This means that the criterion given by equation (7) is quadratic in g (k, f i ). Likewise the criterion given by equation (6) is quadratic in f (m, q). The reduction of the error to a threshold value leads to a system in these unknowns f (m, q), which admits a unique solution. The solution of F is obtained by derivation of equation (7) with respect to the values of the coefficients f (m, q).

Si on écrit T(k,f), le vecteur contenant les composantes de t(m,k,f)e -2Πfq pour tous les couples [m,q] listés dans le même ordre que le vecteur QxM représentant F(a,b,c,d,p), une solution de F s'écrit : F(a,b,c,d,p)= [Σ k,i T(k,f i ) T(k f i ) T ] -1 Σ k,1 T(k,f i ) g s (k,f i )

Figure imgb0010
If we write T (k, f), the vector containing the components of t (m, k, f) e -2Πfq for all the couples [m, q] listed in the same order as the vector QxM representing F (a, b, c, d, p), a solution of F is written: F (a, b, c, d, p) = [Σ k, i T (k, f i ) T (kf i ) T ] -1 Σ k, 1 T (k, f i ) g s (k, f i )
Figure imgb0010

Dans une dernière étape on peut déterminer les valeurs des coefficients des filtres à partir de l'expression de la fonction F ainsi trouvée. Pour pouvoir déterminer les valeurs de ces coefficients, il existe deux possibilités.In a final step, the values of the filter coefficients can be determined from the expression of the function F thus found. To be able to determine the values of these coefficients, there are two possibilities.

Selon une première variante, les valeurs des coefficients sont déterminées, avant toute manipulation, à partir de la fonction F et pour des valeurs fixées de paramètres, puis elles sont mémorisées dans un tableau.According to a first variant, the values of the coefficients are determined, before any manipulation, from the function F and for fixed values of parameters, then they are stored in a table.

Ce tableau peut, par exemple, être un tableau à deux dimensions comprenant QxM lignes et AxBxCxDxP colonnes. Dans ce cas, des quintuplets (a,b,c,d,p) de paramètres, par exemple, définissent les indices des colonnes et les numéros q des coefficients des filtres correspondant à chaque capteur m définissent les indices des lignes. Cependant, la dimension du tableau peut être plus élevée si on décide de séparer les quintuplets en 2, 3, 4, ou 5 paramètres distincts et si on décide de distinguer les Q coefficients et les M capteurs pour les ranger dans des lignes et des colonnes séparées. Cette mémorisation des valeurs des coefficients dans un tableau permet de changer les valeurs des coefficients plus rapidement au cours de la manipulation de prise de sons, pour des valeurs fixées de paramètres. Les coefficients changeront de valeurs uniquement lorsque les valeurs des quintuplets de paramètres, qui sont fixées et mémorisées dans le tableau, seront atteintes. Entre ces valeurs de quintuplets, correspondantes à la remise à jour des filtres, les valeurs des coefficients pourront, par exemple, être interpolées.This table can, for example, be a two-dimensional table comprising QxM rows and AxBxCxDxP columns. In this case, quintuplets (a, b, c, d, p) of parameters, for example, define the indices of the columns and the numbers q of the coefficients of the filters corresponding to each sensor m define the indices of the lines. However, the dimension of the table can be higher if we decide to separate the quintuplets into 2, 3, 4, or 5 distinct parameters and if we decide to distinguish the Q coefficients and the M sensors to store them in rows and columns separated. This memorization of the values of the coefficients in a table makes it possible to change the values of the coefficients more quickly during the manipulation of sound recording, for fixed values of parameters. The coefficients will change values only when the values of the quintuplets of parameters, which are fixed and stored in the table, are reached. Between these quintuplet values, corresponding to the updating of filters, the values of the coefficients could, for example, be interpolated.

Selon une deuxième variante, les valeurs des coefficients de chaque filtre, sont déterminées en temps réel, à partir de l'expression de la fonction F et pour des valeurs de paramètres variant de façon continue. Dans ce cas, les coefficients des filtres sont, de préférence, remis à jour à cadence régulière et leurs valeurs sont interpolées selon l'équation (3) précédemment établie.According to a second variant, the values of the coefficients of each filter are determined in real time, from the expression of the function F and for values of parameters varying continuously. In this case, the coefficients of the filters are preferably updated at regular rate and their values are interpolated according to equation (3) previously established.

L'orientation de la caméra et celle du réseau de capteurs doivent être reliées, par un moyen quelconque, afin d'éviter tout décalage entre, d'une part, l'image représentant la position des sources sonores, et d'autre part, les images faisant apparaître la variation des paramètres caractéristiques des voies de réception du son. De cette façon, on peut visualiser très précisément la variation des paramètres par rapport à la position et à la taille des sources sonores.The orientation of the camera and that of the sensor network must be connected, by any means, in order to avoid any discrepancy between, on the one hand, the image representing the position of the sound sources, and on the other hand, the images showing the variation of the characteristic parameters of the sound reception channels. In this way, one can visualize very precisely the variation of the parameters compared to the position and the size of the sound sources.

Un autre mode de réalisation d'un dispositif selon l'invention concerne, par conséquent, la fixation de la caméra 100 par rapport au réseau 600 de capteurs. La caméra 100 est avantageusement fixée sur le même bâti que le réseau 600 de capteurs de façon à ce que son pointage soit strictement invariant par rapport à la position des capteurs.Another embodiment of a device according to the invention therefore relates to fixing the camera 100 relative to the network 600 of sensors. The camera 100 is advantageously fixed on the same frame as the network 600 of sensors so that its pointing is strictly invariant with respect to the position of the sensors.

Une variante de ce système consiste à ne pas fixer la caméra 100 sur le même bâti que le réseau 600 de capteurs. Dans ce cas, le réseau de capteurs doit avoir une position fixe dans l'espace et la caméra doit, elle aussi, avoir une position et une orientation fixe dans l'espace pour obtenir un pointage des sources sonores qui soit invariant par rapport aux positions des capteurs.A variant of this system consists in not fixing the camera 100 on the same frame as the network 600 of sensors. In this case, the sensor network must have a fixed position in space and the camera must also have a fixed position and orientation in space to obtain a pointing of the sound sources. which is invariant with respect to the positions of the sensors.

Selon une autre variante de réalisation du dispositif selon l'invention, il est possible de rajouter une télécommande permettant d'effectuer à distance les règlages du système vidéo de pointage. Cependant, dans ce cas, un utilisateur n'a pas forcément accès au système vidéo, si bien qu'il ne peut pas visualiser les réglages effectués. C'est pourquoi, il est en outre préférable d'équiper le dispositif d'un système de retour auditif, permettant à l'utilisateur de faire les réglages directement, à l'aide des signaux sonores lui parvenant. Le retour auditif est par exemple réalisé au moyen d'un écouteur placé dans le conduit auditif de l'utilisateur et relié au dispositif par un câble, ou mieux, par l'intermédiaire d'un canal Hertzien.According to another alternative embodiment of the device according to the invention, it is possible to add a remote control making it possible to remotely adjust the video pointing system. However, in this case, a user does not necessarily have access to the video system, so that he cannot view the settings made. This is why, it is also preferable to equip the device with a hearing feedback system, allowing the user to make the adjustments directly, using the audible signals reaching him. Hearing feedback is for example achieved by means of an earpiece placed in the user's ear canal and connected to the device by a cable, or better, via a Hertzian channel.

Claims (9)

Dispositif de prise de sons comportant un réseau de capteurs, pour capter le son issu de sources sonores, une unité de contrôle (300) utilisant notamment des filtres (310) pour le traitement des signaux reçus par les capteurs, et des moyens de réglage (400) des paramètres caractéristiques de la prise de sons, caractérisé en ce qu'il comprend, en outre, une caméra vidéo (100), un écran vidéo (200) qui affiche une première image vidéo correspondant au signal issu de la caméra, et des moyens de couplage (500) de l'écran (200) aux moyens de réglage (400) des paramètres caractéristiques de chacune des voies de réception du son aptes à réaliser, pour chacune des voies de réception, une autre image vidéo faisant apparaître les variations des paramètres caractéristiques, et à superposer cette image à la première image vidéo, de manière à contrôler le réglage de ces paramètres.Sound recording device comprising a network of sensors, for picking up sound from sound sources, a control unit (300) using in particular filters (310) for processing the signals received by the sensors, and adjustment means ( 400) of the characteristic parameters of the sound recording, characterized in that it further comprises a video camera (100), a video screen (200) which displays a first video image corresponding to the signal from the camera, and means for coupling (500) the screen (200) to the means for adjusting (400) the characteristic parameters of each of the sound reception channels capable of producing, for each of the reception channels, another video image showing the variations of the characteristic parameters, and to superimpose this image on the first video image, so as to control the adjustment of these parameters. Dispositif de prise de sons selon la revendication 1, caractérisé en ce que les moyens de couplage (500) comprennent, pour chacun des moyens de réglage (410) des paramètres caractéristiques de chacune des voies de réception du son, un générateur vidéo (510) permettant de transformer, en un signal vidéo, le signal de réglage des paramètres, et un mélangeur vidéo (520) de sorte que les signaux issus des générateurs soient mélangés entre eux et mélangés également au signal issu de la caméra pour obtenir, sur l'image visualisée, une superposition des images correspondant à chaque voie de réception.Sound pickup device according to claim 1, characterized in that the coupling means (500) comprise, for each of the adjustment means (410) of the characteristic parameters of each of the sound reception channels, a video generator (510) making it possible to transform the parameter adjustment signal and a video mixer (520) into a video signal so that the signals from the generators are mixed together and also mixed with the signal from the camera to obtain, on the displayed image, an overlay of images corresponding to each reception channel. Dispositif de prise de sons selon l'une des revendications 1 à 2, caractérisé en ce que l'unité de contrôle (300) comporte des filtres (310) à interpolation linéaire.Sound recording device according to one of claims 1 to 2, characterized in that the control unit (300) comprises filters (310) with linear interpolation. Dispositif de prise de sons selon l'une des revendications 1 à 3, caractérisé en ce que la caméra (100) est fixée sur le même bâti que le réseau (600) de capteurs (620).Sound pickup device according to one of claims 1 to 3, characterized in that the camera (100) is fixed on the same frame as the network (600) of sensors (620). Dispositif de prise de sons selon l'une des revendications 1 à 4, caractérisé en ce qu'il comprend en outre une télécommande, apte à commander à distance les réglages du système vidéo de pointage, et un système de retour auditif.Sound recording device according to one of claims 1 to 4, characterized in that it further comprises a remote control, able to remotely control the settings of the video pointing system, and a hearing feedback system. Procédé de réglage des paramètres caractéristiques de la prise de sons, selon l'une quelconque des revendications précédentes, caractérisé en ce que l'unité de contrôle (300) réalise un traitement sur les signaux captés et sur les signaux, correspondants aux valeurs des paramètres, fournis par les moyens de réglage, comportant les étapes suivantes: - filtrage des signaux captés par les filtres à interpolation linéaire, - modification des coefficients des filtres pour chaque modification des paramètres, - interpolation linéaire dans le temps, à chaque instant d'échantillonnage, entre deux valeurs, correspondant au renouvellement des coefficients des filtres, qui sont modifiées à cadence régulière mais plus lente que la fréquence d'échantillonnage. Method for adjusting the characteristic parameters of the sound recording, according to any one of the preceding claims, characterized in that the control unit (300) performs processing on the signals picked up and on the signals, corresponding to the values of the parameters , provided by the adjustment means, comprising the following steps: - filtering of signals picked up by filters with linear interpolation, - modification of the filter coefficients for each modification of the parameters, - linear interpolation in time, at each sampling instant, between two values, corresponding to the renewal of the filter coefficients, which are modified at a regular rate but slower than the sampling frequency. Procédé de réglage des paramètres caractéristiques de la prise de sons selon la revendication 6, caractérisé en ce que la modification des coefficients des filtres pour chacune des modifications de paramètres se fait par la détermination d'une fonction F reliant les paramètres caractéristiques de chaque voie de réception du son aux valeurs des coefficients des filtres correspondants, cette détermination comprenant les étapes suivantes : - déterminer les coordonnées de la position d'une source sonore réelle et des positions de sources sonores fictives prises comme référence, - établir l'expression de gain obtenu, pour des sons fictifs issus de sources sonores de référence, et fixer les gains, que l'on souhaite obtenir, pour ces mêmes sons fictifs, - établir une expression de l'écart entre les gains obtenus et les gains souhaités, qui représente une erreur pouvant être réduite à une valeur seuil, - dériver l'expression ainsi établie, par rapport aux coefficients des filtres, pour aboutir à une expression de la fonction F, - déterminer les valeurs des coefficients des filtres à partir de l'expression de la fonction F ainsi trouvée. Method for adjusting the characteristic parameters of the sound recording according to claim 6, characterized in that the modification of the filter coefficients for each of the parameter modifications is effected by the determination of a function F connecting the characteristic parameters of each channel of reception of the sound at the values of the coefficients of the corresponding filters, this determination comprising the following steps: - determine the coordinates of the position of an actual sound source and of the positions of fictitious sound sources taken as reference, - establish the expression of gain obtained, for fictitious sounds coming from reference sound sources, and fix the gains, which one wishes to obtain, for these same fictitious sounds, - establish an expression of the difference between the gains obtained and the desired gains, which represents an error which can be reduced to a threshold value, - derive the expression thus established, with respect to the coefficients of the filters, to result in an expression of the function F, - determine the values of the filter coefficients from the expression of the function F thus found. Procédé de réglage des paramètres caractéristiques de la prise de sons selon l'une des revendications 6 à 7, caractérisé en ce que l'on détermine, pour des valeurs fixées de paramètres, les valeurs des coefficients de chaque filtre correspondant à chaque voie de réception du son de chaque capteur, à partir de la fonction F, et on les mémorise dans un tableau.Method for adjusting the characteristic parameters of the sound recording according to one of claims 6 to 7, characterized in that the values of the coefficients of each filter corresponding to each reception channel are determined for fixed values of parameters the sound of each sensor, from function F, and they are stored in a table. Procédé de réglage des paramètres caractéristiques de la prise de sons selon l'une des revendications 6 à 7, caractérisé en ce que l'on détermine, à partir de la fonction F, les valeurs des coefficients de chaque filtre correspondant à chaque voie de réception du son de chaque capteur, à chaque instant n et pour des valeurs de paramètres variant de façon continue.Method for adjusting the characteristic parameters of the sound recording according to one of claims 6 to 7, characterized in that the values of the coefficients of each filter corresponding to each reception channel are determined from function F of the sound of each sensor, at each instant n and for continuously varying parameter values.
EP95402816A 1994-12-21 1995-12-14 Sound pick-up device, comprising a video system for the adjustment of parameters and process for adjusting Expired - Lifetime EP0719070B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR9415429A FR2728753A1 (en) 1994-12-21 1994-12-21 SOUND TAKING DEVICE INCLUDING A VIDEO SYSTEM FOR PARAMETER ADJUSTMENT AND ADJUSTMENT PROCEDURE
FR9415429 1994-12-21

Publications (2)

Publication Number Publication Date
EP0719070A1 true EP0719070A1 (en) 1996-06-26
EP0719070B1 EP0719070B1 (en) 1997-09-17

Family

ID=9470076

Family Applications (1)

Application Number Title Priority Date Filing Date
EP95402816A Expired - Lifetime EP0719070B1 (en) 1994-12-21 1995-12-14 Sound pick-up device, comprising a video system for the adjustment of parameters and process for adjusting

Country Status (6)

Country Link
US (1) US5760825A (en)
EP (1) EP0719070B1 (en)
JP (1) JP3575775B2 (en)
CA (1) CA2165512C (en)
DE (1) DE69500732T2 (en)
FR (1) FR2728753A1 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5959667A (en) * 1996-05-09 1999-09-28 Vtel Corporation Voice activated camera preset selection system and method of operation
US6269483B1 (en) * 1998-12-17 2001-07-31 International Business Machines Corp. Method and apparatus for using audio level to make a multimedia conference dormant
US6868372B2 (en) 2000-04-12 2005-03-15 Home Box Office, Inc. Image and audio degradation simulator
FR2832282B1 (en) * 2001-11-12 2004-07-30 France Telecom MODULAR AUDIOVISUAL SYSTEM WITH CONCATENABLE MODULES FOR PRESENTING A LOCAL SCENE AND A REMOTE SCENE
JP2003244800A (en) * 2002-02-14 2003-08-29 Matsushita Electric Ind Co Ltd Sound image localization apparatus
JP2005311604A (en) * 2004-04-20 2005-11-04 Sony Corp Information processing apparatus and program used for information processing apparatus
KR101547809B1 (en) * 2011-07-01 2015-08-27 돌비 레버러토리즈 라이쎈싱 코오포레이션 Synchronization and switchover methods and systems for an adaptive audio system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4802227A (en) * 1987-04-03 1989-01-31 American Telephone And Telegraph Company Noise reduction processing arrangement for microphone arrays
EP0352627A2 (en) * 1988-07-20 1990-01-31 Sanyo Electric Co., Ltd. Sound reproducer
EP0356327A1 (en) * 1988-08-19 1990-02-28 France Telecom Apparatus for picking up sound signals with noise cancellation
JPH03245203A (en) * 1990-02-23 1991-10-31 Yamatake Honeywell Co Ltd Method and device for display of trend of estimated value in estimation control
EP0578183A2 (en) * 1992-07-06 1994-01-12 Sanyo Electric Co., Ltd. Remote control system for video camera
WO1994016517A1 (en) * 1993-01-12 1994-07-21 Bell Communications Research, Inc. Sound localization system for teleconferencing using self-steering microphone arrays

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69326751T2 (en) * 1992-08-27 2000-05-11 Toshiba Kawasaki Kk MOTION IMAGE ENCODER
US5548346A (en) * 1993-11-05 1996-08-20 Hitachi, Ltd. Apparatus for integrally controlling audio and video signals in real time and multi-site communication control method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4802227A (en) * 1987-04-03 1989-01-31 American Telephone And Telegraph Company Noise reduction processing arrangement for microphone arrays
EP0352627A2 (en) * 1988-07-20 1990-01-31 Sanyo Electric Co., Ltd. Sound reproducer
EP0356327A1 (en) * 1988-08-19 1990-02-28 France Telecom Apparatus for picking up sound signals with noise cancellation
JPH03245203A (en) * 1990-02-23 1991-10-31 Yamatake Honeywell Co Ltd Method and device for display of trend of estimated value in estimation control
EP0578183A2 (en) * 1992-07-06 1994-01-12 Sanyo Electric Co., Ltd. Remote control system for video camera
WO1994016517A1 (en) * 1993-01-12 1994-07-21 Bell Communications Research, Inc. Sound localization system for teleconferencing using self-steering microphone arrays

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
PATENT ABSTRACTS OF JAPAN vol. 16, no. 39 (P - 1305) 30 January 1992 (1992-01-30) *

Also Published As

Publication number Publication date
DE69500732T2 (en) 1998-02-12
DE69500732D1 (en) 1997-10-23
FR2728753A1 (en) 1996-06-28
US5760825A (en) 1998-06-02
FR2728753B1 (en) 1997-02-28
CA2165512A1 (en) 1996-06-22
CA2165512C (en) 2006-09-19
JPH08265894A (en) 1996-10-11
JP3575775B2 (en) 2004-10-13
EP0719070B1 (en) 1997-09-17

Similar Documents

Publication Publication Date Title
US5696831A (en) Audio reproducing apparatus corresponding to picture
US20080044033A1 (en) Sound pickup device and sound pickup method
EP1836876B1 (en) Method and device for individualizing hrtfs by modeling
JP2020509492A (en) Recording virtual and real objects in mixed reality devices
US20150022636A1 (en) Method and system for voice capture using face detection in noisy environments
CN114189793A (en) Techniques to direct audio in augmented reality systems
EP1586220B1 (en) Method and device for controlling a reproduction unit using a multi-channel signal
FR2738099A1 (en) METHOD FOR SIMULATING THE ACOUSTIC QUALITY OF A ROOM AND ASSOCIATED AUDIO-DIGITAL PROCESSOR
JP2015149634A (en) Image display device and method
EP0719070B1 (en) Sound pick-up device, comprising a video system for the adjustment of parameters and process for adjusting
EP2478715B1 (en) Method for acquiring audio signals, and audio acquisition system thereof
US20020071661A1 (en) Audio and video reproduction apparatus
EP1502475B1 (en) Method and system of representing a sound field
JP2022184863A (en) Information acquisition system and control method of information acquisition system
US10122990B2 (en) Imaging system and method of producing context and focus images
FR3065137A1 (en) SOUND SPATIALIZATION METHOD
JP4458128B2 (en) Direction detection device, direction detection method and direction detection program, and direction control device, direction control method and direction control program
US11917394B1 (en) System and method for reducing noise in binaural or stereo audio
JP5998483B2 (en) Audio signal processing apparatus, audio signal processing method, program, and recording medium
CN112020854A (en) Image pickup apparatus, image pickup system, and image pickup method
WO2020043979A1 (en) Method for the spatial sound reproduction of a sound field that is audible in a position of a moving listener and system implementing such a method
CN111246345A (en) Method and device for real-time virtual reproduction of remote sound field
EP2987339B1 (en) Method for acoustical reproduction of a numerical audio signal
FR3069693B1 (en) METHOD AND SYSTEM FOR PROCESSING AUDIO SIGNAL INCLUDING ENCODING IN AMBASSIC FORMAT
CN116723229A (en) Immersive remote audio transmission system and method

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): DE FR GB IT

17P Request for examination filed

Effective date: 19960709

17Q First examination report despatched

Effective date: 19960905

GRAG Despatch of communication of intention to grant

Free format text: ORIGINAL CODE: EPIDOS AGRA

GRAH Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOS IGRA

GRAH Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOS IGRA

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): DE FR GB IT

ITF It: translation for a ep patent filed

Owner name: PORTA CHECCACCI E BOTTI S.R.L.

GBT Gb: translation of ep patent filed (gb section 77(6)(a)/1977)

Effective date: 19970919

REF Corresponds to:

Ref document number: 69500732

Country of ref document: DE

Date of ref document: 19971023

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed
REG Reference to a national code

Ref country code: GB

Ref legal event code: IF02

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20081218

Year of fee payment: 14

REG Reference to a national code

Ref country code: GB

Ref legal event code: 732E

Free format text: REGISTERED BETWEEN 20090528 AND 20090603

REG Reference to a national code

Ref country code: FR

Ref legal event code: TP

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20091214

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20111230

Year of fee payment: 17

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20121128

Year of fee payment: 18

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20121219

Year of fee payment: 18

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 69500732

Country of ref document: DE

Effective date: 20130702

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20130702

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20131214

REG Reference to a national code

Ref country code: FR

Ref legal event code: ST

Effective date: 20140829

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20131231

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20131214