EP0719070A1 - Sound pick-up device, comprising a video system for the adjustment of parameters and process for adjusting - Google Patents
Sound pick-up device, comprising a video system for the adjustment of parameters and process for adjusting Download PDFInfo
- Publication number
- EP0719070A1 EP0719070A1 EP95402816A EP95402816A EP0719070A1 EP 0719070 A1 EP0719070 A1 EP 0719070A1 EP 95402816 A EP95402816 A EP 95402816A EP 95402816 A EP95402816 A EP 95402816A EP 0719070 A1 EP0719070 A1 EP 0719070A1
- Authority
- EP
- European Patent Office
- Prior art keywords
- sound
- values
- parameters
- coefficients
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
Definitions
- the invention relates to a sound recording device with which a video pointing system has been associated.
- This device can be particularly useful in certain applications and in particular during conferences, concerts or any other event deserving of perfect quality sound recording.
- the device according to the invention makes it possible to simultaneously and independently capture the sounds coming from several sound sources, without having to approach the sensors close to these sources, while giving the auditory impression that the sound is picked up near each source. For this, it reduces the reverberation of the sound as well as the level of ambient noise.
- These devices include networks of sensors, a control unit using in particular filters for processing the signals received by the sensors, and means for adjusting the parameters characteristic of the sound recording.
- Patent EP 0 381 498 further describes a sound pickup device comprising a circuit for changing the coefficients of the digital filters which makes it possible to vary, arbitrarily, the directional characteristics of the sound reception channels.
- the present invention overcomes this problem. Its object is in fact a device comprising a network of sensor elements, a control unit using in particular filters for processing the signals received by the sensors, a camera and a video screen.
- the camera provides a video signal to the screen corresponding to the image of the area where the sound sources are located from which the sound is captured.
- the video screen for its part, makes it possible to visualize, at the same time, the sound sources, filmed by the camera, and the variations of the characteristic parameters of each of the sound reception channels. Thus, a very precise adjustment of the parameters is carried out, taking into account the position and the size of the sound sources.
- a more particular subject of the invention is a device for taking sounds, comprising a network of sensors, a control unit and means for adjustment of the characteristic parameters of the sound recording, mainly characterized in that it further comprises a video camera, a video screen which displays a first video image, corresponding to the signal from the camera, and means for coupling the screen with means for adjusting the characteristic parameters of each of the sound reception channels.
- These coupling means make it possible to produce, for each of the sound reception channels, another video image, showing variations in the characteristic parameters, and to superimpose this image on the first video image, so as to control the adjustment of these parameters.
- the optical field of a camera 100 covers the entire area where there are sound sources from which the device picks up sounds.
- the video signal from the camera is then transmitted to a video screen 200 which displays a corresponding first video image.
- the concept of screen covers any type of screen such as, for example, the screen of a video monitor.
- the camera supplies, on the other hand, a value of its focal length to a control unit 300, this value is useful for performing angle calculations which will be described in more detail in the following.
- adjustment means 400 make it possible to adjust the characteristic parameters of each of the sound reception channels.
- the signal from these adjustment means 400 is transmitted to coupling means 500 of the screen 200 to the adjustment means 400.
- the coupling means 500 make it possible to produce, for each of the sound reception channels, another video image. and superimpose it on the first image. This superimposition of images makes it possible to perform a precise adjustment of the characteristic parameters of each sound reception channel, and to control the variations of this adjustment with respect to the position and size of the sound sources from which the device picks up the sounds.
- the signal representing the values of the adjustment parameters is also transmitted to the control unit 300 which has in particular the task of filtering the signals received by the network 600 of sensors, and of updating, periodically, the coefficients of the filters.
- Figure 2 provides a more detailed diagram of a device according to the invention.
- the network 600 of sensors comprises a number M of sensors 610 having the task of capturing the sounds coming from several sound sources and of transmitting the corresponding signals to a control unit 300. This control unit then processes these signals, in particular by filtering.
- the number M of sensors 610 is preferably at least equal to 2 and the number m associated with each sensor 610 therefore varies from 1 to M.
- the control unit To be able to process the signals received by the M sensors 610, the control unit must also know the values of the characteristic parameters of each sound reception channel. This is why signals, corresponding to the values of these parameters, are sent from the network 400 of adjustment means to the control unit.
- This network 400 comprises a number R of adjustment means 410.
- Each of these adjustment means 410 of the parameters characteristic of the sound pickup corresponds to a sound reception channel.
- the number R of adjusting means 410, and consequently the number of sound reception channels, is preferably at least equal to 1 and the number r associated with each of these means therefore varies from 1 to R.
- each channel r for receiving sound is associated with an output 710 where the signals are available.
- means 500 of the video screen 200 are introduced into the structure of the device to the adjustment means 400.
- These coupling means 500 advantageously comprise, for each of the means 410 for adjusting the parameters of each of the sound reception channels, a video generator 510 and a video mixer 520.
- the video generator 510 makes it possible to transform the signal from of the corresponding adjustment means, into a video signal.
- the mixer 520 makes it possible to mix, between them, the signals coming from the video generators, and to also mix them with the signal coming from the camera.
- the signal from the last video mixer is then sent to the screen 200.
- FIG. 3 illustrates the construction of a sensor 610.
- a sensor comprises a microphone 611, a preamplifier 612, a low-pass filter 613 and an analog-digital converter 614.
- the signal picked up by the microphone 611 is injected into a preamplifier 612 then is filtered by the low-pass filter 613 to eliminate the spectral aliasing that could be introduced by the analog-digital converter 614.
- Each sensor receives a clock signal which regulates the frequency sampling of the converter 614.
- the sampled signal is quantified by the converter 614 and is transmitted, in digital form, to the control unit which will process it.
- FIG. 4 A preferred diagram of the realization of a means of adjustment, 410, of the parameters corresponding to a reception channel r is illustrated in FIG. 4.
- a command 411 makes it possible to set the values of the characteristic parameters of the channel r for receiving the corresponding sound.
- This control can be mechanical or electronic. This will be, for example, a joystick, a rotary or linear button, a mouse acting on a potentiometer.
- Each of the parameters is converted into a digital value, at a fixed rate, by an analog-digital converter 412.
- These digital values are advantageously between 1 and a limit value.
- the sampling rate of the values will preferably be lower than the sampling rate in the sensors 610.
- a value of 25 Hz is chosen.
- the set of parameter values is transmitted to the control unit 300 so that it proceeds to the processing of the signals.
- the abscissa of the point aimed on the screen is in one-to-one relation with the horizontal angle of sight noted a (r), and the ordinate of the point aimed on the screen is in one-to-one relationship with the vertical angle of sight noted b (r).
- the width and height of the video screen correspond to the value of the focal length of the camera.
- the camera 100 supplies the value of its focal length to the control unit 300, so that the latter can correspond values of angles to the abscissa and to the ordinate of the point targeted on the screen, which is identified in an arbitrary system of units such as, for example, the percentage.
- the control unit knowing the value of the focal length of the camera, that is to say the value of the maximum opening angle corresponding to the width of the screen, defined by the value 100%; can, by a simple report, determine the value of the horizontal viewing angle, corresponding to any value of the abscissa of a target point on the screen.
- A the maximum number of values corresponding to a (r)
- B the maximum number of values corresponding to b (r)
- C the maximum number of values corresponding to c (r)
- D the number maximum of values corresponding to d (r)
- P the maximum number of values corresponding to p (r).
- a user advantageously fixes the value of a parameter, at least, among all these parameters.
- the values of the parameters which are not set by the user advantageously receive a default value, or else a value deduced from another parameter.
- the value taken can be equal to the width c (r) of the reception channel r.
- the control unit 300 makes it possible to process the signals coming from the sensors 610. It also processes the signals, coming from the adjustment means, representing the values of the parameters. These parameter values influence the calculation of the values of the coefficients of the digital filters 310, that is to say on the directional characteristics of the sound reception channels. Consequently, the values of the parameters of the reception channels play an important role in the processing of the signals coming from the sensors, since these signals will not be treated in the same way according to the directional characteristic which one fixes for each reception channel.
- the processing which must be carried out on the signals coming from the M sensors 610 consists in forming, at each instant n, the R signals at the output of the focused channels. These signals will be available at outputs 710.
- the signals received by the M sensors and converted into digital signals, by the analog-digital converters 614, at the sampling instants n, are denoted x (m, n).
- the signal s (r, n) in the channel r is supplied, in digital form, by the control unit 300 to the corresponding output 710.
- a variant would consist in supplying the corresponding output 710, the signal s (r, n) in the channel r, in analog form, after passing through a digital-analog converter.
- the processing which must be carried out on the signals coming from the R adjustment means consists in modifying, at each instant n, the values of the coefficients of the filters in order to modify the directional characteristics of the sound reception channels.
- the coefficients h (q, r, m, n) of the filter r in the path r, for the sensor m, depend on the instant n.
- the coefficients are updated on the basis of information, that is to say on the basis of the parameter values acquired by the control unit 300 from the R adjustment means 400 and transmitted every N samples to the unit. control 300.
- the coefficients are updated at time n o , they will be updated again at time n o + N.
- a method of adjusting the characteristic parameters of the sound recording furthermore consists in reconstituting, by calculation, the values of the coefficients of the filters, between these two instants n o and n o + N.
- the control unit 300 calculates at all times n the values of the coefficients h (q, r, m, n) of the filters 310 from the values of parameters received, at the sampling rate of the converters 412, of the R means of settings 410.
- the control unit determines, for each channel r of reception of the sound, the values of the coefficients h (q, r, m, n o + N) of the filters, which serve at interpolate, using equation (3), the values of the coefficients h (q, r, m, n), between the present time n o and the time n o + N where the following information is received.
- the values of the coefficients are therefore interpolated over time, at each sampling instant, between these two values, n o and n o + N, which are modified at a regular rate but, preferably, slower than the sampling frequency .
- equations (1) and (2) can be applied twice. Indeed, these equations are applied for the first time for filters with coefficients h (q, r, m, n o ), which gives the following signals: y o (r, m, n) and s o (r, n ). These equations are applied a second time for filters of coefficients h (q, r, m, n o + N) which gives the following signals: y N (r, m, n) and s N (r, n).
- s (r, n) [(nn o ) / N] S NOT (r, n) + [(n o + Nn) / N] s o (r, n)
- Another variant of this method would consist in interpolating the values of the coefficients of the filters 310, not only in time but also in space.
- the filter coefficients would also be interpolated between two positions, displayed on the screen, corresponding to the renewal of the filter coefficients.
- the values of the coefficients of the filters 310 are a function of the settings, given by the manipulator through the commands 411 of the adjusting means 410, and described by the parameters a (r), b (r), c (r), d (r ), p (r).
- F (a, b, c, d, p) this function. It provides, for each quintuplet value (a, b, c, d, p) of parameters, a vector QxM representing the Q coefficients of the filters, corresponding to the R channels for receiving the sound of the M sensors, when the settings are (a, b, c, d, p).
- the control unit applies R times this function F to obtain the values of the coefficients of the filters corresponding to the R reception channels formed.
- a first step consists in determining the coordinates of the position of an actual sound source and the coordinates of the positions of fictitious sound sources taken as a reference.
- the coordinates of a real sound source we determine, for example, the horizontal angle u a of the beam centered on the direction defined by a, the vertical angle v b of the beam centered on the direction defined by b , the horizontal angles, u a1 and u a2 , which form the horizontal limits of the beam centered on the direction defined by a and of width defined by c, and finally, the vertical angles, v b1 and v b2 which form the vertical limits of beam centered on the direction defined by b and of width defined by d.
- the origin in three-dimensional space is advantageously defined by the position of the camera 100.
- the coordinates of the positions of the reference sources are then calculated from their expression which is as follows: [pCos (u k ) Cos (v k ), pcos (u k ) Cos (v k ), psin (u k )]
- the distance z (k, m) between the source and the sensor is calculated.
- the transfer functions are also calculated from the reference sources to the sensors, for the reference frequencies.
- This transfer function makes it possible, in a second step, to establish the expressions of the gains obtained, for the fictitious sounds coming from reference sound sources, and to fix the gains, which one wishes to obtain, for these same fictitious sounds.
- the filter whose coefficients are f (m, q)
- the sound from a source, located at a position k will be received, for a frequency f i , with a gain g (k, f i ) which is determined according to the equation:
- q o f (m, q) t (m, k, f i ) e -j2 ⁇ f i q
- the desired gains g s (k, f i ) corresponding to the sounds originating from the sound sources situated at the reference positions are fixed, this for reference frequencies f i .
- a third step an expression of the difference between the gains obtained and the desired gains is established.
- This difference represents an error, which can be reduced to a threshold value, which has been fixed, using, for example, the least squares calculation method.
- This equation (7) represents a sum of squares and double products. This means that the criterion given by equation (7) is quadratic in g (k, f i ). Likewise the criterion given by equation (6) is quadratic in f (m, q). The reduction of the error to a threshold value leads to a system in these unknowns f (m, q), which admits a unique solution. The solution of F is obtained by derivation of equation (7) with respect to the values of the coefficients f (m, q).
- the values of the filter coefficients can be determined from the expression of the function F thus found. To be able to determine the values of these coefficients, there are two possibilities.
- the values of the coefficients are determined, before any manipulation, from the function F and for fixed values of parameters, then they are stored in a table.
- This table can, for example, be a two-dimensional table comprising QxM rows and AxBxCxDxP columns.
- quintuplets (a, b, c, d, p) of parameters for example, define the indices of the columns and the numbers q of the coefficients of the filters corresponding to each sensor m define the indices of the lines.
- the dimension of the table can be higher if we decide to separate the quintuplets into 2, 3, 4, or 5 distinct parameters and if we decide to distinguish the Q coefficients and the M sensors to store them in rows and columns separated.
- This memorization of the values of the coefficients in a table makes it possible to change the values of the coefficients more quickly during the manipulation of sound recording, for fixed values of parameters.
- the coefficients will change values only when the values of the quintuplets of parameters, which are fixed and stored in the table, are reached. Between these quintuplet values, corresponding to the updating of filters, the values of the coefficients could, for example, be interpolated.
- the values of the coefficients of each filter are determined in real time, from the expression of the function F and for values of parameters varying continuously.
- the coefficients of the filters are preferably updated at regular rate and their values are interpolated according to equation (3) previously established.
- the orientation of the camera and that of the sensor network must be connected, by any means, in order to avoid any discrepancy between, on the one hand, the image representing the position of the sound sources, and on the other hand, the images showing the variation of the characteristic parameters of the sound reception channels. In this way, one can visualize very precisely the variation of the parameters compared to the position and the size of the sound sources.
- Another embodiment of a device according to the invention therefore relates to fixing the camera 100 relative to the network 600 of sensors.
- the camera 100 is advantageously fixed on the same frame as the network 600 of sensors so that its pointing is strictly invariant with respect to the position of the sensors.
- a variant of this system consists in not fixing the camera 100 on the same frame as the network 600 of sensors.
- the sensor network must have a fixed position in space and the camera must also have a fixed position and orientation in space to obtain a pointing of the sound sources. which is invariant with respect to the positions of the sensors.
- the device it is possible to add a remote control making it possible to remotely adjust the video pointing system.
- a user does not necessarily have access to the video system, so that he cannot view the settings made.
- a hearing feedback system it is also preferable to equip the device with a hearing feedback system, allowing the user to make the adjustments directly, using the audible signals reaching him.
- Hearing feedback is for example achieved by means of an earpiece placed in the user's ear canal and connected to the device by a cable, or better, via a Hertzian channel.
Abstract
Description
L'invention concerne un dispositif de prise de sons auquel on a associé un système vidéo de pointage.The invention relates to a sound recording device with which a video pointing system has been associated.
Ce dispositif peut être particulièrement utile dans certaines applications et notamment lors de conférences, concerts ou tout autre évènement méritant une prise de sons de parfaite qualité.This device can be particularly useful in certain applications and in particular during conferences, concerts or any other event deserving of perfect quality sound recording.
Le dispositif selon l'invention permet de capter simultanément et indépendamment les sons provenants de plusieurs sources sonores, sans avoir à approcher les capteurs à proximité de ces sources, tout en donnant l'impression auditive que le son est capté près de chaque source. Pour cela, il permet de réduire la réverbération du son ainsi que le niveau du bruit ambiant.The device according to the invention makes it possible to simultaneously and independently capture the sounds coming from several sound sources, without having to approach the sensors close to these sources, while giving the auditory impression that the sound is picked up near each source. For this, it reduces the reverberation of the sound as well as the level of ambient noise.
De nombreux dispositifs de prise de sons ont déjà été élaborés en vue de capter des sons sans avoir à approcher les capteurs à proximité des sources.Many sound recording devices have already been developed with a view to picking up sounds without having to approach the sensors close to the sources.
Ces dispositifs comprennent des réseaux de capteurs, une unité de contrôle utilisant notamment des filtres pour le traitement des signaux reçus par les capteurs, et des moyens de réglage des paramètres caractéristiques de la prise de sons.These devices include networks of sensors, a control unit using in particular filters for processing the signals received by the sensors, and means for adjusting the parameters characteristic of the sound recording.
Cependant, de tels dispositifs ne permettent pas de régler indépendamment les paramètres caractéristiques de chacune des voies de réception du son, afin de capter séparément les sons issus de plusieurs sources sonores. On ne peut pas, non plus, contrôler les variations de ces paramètres par rapport à la position et à la taille des sources sonores à partir desquelles les sons sont captés.However, such devices do not make it possible to independently adjust the characteristic parameters of each of the sound reception channels, in order to separately capture the sounds coming from several sound sources. Nor can one control the variations of these parameters with respect to the position and size of the sound sources from which the sounds are picked up.
Le brevet EP 0 381 498 décrit, en outre, un dispositif de prise de sons comprenant un circuit de changement des coefficients des filtres numériques qui permet de faire varier, arbitrairement, les caractéristiques directionnelles des voies de réception du son.Patent EP 0 381 498 further describes a sound pickup device comprising a circuit for changing the coefficients of the digital filters which makes it possible to vary, arbitrarily, the directional characteristics of the sound reception channels.
Toutefois, lors du changement des coefficients des filtres, de petites perturbations sont audibles et nuisent à la qualité du son. Ces perturbations sont dues au changement brutal du jeu de paramètres caractéristiques de la prise de son, qui est régit par le changement des coefficients des filtres.However, when changing the filter coefficients, small disturbances are audible and affect the sound quality. These disturbances are due to the sudden change in the set of parameters characteristic of the sound recording, which is governed by the change in the coefficients of the filters.
Ces dispositifs ne permettent pas, en outre, d'obtenir toute la précision désirée pour le réglage des paramètres caractéristiques des voies de réception du son.These devices do not make it possible, moreover, to obtain all the precision desired for the adjustment of the parameters characteristic of the sound reception channels.
La présente invention permet de remédier à ce problème. Elle a en effet pour objet un dispositif comportant un réseau d'éléments capteurs, une unité de contrôle utilisant notamment des filtres pour le traitement des signaux reçus par les capteurs, une caméra et un écran vidéo. La caméra permet de fournir à l'écran un signal vidéo correspondant à l'image de la zone où se trouvent les sources sonores à partir desquelles le son est capté. L'écran vidéo, quant à lui, permet de visualiser, à la fois, les sources sonores, filmées par la caméra, et les variations des paramètres caractéristiques de chacune des voies de réception du son. Ainsi, on réalise un réglage très précis des paramètres en tenant compte de la position et de la taille des sources sonores.The present invention overcomes this problem. Its object is in fact a device comprising a network of sensor elements, a control unit using in particular filters for processing the signals received by the sensors, a camera and a video screen. The camera provides a video signal to the screen corresponding to the image of the area where the sound sources are located from which the sound is captured. The video screen, for its part, makes it possible to visualize, at the same time, the sound sources, filmed by the camera, and the variations of the characteristic parameters of each of the sound reception channels. Thus, a very precise adjustment of the parameters is carried out, taking into account the position and the size of the sound sources.
L'invention a plus particulièrement pour objet, un dispositif de prise de sons, comportant un réseau de capteurs, une unité de contrôle et des moyens de réglage des paramètres caractéristiques de la prise de sons, principalement caractérisé en ce qu'il comprend en outre une caméra vidéo, un écran vidéo qui affiche une première image vidéo, correspondant au signal issu de la caméra, et des moyens de couplage de l'écran aux moyens de réglage des paramètres caractéristiques de chacune des voies de réception du son. Ces moyens de couplage permettent de réaliser, pour chacune des voies de réception du son, une autre image vidéo, faisant apparaître les variations des paramètres caractéristiques, et de superposer cette image à la première image vidéo, de manière à contrôler le réglage de ces paramètres.A more particular subject of the invention is a device for taking sounds, comprising a network of sensors, a control unit and means for adjustment of the characteristic parameters of the sound recording, mainly characterized in that it further comprises a video camera, a video screen which displays a first video image, corresponding to the signal from the camera, and means for coupling the screen with means for adjusting the characteristic parameters of each of the sound reception channels. These coupling means make it possible to produce, for each of the sound reception channels, another video image, showing variations in the characteristic parameters, and to superimpose this image on the first video image, so as to control the adjustment of these parameters. .
L'invention a également pour objet un procédé de réglage des paramètres caractéristiques de la prise de sons caractérisé en ce que l'unité de contrôle réalise un traitement sur les signaux captés et sur les signaux, correspondants aux valeurs des paramètres, fournis par les moyens de réglage, comportant les étapes suivantes :
- filtrage des signaux captés par les filtres à interpolation linéaire,
- modification des coefficients des filtres pour chaque modification de paramètres,
- interpolation linéaire dans le temps, à chaque instant d'échantillonnage, entre deux valeurs, correspondant au renouvellement des filtres, qui sont modifiées à cadence régulière mais plus lente que la fréquence d'échantillonnage.
- filtering of signals picked up by filters with linear interpolation,
- modification of the filter coefficients for each modification of parameters,
- linear interpolation in time, at each sampling instant, between two values, corresponding to the renewal of the filters, which are modified at a regular rate but slower than the sampling frequency.
D'autres particularités et avantages de l'invention apparaîtront à la lecture de la description faite à titre d'exemple illustratif et non limitatif en référence aux figures annexées qui représentent :
- la figure 1, une vue d'ensemble d'un dispositif selon l'invention,
- la figure 2, un schéma plus détaillé du dispositif de la figure 1,
- la figure 3, un schéma de réalisation d'un capteur,
- la figure 4, un schéma de réalisation d'un moyen de réglage des paramètres caractéristiques d'une voie r de réception du son.
- FIG. 1, an overall view of a device according to the invention,
- FIG. 2, a more detailed diagram of the device of FIG. 1,
- FIG. 3, a diagram of an embodiment of a sensor,
- FIG. 4, a diagram of an embodiment of a means for adjusting the parameters characteristic of a channel r for receiving sound.
Un mode de réalisation d'un dispositif selon l'invention sera mieux compris au regard de la figure 1 qui décrit une vue d'ensemble d'un tel dispositif.An embodiment of a device according to the invention will be better understood with reference to Figure 1 which describes an overview of such a device.
Dans un premier temps, le champ optique d'une caméra 100 couvre toute la zone où se trouvent des sources sonores à partir desquelles le dispositif capte des sons. Le signal vidéo, issu de la caméra, est alors transmis à un écran vidéo 200 qui affiche une première image vidéo correspondante. La notion d'écran couvre tout type d'écran comme, par exemple, l'écran d'un moniteur vidéo.First, the optical field of a
La caméra fournit, d'autre part, une valeur de sa focale à une unité de contrôle 300, cette valeur est utile pour effectuer des calculs d'angles qui seront décrits de façon plus détaillée dans ce qui suit.The camera supplies, on the other hand, a value of its focal length to a
Dans un deuxième temps, des moyens de réglages 400 permettent de régler les paramètres caractéristiques de chacune des voies de réception du son. Le signal issu de ces moyens de réglage 400 est transmis à des moyens de couplage 500 de l'écran 200 aux moyens de réglage 400. Les moyens de couplage 500 permettent de réaliser, pour chacune des voies de réception du son, une autre image vidéo et de la superposer à la première image. Cette superposition d'images permet d'effectuer un réglage précis des paramètres caractéristiques de chaque voie de réception du son, et de contrôler les variations de ce réglage par rapport à la position et à la taille des sources sonores à partir desquelles le dispositif capte les sons.Secondly, adjustment means 400 make it possible to adjust the characteristic parameters of each of the sound reception channels. The signal from these adjustment means 400 is transmitted to coupling means 500 of the
Le signal représentant les valeurs des paramètres de réglage est également transmis à l'unité de contrôle 300 qui a notamment pour tâche de filtrer les signaux reçus par le réseau 600 de capteurs, et de remettre à jour, périodiquement, les coefficients des filtres.The signal representing the values of the adjustment parameters is also transmitted to the
La figure 2 fournit un schéma plus détaillé d'un dispositif conforme à l'invention.Figure 2 provides a more detailed diagram of a device according to the invention.
Le réseau 600 de capteurs comprend un nombre M de capteurs 610 ayant pour tâches de capter les sons issus de plusieurs sources sonores et de transmettre les signaux correspondants à une unité de contrôle 300. Cette unité de contrôle traite alors ces signaux, notamment par filtrage. Le nombre M de capteurs 610 est, de préférence, au moins égal à 2 et le numéro m associé à chaque capteur 610 varie par conséquent de 1 à M.The
Pour pouvoir effectuer le traitement des signaux reçus par les M capteurs 610, l'unité de contrôle doit également connaître les valeurs des paramètres caractéristiques de chaque voie de réception du son. C'est pourquoi des signaux, correspondant aux valeurs de ces paramètres, sont envoyés depuis le réseau 400 de moyens de réglage vers l'unité de contrôle. Ce réseau 400 comprend un nombre R de moyens de réglage 410. Chacun de ces moyens de réglage 410 des paramètres caractéristiques de la prise de sons correspond à une voie de réception du son. Le nombre R de moyens de réglage 410, et par conséquent le nombre de voies de réception du son, est, de préférence, au moins égal à 1 et le numéro r associé à chacun de ces moyens varie donc de 1 à R.To be able to process the signals received by the
En outre, à chaque voie r de réception du son, est associée une sortie 710 où les signaux sont disponibles.In addition, each channel r for receiving sound is associated with an
Pour réaliser une superposition d'images vidéo, on introduit, dans la structure du dispositif, des moyens de couplage 500 de l'écran vidéo 200 aux moyens de reglage 400.To achieve a superimposition of video images, means 500 of the
Ces moyens de couplage 500 comprennent, de manière avantageuse, pour chacun des moyens de réglage 410 des paramètres de chacune des voies de réception du son, un générateur vidéo 510 et un mélangeur vidéo 520. Le générateur vidéo 510 permet de transformer le signal, issu du moyen de réglage correspondant, en un signal vidéo. Le mélangeur 520 permet de mélanger, entre-eux, les signaux issus des générateurs vidéo, et de les mélanger également au signal issu de la caméra. Le signal issu du dernier mélangeur vidéo est alors envoyé vers l'écran 200. Ainsi, on obtient, sur la première image vidéo correspondant au signal issu de la caméra, une superposition des images faisant apparaître les variations des paramètres caractéristiques de chacune des voies de réception du son.These coupling means 500 advantageously comprise, for each of the
La figure 3 illustre la réalisation d'un capteur 610. Un tel capteur comprend un microphone 611, un préamplificateur 612, un filtre passe-bas 613 et un convertisseur analogique-numérique 614.FIG. 3 illustrates the construction of a
Le signal capté par le microphone 611 est injecté dans un préamplificateur 612 puis est filtré par le filtre passe-bas 613 pour éliminer le repliement spectral que pourrait introduire le convertisseur analogique-numérique 614. Chaque capteur reçoit un signal d'horloge qui règle la fréquence d'échantillonnage du convertisseur 614. Le signal échantillonné est quantifié par le convertisseur 614 et est transmis, sous forme numérique, à l'unité de contrôle qui le traitera.The signal picked up by the
Un schéma préféré de la réalisation d'un moyen de réglage, 410, des paramètres correspondant à une voie r de réception est illustré sur la figure 4.A preferred diagram of the realization of a means of adjustment, 410, of the parameters corresponding to a reception channel r is illustrated in FIG. 4.
Une commande 411 permet de fixer les valeurs des paramètres caractéristiques de la voie r de réception du son correspondante. Cette commande peut être mécanique ou électronique. Ce sera, par exemple, une manette, un bouton rotatif ou linéaire, une souris agissant sur un potentiomètre.A
Chacun des paramètres est converti en valeur numérique, à cadence fixe, par un convertisseur analogique-numérique 412. Ces valeurs numériques sont avantageusement comprises entre 1 et une valeur limite.Each of the parameters is converted into a digital value, at a fixed rate, by an analog-
La cadence d'échantillonnage des valeurs sera, de préférence, inférieure à la cadence d'échantillonnage dans les capteurs 610. On choisit, par exemple, une valeur de 25 Hz. Selon une variante, il est également possible de choisir une valeur dans la plage de fréquences comprises entre 1Hz et 50Hz.The sampling rate of the values will preferably be lower than the sampling rate in the
Après échantillonnage dans les convertisseurs 412, l'ensemble des valeurs des paramètres est transmis à l'unité de contrôle 300 de manière à ce qu'elle procède au traitement des signaux.After sampling in the
Les paramètres de réglage caractéristiques de chaque voie r de réception du son, sont les suivants :
- l'abscisse du point visé sur l'écran vidéo,
- l'ordonnée du point visé sur l'écran,
- la largeur de la voie r de réception formée notée c(r),
- la hauteur de la voie r de réception formée, notée d(r),
- la profondeur de la voie r de réception formée notée, p(r).
- the abscissa of the target point on the video screen,
- the ordinate of the target point on the screen,
- the width of the received reception channel r denoted c (r),
- the height of the reception channel r formed, denoted d (r),
- the depth of the reception channel r noted, p (r).
L'abscisse du point visé sur l'écran est en relation biunivoque avec l'angle horizontal de visée noté a(r), et l'ordonnée du point visé sur l'écran est en relation biunivoque avec l'angle vertical de visée noté b(r). La largeur et la hauteur de l'écran vidéo correspondent à la valeur de la focale de la caméra.The abscissa of the point aimed on the screen is in one-to-one relation with the horizontal angle of sight noted a (r), and the ordinate of the point aimed on the screen is in one-to-one relationship with the vertical angle of sight noted b (r). The width and height of the video screen correspond to the value of the focal length of the camera.
De ce fait, la caméra 100 fournit la valeur de sa focale à l'unité de contrôle 300, afin que cette dernière puisse faire correspondre des valeurs d'angles à l'abscisse et à l'ordonnée du point visé sur l'écran, qui est repéré dans un système d'unités arbitraire comme, par exemple, le pourcentage.As a result, the
Ainsi, on fixe à 0%, par exemple, la valeur minimum de l'abscisse, correspondant à la valeur du point le plus à gauche sur l'écran, et on fixe à 100% la valeur maximum de l'abscisse, correspondant à la valeur du point le plus à droite sur l'écran. L'unité de contrôle connaissant la valeur de la focale de la caméra, c'est à dire la valeur de l'angle maximum d'ouverture correspondant à la largeur de l'écran, définie par la valeur 100%; peut, par un simple rapport, déterminer la valeur de l'angle horizontal de visée, correspondant à une valeur quelconque de l'abscisse d'un point visé sur l'écran.Thus, we set at 0%, for example, the minimum value of the abscissa, corresponding to the value of the leftmost point on the screen, and we set at 100% the maximum value of the abscissa, corresponding to the value of the rightmost point on the screen. The control unit knowing the value of the focal length of the camera, that is to say the value of the maximum opening angle corresponding to the width of the screen, defined by the
De préférence, on définit par A, le nombre maximal de valeurs correspondantes à a(r), B le nombre maximal de valeurs correspondantes à b(r), C, le nombre maximal de valeurs correspondantes à c(r), D le nombre maximum de valeurs correspondantes à d(r) et P le nombre maximal de valeurs correspondante à p(r).Preferably, we define by A, the maximum number of values corresponding to a (r), B the maximum number of values corresponding to b (r), C, the maximum number of values corresponding to c (r), D the number maximum of values corresponding to d (r) and P the maximum number of values corresponding to p (r).
Selon un mode de mise en oeuvre de l'invention, un utilisateur fixe, de manière avantageuse, la valeur d'un paramètre, au moins, parmi tous ces paramètres. Les valeurs des paramètres qui ne sont pas fixées par l'utilisateur reçoivent, de manière avantageuse, une valeur par défaut, ou alors une valeur déduite d'un autre paramètre. Ainsi, par exemple, si la hauteur d(r) de la voie r de réception n'est pas réglée par l'utilisateur, la valeur prise peut être égale à la largeur c(r) de la voie r de réception.According to an embodiment of the invention, a user advantageously fixes the value of a parameter, at least, among all these parameters. The values of the parameters which are not set by the user advantageously receive a default value, or else a value deduced from another parameter. Thus, for example, if the height d (r) of the reception channel r is not adjusted by the user, the value taken can be equal to the width c (r) of the reception channel r.
Selon une autre variante, on considère que si un des paramètres n'est pas pertinent pour la réalisation du dispositif, sa valeur maximale et donc aussi sa valeur courante, sont fixées à 1.According to another variant, it is considered that if one of the parameters is not relevant for the production of the device, its maximum value and therefore also its current value, are fixed at 1.
L'unité de contrôle 300 permet de traiter les signaux issus des capteurs 610. Elle traite également les signaux, issus des moyens de réglage, représentant les valeurs des paramètres. Ces valeurs de paramètres influent sur le calcul des valeurs des coefficients des filtres numériques 310, c'est à dire sur les caractéristiques directionnelles des voies de réception du son. Par conséquent, les valeurs des paramètres des voies de réception jouent un rôle important dans le traitement des signaux issus des capteurs, puisque ces signaux ne seront pas traités de la même façon selon la caractéristique directionnelle que l'on fixe pour chaque voie de réception.The
Dans un premier temps, le traitement qui doit être réalisé sur les signaux provenant des M capteurs 610, consiste à former, à chaque instant n, les R signaux en sortie des voies focalisées. Ces signaux seront disponibles aux sorties 710.Firstly, the processing which must be carried out on the signals coming from the
Les signaux reçus par les M capteurs et convertis en signaux numériques, par les convertisseurs analogiques-numériques 614, aux instants d'échantillonnage n, sont notés x(m,n).The signals received by the M sensors and converted into digital signals, by the analog-
Ces signaux sont filtrés par R filtres numériques ayant un nombre Q de coefficients h(q,r,m,n), où q représente le numéro du coefficient et varie de 1 à Q, pour donner R signaux notés y(r,m,n) représentant les contributions à l'instant n du capteur m dans la voie r, selon l'équation suivante :
Conformément aux structures habituelles de la formation de voies large bande, décrites par S. Haykin et T. Kesler dans l'article "Relation between the radiation pattern of an array and the two-dimensional Discrete Fourier Transform", paru dans la revue IEEE transactions on Antennas and Propagation, Volume 23, numéro 3, pages 419-420, 1975, chaque sortie s(r,n) dans une voie r à l'instant n est obtenue en faisant la somme des M signaux y(r,m,n) suivant l'équation :
Le signal s(r,n) dans la voie r, est fourni, sous forme numérique, par l'unité de contrôle 300 à la sortie 710 correspondante.The signal s (r, n) in the channel r, is supplied, in digital form, by the
Une variante consisterait à fournir à la sortie 710 correspondante, le signal s(r,n) dans la voie r, sous forme analogique, après passage dans un convertisseur numérique-analogique.A variant would consist in supplying the
Dans un deuxième temps, le traitement qui doit être réalisé sur les signaux provenant des R moyens de réglage, consiste à modifier, à chaque instant n, les valeurs des coefficients des filtres afin de modifier les caractéristiques directionnelles des voies de réception du son.In a second step, the processing which must be carried out on the signals coming from the R adjustment means, consists in modifying, at each instant n, the values of the coefficients of the filters in order to modify the directional characteristics of the sound reception channels.
Les coefficients h(q,r,m,n) du filtre r dans la voie r, pour le capteur m, dépendent de l'instant n. Les coefficients sont remis à jour sur la base d'informations, c'est à dire sur la base des valeurs de paramètres acquises par l'unité de contrôle 300 depuis les R moyens de réglage 400 et transmises tous les N échantillons à l'unité de contrôle 300. Ainsi, si les coefficients sont mis à jour à l'instant no, ils le seront à nouveau à l'instant no+N.The coefficients h (q, r, m, n) of the filter r in the path r, for the sensor m, depend on the instant n. The coefficients are updated on the basis of information, that is to say on the basis of the parameter values acquired by the
De préférence, un procédé de réglage des paramètres caractéristiques de la prise de sons, consiste en outre, à reconstituer, par le calcul, les valeurs des coefficients des filtres, entre ces deux instants no et no + N. Ainsi, les valeurs des coefficients pourront être interpolées linéairement suivant l'équation :
L'unité de contrôle 300 calcule à chaque instant n les valeurs des coefficients h(q,r,m,n) des filtres 310 à partir des valeurs de paramètres reçues, à la cadence d'échantillonnage des convertisseurs 412, des R moyens de réglages 410.The
Lorsque les informations sont reçues à un instant noté no, l'unité de contrôle détermine, pour chaque voie r de réception du son, les valeurs des coefficients h(q,r,m,no + N) des filtres, qui servent à interpoler, au moyen de l'équation (3), les valeurs des coefficients h(q,r,m,n), entre l'instant présent no et l'instant no + N où sont reçues les informations suivantes.When the information is received at a time denoted n o , the control unit determines, for each channel r of reception of the sound, the values of the coefficients h (q, r, m, n o + N) of the filters, which serve at interpolate, using equation (3), the values of the coefficients h (q, r, m, n), between the present time n o and the time n o + N where the following information is received.
Les valeurs des coefficients sont donc interpolées dans le temps, à chaque instant d'échantillonnage, entre ces deux valeurs, no et no+N, qui sont modifiées à cadence régulière mais, de préférence, plus lente que la fréquence d'échantillonnage.The values of the coefficients are therefore interpolated over time, at each sampling instant, between these two values, n o and n o + N, which are modified at a regular rate but, preferably, slower than the sampling frequency .
Selon une variante, on peut appliquer deux fois les équations (1) et (2). En effet, on applique une première fois ces équations pour des filtres de coefficients h(q,r,m,no), ce qui donne les signaux suivants : yo(r,m,n) et so(r,n). On applique une deuxième fois ces équations pour des filtres de coefficients h(q,r,m,no+N) ce qui donne les signaux suivants : yN(r,m,n) et sN(r,n).Alternatively, equations (1) and (2) can be applied twice. Indeed, these equations are applied for the first time for filters with coefficients h (q, r, m, n o ), which gives the following signals: y o (r, m, n) and s o (r, n ). These equations are applied a second time for filters of coefficients h (q, r, m, n o + N) which gives the following signals: y N (r, m, n) and s N (r, n).
L'interpolation est alors effectuée au niveau des signaux de sortie s(r,n) selon la relation :
Une autre variante de ce procédé consisterait à interpoler les valeurs des coefficients des filtres 310, non seulement dans le temps mais aussi dans l'espace. Dans ce cas, les coefficients des filtres seraient aussi interpolés entre deux positions, visualisées sur l'écran, correspondant au renouvellement des coefficients des filtres.Another variant of this method would consist in interpolating the values of the coefficients of the
Les valeurs des coefficients des filtres 310 sont fonctions des réglages, donnés par le manipulateur à travers les commandes 411 des moyens de réglage 410, et décrits par les paramètres a(r), b(r), c(r), d(r), p(r).The values of the coefficients of the
On note F(a,b,c,d,p) cette fonction. Elle fournit, pour chaque valeur de quintuplet (a,b,c,d,p) de paramètres, un vecteur QxM représentant les Q coefficients des filtres, correspondants aux R voies de réception du son des M capteurs, lorsque les réglages sont (a,b,c,d,p). Ainsi, les coefficients h(q,r,m,no) sont lus dans le vecteur QxM dont les composantes sont notées f(m,q) pour m variant de 1 à M et q variant de 1 à Q et on obtient :
L'unité de contrôle applique R fois cette fonction F pour obtenir les valeurs des coefficients des filtres correspondants aux R voies de réception formées.The control unit applies R times this function F to obtain the values of the coefficients of the filters corresponding to the R reception channels formed.
Pour aboutir à une expression de la fonction permettant de calculer les valeurs des coefficients des filtres, on procède en plusieurs étapes.To obtain an expression of the function used to calculate the values of the filter coefficients, we proceed in several stages.
Une première étape consiste à déterminer les coordonnées de la position d'une source sonore réelle et les coordonnées des positions de sources sonores fictives prises comme référence. Ainsi, pour trouver les coordonnées d'une source sonore réelle, on détermine, par exemple, l'angle horizontal ua du faisceau centré sur la direction définie par a, l'angle vertical vb du faisceau centré sur la direction définie par b, les angles horizontaux, ua1 et ua2, qui forment les limites horizontales du faisceau centré sur la direction définie par a et de largeur définie par c, et enfin, les angles verticaux, vb1 et vb2 qui forment les limites verticales du faisceau centré sur la direction définie par b et de largeur définie par d.A first step consists in determining the coordinates of the position of an actual sound source and the coordinates of the positions of fictitious sound sources taken as a reference. Thus, to find the coordinates of a real sound source, we determine, for example, the horizontal angle u a of the beam centered on the direction defined by a, the vertical angle v b of the beam centered on the direction defined by b , the horizontal angles, u a1 and u a2 , which form the horizontal limits of the beam centered on the direction defined by a and of width defined by c, and finally, the vertical angles, v b1 and v b2 which form the vertical limits of beam centered on the direction defined by b and of width defined by d.
Pour trouver les coordonnées des positions de sources sonores fictives, on choisit tout d'abord un nombre K de positions de référence, définie chacune par le couple d'angles horizontal et vertical (uk, vk) pour k variant de 1 à K.To find the coordinates of the positions of fictitious sound sources, we first choose a number K of reference positions, each defined by the pair of horizontal and vertical angles (u k , v k ) for k varying from 1 to K.
Ces sources de référence sont avantageusement réparties de manière uniforme, dans le carré
[-Π,Π] x[-Π,Π] privé de sa partie centrale
[u1,u2] x [v1, v2]. On choisit ensuite L fréquences de référence notées fi, pour i variant de 1 à L, et une distance de référence qui est, de préférence, une valeur de profondeur p.These reference sources are advantageously distributed uniformly, in the square
[-Π, Π] x [-Π, Π] deprived of its central part
[u 1 , u 2 ] x [v 1 , v 2 ]. We then choose L reference frequencies noted f i , for i varying from 1 to L, and a reference distance which is preferably a depth value p.
L'origine dans l'espace à trois dimensions est avantageusement définie par la position de la caméra 100. Les coordonnées des positions des sources de référence sont alors calculées à partir de leur expression qui est la suivante :
Pour chaque source fictive k et pour chaque capteur m, on calcule la distance z(k,m) entre la source et le capteur. On calcule également les fonctions de transfert depuis les sources de référence jusqu'aux capteurs, pour les fréquences de référence. La fonction de transfert t(m,k,fi), pour le capteur m, la source k et la fréquence fi, est donnée par l'équation (5) où j désigne la racine de -1 et V la vitesse du son :
Cette fonction de transfert permet, dans une deuxième étape, d'établir les expressions des gains obtenus, pour les sons fictifs issus de sources sonores de référence, et de fixer les gains, que l'on souhaite obtenir, pour ces mêmes sons fictifs. Avec le filtre, dont les coefficients sont f(m,q), le son issu d'une source, située à une position k, sera reçu, pour une fréquence fi, avec un gain g(k,fi) qui se détermine selon l'équation :
On fixe les gains souhaités gs(k,fi) correspondants aux sons issus des sources sonores situées aux positions de référence, ceci pour des fréquences de référence fi.The desired gains g s (k, f i ) corresponding to the sounds originating from the sound sources situated at the reference positions are fixed, this for reference frequencies f i .
Dans une troisième étape, on établit une expression de l'écart entre les gains obtenus et les gains souhaités. Cet écart représente une erreur, qui peut être réduite à une valeur seuil, que l'on s'est fixée, en utilisant, par exemple, la méthode de calcul des moindres carrés. On obtient alors une expression, qui représente le carré de l'erreur que l'on désire réduire à une valeur seuil et qui s'écrit sous la forme :
Cette équation (7) représente une somme de carrés et de doubles produits. Cela signifie que le critère donné par l'équation (7) est quadratique en g(k,fi). De même le critère donné par l'équation (6) est quadratique en f(m,q). La réduction de l'erreur à une valeur seuil conduit à un système en ces inconnues f(m,q), qui admet une solution unique. La solution de F est obtenue par dérivation de l'équation (7) par rapport aux valeurs des coefficients f(m,q).This equation (7) represents a sum of squares and double products. This means that the criterion given by equation (7) is quadratic in g (k, f i ). Likewise the criterion given by equation (6) is quadratic in f (m, q). The reduction of the error to a threshold value leads to a system in these unknowns f (m, q), which admits a unique solution. The solution of F is obtained by derivation of equation (7) with respect to the values of the coefficients f (m, q).
Si on écrit T(k,f), le vecteur contenant les composantes de t(m,k,f)e -2Πfq pour tous les couples [m,q] listés dans le même ordre que le vecteur QxM représentant F(a,b,c,d,p), une solution de F s'écrit :
Dans une dernière étape on peut déterminer les valeurs des coefficients des filtres à partir de l'expression de la fonction F ainsi trouvée. Pour pouvoir déterminer les valeurs de ces coefficients, il existe deux possibilités.In a final step, the values of the filter coefficients can be determined from the expression of the function F thus found. To be able to determine the values of these coefficients, there are two possibilities.
Selon une première variante, les valeurs des coefficients sont déterminées, avant toute manipulation, à partir de la fonction F et pour des valeurs fixées de paramètres, puis elles sont mémorisées dans un tableau.According to a first variant, the values of the coefficients are determined, before any manipulation, from the function F and for fixed values of parameters, then they are stored in a table.
Ce tableau peut, par exemple, être un tableau à deux dimensions comprenant QxM lignes et AxBxCxDxP colonnes. Dans ce cas, des quintuplets (a,b,c,d,p) de paramètres, par exemple, définissent les indices des colonnes et les numéros q des coefficients des filtres correspondant à chaque capteur m définissent les indices des lignes. Cependant, la dimension du tableau peut être plus élevée si on décide de séparer les quintuplets en 2, 3, 4, ou 5 paramètres distincts et si on décide de distinguer les Q coefficients et les M capteurs pour les ranger dans des lignes et des colonnes séparées. Cette mémorisation des valeurs des coefficients dans un tableau permet de changer les valeurs des coefficients plus rapidement au cours de la manipulation de prise de sons, pour des valeurs fixées de paramètres. Les coefficients changeront de valeurs uniquement lorsque les valeurs des quintuplets de paramètres, qui sont fixées et mémorisées dans le tableau, seront atteintes. Entre ces valeurs de quintuplets, correspondantes à la remise à jour des filtres, les valeurs des coefficients pourront, par exemple, être interpolées.This table can, for example, be a two-dimensional table comprising QxM rows and AxBxCxDxP columns. In this case, quintuplets (a, b, c, d, p) of parameters, for example, define the indices of the columns and the numbers q of the coefficients of the filters corresponding to each sensor m define the indices of the lines. However, the dimension of the table can be higher if we decide to separate the quintuplets into 2, 3, 4, or 5 distinct parameters and if we decide to distinguish the Q coefficients and the M sensors to store them in rows and columns separated. This memorization of the values of the coefficients in a table makes it possible to change the values of the coefficients more quickly during the manipulation of sound recording, for fixed values of parameters. The coefficients will change values only when the values of the quintuplets of parameters, which are fixed and stored in the table, are reached. Between these quintuplet values, corresponding to the updating of filters, the values of the coefficients could, for example, be interpolated.
Selon une deuxième variante, les valeurs des coefficients de chaque filtre, sont déterminées en temps réel, à partir de l'expression de la fonction F et pour des valeurs de paramètres variant de façon continue. Dans ce cas, les coefficients des filtres sont, de préférence, remis à jour à cadence régulière et leurs valeurs sont interpolées selon l'équation (3) précédemment établie.According to a second variant, the values of the coefficients of each filter are determined in real time, from the expression of the function F and for values of parameters varying continuously. In this case, the coefficients of the filters are preferably updated at regular rate and their values are interpolated according to equation (3) previously established.
L'orientation de la caméra et celle du réseau de capteurs doivent être reliées, par un moyen quelconque, afin d'éviter tout décalage entre, d'une part, l'image représentant la position des sources sonores, et d'autre part, les images faisant apparaître la variation des paramètres caractéristiques des voies de réception du son. De cette façon, on peut visualiser très précisément la variation des paramètres par rapport à la position et à la taille des sources sonores.The orientation of the camera and that of the sensor network must be connected, by any means, in order to avoid any discrepancy between, on the one hand, the image representing the position of the sound sources, and on the other hand, the images showing the variation of the characteristic parameters of the sound reception channels. In this way, one can visualize very precisely the variation of the parameters compared to the position and the size of the sound sources.
Un autre mode de réalisation d'un dispositif selon l'invention concerne, par conséquent, la fixation de la caméra 100 par rapport au réseau 600 de capteurs. La caméra 100 est avantageusement fixée sur le même bâti que le réseau 600 de capteurs de façon à ce que son pointage soit strictement invariant par rapport à la position des capteurs.Another embodiment of a device according to the invention therefore relates to fixing the
Une variante de ce système consiste à ne pas fixer la caméra 100 sur le même bâti que le réseau 600 de capteurs. Dans ce cas, le réseau de capteurs doit avoir une position fixe dans l'espace et la caméra doit, elle aussi, avoir une position et une orientation fixe dans l'espace pour obtenir un pointage des sources sonores qui soit invariant par rapport aux positions des capteurs.A variant of this system consists in not fixing the
Selon une autre variante de réalisation du dispositif selon l'invention, il est possible de rajouter une télécommande permettant d'effectuer à distance les règlages du système vidéo de pointage. Cependant, dans ce cas, un utilisateur n'a pas forcément accès au système vidéo, si bien qu'il ne peut pas visualiser les réglages effectués. C'est pourquoi, il est en outre préférable d'équiper le dispositif d'un système de retour auditif, permettant à l'utilisateur de faire les réglages directement, à l'aide des signaux sonores lui parvenant. Le retour auditif est par exemple réalisé au moyen d'un écouteur placé dans le conduit auditif de l'utilisateur et relié au dispositif par un câble, ou mieux, par l'intermédiaire d'un canal Hertzien.According to another alternative embodiment of the device according to the invention, it is possible to add a remote control making it possible to remotely adjust the video pointing system. However, in this case, a user does not necessarily have access to the video system, so that he cannot view the settings made. This is why, it is also preferable to equip the device with a hearing feedback system, allowing the user to make the adjustments directly, using the audible signals reaching him. Hearing feedback is for example achieved by means of an earpiece placed in the user's ear canal and connected to the device by a cable, or better, via a Hertzian channel.
Claims (9)
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR9415429A FR2728753A1 (en) | 1994-12-21 | 1994-12-21 | SOUND TAKING DEVICE INCLUDING A VIDEO SYSTEM FOR PARAMETER ADJUSTMENT AND ADJUSTMENT PROCEDURE |
FR9415429 | 1994-12-21 |
Publications (2)
Publication Number | Publication Date |
---|---|
EP0719070A1 true EP0719070A1 (en) | 1996-06-26 |
EP0719070B1 EP0719070B1 (en) | 1997-09-17 |
Family
ID=9470076
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
EP95402816A Expired - Lifetime EP0719070B1 (en) | 1994-12-21 | 1995-12-14 | Sound pick-up device, comprising a video system for the adjustment of parameters and process for adjusting |
Country Status (6)
Country | Link |
---|---|
US (1) | US5760825A (en) |
EP (1) | EP0719070B1 (en) |
JP (1) | JP3575775B2 (en) |
CA (1) | CA2165512C (en) |
DE (1) | DE69500732T2 (en) |
FR (1) | FR2728753A1 (en) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5959667A (en) * | 1996-05-09 | 1999-09-28 | Vtel Corporation | Voice activated camera preset selection system and method of operation |
US6269483B1 (en) * | 1998-12-17 | 2001-07-31 | International Business Machines Corp. | Method and apparatus for using audio level to make a multimedia conference dormant |
US6868372B2 (en) | 2000-04-12 | 2005-03-15 | Home Box Office, Inc. | Image and audio degradation simulator |
FR2832282B1 (en) * | 2001-11-12 | 2004-07-30 | France Telecom | MODULAR AUDIOVISUAL SYSTEM WITH CONCATENABLE MODULES FOR PRESENTING A LOCAL SCENE AND A REMOTE SCENE |
JP2003244800A (en) * | 2002-02-14 | 2003-08-29 | Matsushita Electric Ind Co Ltd | Sound image localization apparatus |
JP2005311604A (en) * | 2004-04-20 | 2005-11-04 | Sony Corp | Information processing apparatus and program used for information processing apparatus |
KR101547809B1 (en) * | 2011-07-01 | 2015-08-27 | 돌비 레버러토리즈 라이쎈싱 코오포레이션 | Synchronization and switchover methods and systems for an adaptive audio system |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4802227A (en) * | 1987-04-03 | 1989-01-31 | American Telephone And Telegraph Company | Noise reduction processing arrangement for microphone arrays |
EP0352627A2 (en) * | 1988-07-20 | 1990-01-31 | Sanyo Electric Co., Ltd. | Sound reproducer |
EP0356327A1 (en) * | 1988-08-19 | 1990-02-28 | France Telecom | Apparatus for picking up sound signals with noise cancellation |
JPH03245203A (en) * | 1990-02-23 | 1991-10-31 | Yamatake Honeywell Co Ltd | Method and device for display of trend of estimated value in estimation control |
EP0578183A2 (en) * | 1992-07-06 | 1994-01-12 | Sanyo Electric Co., Ltd. | Remote control system for video camera |
WO1994016517A1 (en) * | 1993-01-12 | 1994-07-21 | Bell Communications Research, Inc. | Sound localization system for teleconferencing using self-steering microphone arrays |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69326751T2 (en) * | 1992-08-27 | 2000-05-11 | Toshiba Kawasaki Kk | MOTION IMAGE ENCODER |
US5548346A (en) * | 1993-11-05 | 1996-08-20 | Hitachi, Ltd. | Apparatus for integrally controlling audio and video signals in real time and multi-site communication control method |
-
1994
- 1994-12-21 FR FR9415429A patent/FR2728753A1/en active Granted
-
1995
- 1995-12-14 EP EP95402816A patent/EP0719070B1/en not_active Expired - Lifetime
- 1995-12-14 DE DE69500732T patent/DE69500732T2/en not_active Expired - Lifetime
- 1995-12-18 US US08/574,397 patent/US5760825A/en not_active Expired - Lifetime
- 1995-12-18 CA CA002165512A patent/CA2165512C/en not_active Expired - Fee Related
- 1995-12-21 JP JP34988495A patent/JP3575775B2/en not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4802227A (en) * | 1987-04-03 | 1989-01-31 | American Telephone And Telegraph Company | Noise reduction processing arrangement for microphone arrays |
EP0352627A2 (en) * | 1988-07-20 | 1990-01-31 | Sanyo Electric Co., Ltd. | Sound reproducer |
EP0356327A1 (en) * | 1988-08-19 | 1990-02-28 | France Telecom | Apparatus for picking up sound signals with noise cancellation |
JPH03245203A (en) * | 1990-02-23 | 1991-10-31 | Yamatake Honeywell Co Ltd | Method and device for display of trend of estimated value in estimation control |
EP0578183A2 (en) * | 1992-07-06 | 1994-01-12 | Sanyo Electric Co., Ltd. | Remote control system for video camera |
WO1994016517A1 (en) * | 1993-01-12 | 1994-07-21 | Bell Communications Research, Inc. | Sound localization system for teleconferencing using self-steering microphone arrays |
Non-Patent Citations (1)
Title |
---|
PATENT ABSTRACTS OF JAPAN vol. 16, no. 39 (P - 1305) 30 January 1992 (1992-01-30) * |
Also Published As
Publication number | Publication date |
---|---|
DE69500732T2 (en) | 1998-02-12 |
DE69500732D1 (en) | 1997-10-23 |
FR2728753A1 (en) | 1996-06-28 |
US5760825A (en) | 1998-06-02 |
FR2728753B1 (en) | 1997-02-28 |
CA2165512A1 (en) | 1996-06-22 |
CA2165512C (en) | 2006-09-19 |
JPH08265894A (en) | 1996-10-11 |
JP3575775B2 (en) | 2004-10-13 |
EP0719070B1 (en) | 1997-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US5696831A (en) | Audio reproducing apparatus corresponding to picture | |
US20080044033A1 (en) | Sound pickup device and sound pickup method | |
EP1836876B1 (en) | Method and device for individualizing hrtfs by modeling | |
JP2020509492A (en) | Recording virtual and real objects in mixed reality devices | |
US20150022636A1 (en) | Method and system for voice capture using face detection in noisy environments | |
CN114189793A (en) | Techniques to direct audio in augmented reality systems | |
EP1586220B1 (en) | Method and device for controlling a reproduction unit using a multi-channel signal | |
FR2738099A1 (en) | METHOD FOR SIMULATING THE ACOUSTIC QUALITY OF A ROOM AND ASSOCIATED AUDIO-DIGITAL PROCESSOR | |
JP2015149634A (en) | Image display device and method | |
EP0719070B1 (en) | Sound pick-up device, comprising a video system for the adjustment of parameters and process for adjusting | |
EP2478715B1 (en) | Method for acquiring audio signals, and audio acquisition system thereof | |
US20020071661A1 (en) | Audio and video reproduction apparatus | |
EP1502475B1 (en) | Method and system of representing a sound field | |
JP2022184863A (en) | Information acquisition system and control method of information acquisition system | |
US10122990B2 (en) | Imaging system and method of producing context and focus images | |
FR3065137A1 (en) | SOUND SPATIALIZATION METHOD | |
JP4458128B2 (en) | Direction detection device, direction detection method and direction detection program, and direction control device, direction control method and direction control program | |
US11917394B1 (en) | System and method for reducing noise in binaural or stereo audio | |
JP5998483B2 (en) | Audio signal processing apparatus, audio signal processing method, program, and recording medium | |
CN112020854A (en) | Image pickup apparatus, image pickup system, and image pickup method | |
WO2020043979A1 (en) | Method for the spatial sound reproduction of a sound field that is audible in a position of a moving listener and system implementing such a method | |
CN111246345A (en) | Method and device for real-time virtual reproduction of remote sound field | |
EP2987339B1 (en) | Method for acoustical reproduction of a numerical audio signal | |
FR3069693B1 (en) | METHOD AND SYSTEM FOR PROCESSING AUDIO SIGNAL INCLUDING ENCODING IN AMBASSIC FORMAT | |
CN116723229A (en) | Immersive remote audio transmission system and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase |
Free format text: ORIGINAL CODE: 0009012 |
|
AK | Designated contracting states |
Kind code of ref document: A1 Designated state(s): DE FR GB IT |
|
17P | Request for examination filed |
Effective date: 19960709 |
|
17Q | First examination report despatched |
Effective date: 19960905 |
|
GRAG | Despatch of communication of intention to grant |
Free format text: ORIGINAL CODE: EPIDOS AGRA |
|
GRAH | Despatch of communication of intention to grant a patent |
Free format text: ORIGINAL CODE: EPIDOS IGRA |
|
GRAH | Despatch of communication of intention to grant a patent |
Free format text: ORIGINAL CODE: EPIDOS IGRA |
|
GRAA | (expected) grant |
Free format text: ORIGINAL CODE: 0009210 |
|
AK | Designated contracting states |
Kind code of ref document: B1 Designated state(s): DE FR GB IT |
|
ITF | It: translation for a ep patent filed |
Owner name: PORTA CHECCACCI E BOTTI S.R.L. |
|
GBT | Gb: translation of ep patent filed (gb section 77(6)(a)/1977) |
Effective date: 19970919 |
|
REF | Corresponds to: |
Ref document number: 69500732 Country of ref document: DE Date of ref document: 19971023 |
|
PLBE | No opposition filed within time limit |
Free format text: ORIGINAL CODE: 0009261 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT |
|
26N | No opposition filed | ||
REG | Reference to a national code |
Ref country code: GB Ref legal event code: IF02 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: IT Payment date: 20081218 Year of fee payment: 14 |
|
REG | Reference to a national code |
Ref country code: GB Ref legal event code: 732E Free format text: REGISTERED BETWEEN 20090528 AND 20090603 |
|
REG | Reference to a national code |
Ref country code: FR Ref legal event code: TP |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IT Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20091214 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: DE Payment date: 20111230 Year of fee payment: 17 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: GB Payment date: 20121128 Year of fee payment: 18 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: FR Payment date: 20121219 Year of fee payment: 18 |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R119 Ref document number: 69500732 Country of ref document: DE Effective date: 20130702 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: DE Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20130702 |
|
GBPC | Gb: european patent ceased through non-payment of renewal fee |
Effective date: 20131214 |
|
REG | Reference to a national code |
Ref country code: FR Ref legal event code: ST Effective date: 20140829 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: FR Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20131231 Ref country code: GB Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20131214 |