WO2007086387A1 - 撮像装置、撮像制御方法及び撮像制御プログラム - Google Patents

撮像装置、撮像制御方法及び撮像制御プログラム Download PDF

Info

Publication number
WO2007086387A1
WO2007086387A1 PCT/JP2007/051014 JP2007051014W WO2007086387A1 WO 2007086387 A1 WO2007086387 A1 WO 2007086387A1 JP 2007051014 W JP2007051014 W JP 2007051014W WO 2007086387 A1 WO2007086387 A1 WO 2007086387A1
Authority
WO
WIPO (PCT)
Prior art keywords
value
light amount
light quantity
imaging
compression rate
Prior art date
Application number
PCT/JP2007/051014
Other languages
English (en)
French (fr)
Inventor
Satoshi Hosokawa
Original Assignee
Nec Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nec Corporation filed Critical Nec Corporation
Priority to JP2007555955A priority Critical patent/JPWO2007086387A1/ja
Priority to EP20070707265 priority patent/EP1981264A4/en
Priority to US12/160,657 priority patent/US7965321B2/en
Publication of WO2007086387A1 publication Critical patent/WO2007086387A1/ja

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Definitions

  • Imaging apparatus imaging control method, and imaging control program
  • the present invention relates to an imaging device, an imaging control method, and an imaging control program, and more particularly to an imaging device that images a subject, generates image data, and compresses the generated image data.
  • the present invention relates to an imaging control method and an imaging control program. Background art
  • an image sensor has a weak output signal when the subject environment is dark. Therefore, it is common to control the signal input time longer depending on the brightness of the input signal (shutter speed). control).
  • the original image signal is a weak signal.
  • the signal input time greatly fluctuates even outdoors, indoors, etc.
  • the communication terminal device since the communication terminal device has a structure that is very susceptible to camera shake, the effect of camera shake increases as the signal input time increases. Blur appears as a factor that blurs the image, and as a result, the degree of blurring of the image becomes very large because the subject environment becomes dark.
  • video encoders such as MPEG-4, H.263, etc. that are used during video recording, convert images to frequency domain using DCT (Discrete Cosine Transform), and then naturally It is possible to achieve a high compression ratio by intentionally cutting a few high-frequency components in the image. For this reason, if the image quality is high while maintaining a certain level of image quality, images with many high-frequency components cannot be compressed efficiently, increasing the amount of code per frame, and vice versa. In addition, in the case of an image with a low high-frequency component, the amount of code per frame tends to be small.
  • DCT Discrete Cosine Transform
  • the correlation between the brightness of the subject environment and the code amount per frame in the video encoder is applied, and the frame rate according to the brightness of the subject environment is applied. It is desired to perform control so as to suppress fluctuations.
  • an imaging unit that captures a subject image and outputs digital image data
  • a diaphragm unit that controls the amount of light incident on the imaging unit
  • the imaging unit Based on the aperture value of the aperture unit, a still camera including a data compression unit that compresses the image data from the unit and a recording medium that stores the image data compressed by the compression unit,
  • compression ratio control means for controlling the compression ratio of the data compression means is provided and the compression coefficient for data compression is automatically selected!
  • Patent Document 1 JP-A-7-177463
  • the above-mentioned patent document 1 controls the compression rate of the data compression unit based on the aperture value of the aperture unit, thereby automatically selecting the compression coefficient for data compression.
  • the ratio can be selected at low speed with low power consumption, and the brightness of the subject environment is applied by applying the correlation between the brightness of the subject environment and the amount of code per frame in the video encoder.
  • the point of controlling to suppress the fluctuation of the frame rate due to the above is not taken into consideration.
  • the present invention has been made in view of the above circumstances, and applies a correlation between the brightness of the subject environment and the code amount per frame in the video encoder, and the frame based on the brightness of the subject environment. It is an object of the present invention to provide an imaging apparatus, an imaging control method, and an imaging control program that can suppress rate fluctuations.
  • the present invention has the following characteristics.
  • An imaging apparatus includes an imaging unit that captures an image of a subject and acquires image data, a compression unit that compresses image data acquired by the imaging unit in units of frames, and an image acquired by the imaging unit.
  • the light amount information calculating means for calculating the light amount information including the shutter speed and the gain value, and the compression for determining the compression rate to be compressed in the frame unit by the compression means based on the light amount information calculated by the light amount information calculating means Rate determining means, and the compression means compresses the image data in units of frames based on the compression rate determined by the compression ratio determining means.
  • the imaging apparatus associates light amount value calculating means for calculating a light amount value for determining a compression rate, a threshold value, and a compression rate based on the light amount information.
  • a threshold table suitable for the light intensity value calculated by the light intensity value calculating means and referring to the reference table based on the selected threshold value and associating with a threshold appropriate for the light intensity value.
  • the obtained compression rate is acquired, and the compression rate for compressing in units of frames is determined by the compression means.
  • the reference table manages the threshold value and the compression rate in association with each other in order from the smallest threshold value, and the light amount value calculated by the light amount value calculating unit and the reference
  • the threshold value managed in the table is compared in order of threshold force and threshold value, and the light intensity value calculated by the light intensity value calculating means is determined as the light intensity value calculated by the light intensity value calculating means is smaller than the threshold value. Is selected as a threshold suitable for the value.
  • the imaging means controls the shutter speed and the gain value based on the light amount information calculated by the light amount information calculating means, and images the subject. is there.
  • an imaging control method is an imaging control method in an imaging apparatus having an imaging unit that captures an image of a subject and acquires image data, and the image data acquired by the imaging unit is framed.
  • the light quantity information calculation process for calculating the light quantity information including the shutter speed and the gain value based on the image data acquired by the imaging means, and the light quantity information calculated by the light quantity information calculation process.
  • the image pickup apparatus performs a compression rate determination step for determining a compression rate to be compressed in units of frames by the compression step. It is characterized by being compressed in units.
  • the imaging apparatus has a reference table that manages the threshold value and the compression rate in association with each other, and determines the compression rate based on the light amount information.
  • the imaging device performs a light amount value calculating step for calculating a light amount value for the light amount, selects a threshold value suitable for the light amount value calculated by the light amount value calculating step, and refers to the reference table based on the selected threshold value, A compression rate associated with a threshold value suitable for a quantity value is acquired, and a compression rate to be compressed in units of frames is determined by a compression process.
  • the reference table manages the threshold value and the compression rate in association with each other in the order of small threshold value!
  • the light intensity value calculated by the reference value table and the threshold value managed in the reference table are compared in order of threshold force and threshold force, and the threshold value determined that the light intensity value calculated by the light intensity value calculation process is smaller than the threshold value It is characterized in that it is selected as a threshold value suitable for the light quantity value calculated in the value calculation process.
  • an imaging control program is an imaging control program that is executed in an imaging apparatus having an imaging unit that images a subject and acquires image data, and the image data acquired by the imaging unit is framed.
  • light amount information calculation processing for calculating light amount information including shutter speed and gain value based on image data acquired by the imaging means, and light amount information calculated by the light amount information calculation processing.
  • the image processing apparatus executes a compression rate determination process for determining a compression rate for compressing in units of frames by the compression process, and the compression process is performed on the basis of the compression rate determined by the compression rate determination process. It is characterized by compressing into units.
  • the imaging apparatus has a reference table that manages the threshold value and the compression rate in association with each other, and determines the compression rate based on the light amount information.
  • the imaging device execute the light intensity value calculation process to calculate the light intensity value, select a threshold value suitable for the light intensity value calculated by the light intensity value calculation process, and refer to the reference table based on the selected threshold value to determine the light intensity value.
  • a compression rate associated with a threshold suitable for the value is acquired, and a compression rate to be compressed in units of frames is determined by compression processing.
  • the reference table manages the threshold value and the compression rate in association with each other in order from the smallest threshold value, and the light amount value calculated by the light amount value calculation process and the threshold value managed in the reference table. , Are compared in order of threshold force and threshold force, and a threshold value determined that the light amount value calculated by the light amount value calculation process is smaller than the threshold value is selected as a threshold value suitable for the light amount value calculated by the light amount value calculation process. It is characterized by this.
  • the light amount information including the shutter speed and the gain value is calculated based on the image data acquired by the imaging unit, and the compression rate is compressed in units of frames based on the calculated light amount information.
  • the image data is converted into frame units based on the determined compression rate. This makes it possible to suppress fluctuations in the frame rate due to the brightness of the subject environment.
  • the imaging apparatus captures an image of a subject and acquires image data (corresponding to the imaging unit 1 and the imaging control unit 2), and image data acquired by the imaging unit (1, 2). And a light quantity information calculating means for calculating light quantity information including a shutter speed and a gain value based on the image data acquired by the imaging means (1, 2). (Corresponding to the imaging control unit 2) and the compression rate determination means for determining the compression rate for each frame by the compression means (3) based on the light quantity information calculated by the light quantity information calculation means (2) ( The compression means (3) is based on the compression rate determined by the compression rate determination means (5, 6). It is characterized by compression.
  • FIG. 2 is a diagram illustrating the configuration of the imaging apparatus according to the present embodiment.
  • the imaging apparatus includes an imaging unit (1), an imaging control unit (2), a video encoder unit (3), a memory card (4), and parameter search.
  • a processing unit (5) and a parameter storage unit (6) are included.
  • the imaging unit (1) is for imaging imaging data for moving image shooting, and outputs the imaging data captured by the imaging unit (1) to the imaging control unit (2).
  • the imaging control unit (2) controls the imaging unit (1), performs image processing on the imaging data output from the imaging unit (2), and performs the image processing. Output the data to the video encoder (3).
  • the imaging control unit (2) is a DSP (Digital Signal Processor) Consists of a signal processor.
  • the imaging control unit (2) controls the imaging unit (1), and the imaging control unit (2) controls the light amount information (shutter of the imaging data output from the imaging unit (1)). Speed and gain value) and adjusting the shutter speed and gain value of the imaging unit (1) so that the brightness of the imaging data output from the imaging unit (1) is an appropriate value. Become.
  • the video encoder unit (3) is an encoder such as MPEG-4 or H.263.
  • the video encoder unit (3) is generally used, and is composed of dedicated hardware or a signal processor such as a DSP.
  • the parameter search processing unit (5) acquires the light amount information (shirt speed and gain value) calculated by the imaging control unit (2), and based on the acquired light amount information, Determine an appropriate parameter value (compression ratio) to be set in the encoder section (3).
  • the parameter search processing unit (5) can also be configured by software.
  • the parameter storage unit (6) stores a reference table (61) that is referred to when the parameter search processing unit (5) determines parameter values.
  • the reference table (61) can also be configured as software fixed data.
  • the reference table (61) includes a plurality of columns including a parameter table in which threshold values and parameter values are combined, and is configured so that the threshold values are selected in ascending order of the threshold values. .
  • the memory card (4) is for storing image data such as a video stream. Note that the memory card (4) can also be configured in a connection format such as being inserted into a slot (not shown) of the imaging device. The memory card (4) can be replaced with a non-volatile memory built in the image pickup apparatus.
  • the imaging unit (1) images a subject and acquires imaging data (step Sl).
  • the imaging unit (1) outputs the acquired imaging data to the imaging control unit (2).
  • the imaging control unit (2) performs image processing on the imaging data output from the imaging unit (1) to generate image data (step S2).
  • the imaging control unit (2) converts the generated image data into Output to the video encoder (3).
  • the video encoder unit (3) performs MPEG-based processing on the image data output from the imaging control unit (2) based on the parameter value (compression rate) set by the parameter search processing unit (5).
  • a video stream is generated by performing compression processing using a codec algorithm such as 4, H.263 (step S3).
  • the video encoder unit (3) records the generated video stream on the memory card (4) (step S4). Note that the series of control operations shown in FIG. 3 described above are performed in units of frames, and the imaging apparatus of the present embodiment repeatedly performs the series of control operations shown in FIG. 3 described above in units of frames.
  • the video stream for a certain section is recorded on the memory card (4).
  • the imaging control unit (2) always captures light amount information (shutter) of the imaging data output from the imaging unit (1) while shooting!
  • the imaging control unit (2) sets the calculated light intensity information (shutter speed and gain value) in the imaging unit (1), and is always optimal.
  • Light intensity information is set in the imaging unit (1).
  • the parameter search processing unit (5) performs the series of search processes shown in FIG. 4 in parallel with the series of control operations shown in FIG.
  • the parameter search processing unit (5) acquires light amount information (shutter speed and gain value) calculated by the imaging control unit (2) (step S11).
  • the parameter search processing unit (5) calculates a light amount value based on the acquired light amount information (step S12), and based on the calculated light amount value, the parameter storage unit (6) Referring to the reference table (61) stored in the table, the optimum parameter value (compression ratio) associated with the threshold value I, which is suitable for the calculated light quantity value, is determined (steps S13 to S13). Step S 16
  • the information corresponding to the brightness of the subject environment is a function of the light amount information.
  • the light quantity information there is a case where only one is present in the imaging unit (1), and there is a case where the gain value is separated into two or more such as an analog part and a digital part.
  • the gain Value power When the analog part and the digital part are separated, the analog gain value and
  • Two gain values are obtained: a digital gain value.
  • the parameter search processing unit (5) is based on the light amount information acquired from the imaging control unit (2).
  • the light amount value: A is calculated by an appropriate calculation formula corresponding to the imaging unit (1) (step S12).
  • Amount of light As the calculation formula of A, for example, the following “calculation formula: 1” or “calculation formula:
  • the parameter search processing unit (5) initializes the threshold value: I to 0 (step S13), and compares the light amount value: A calculated in step S12 with the threshold value: I. (Step S14), the optimal threshold value: I is stored in the parameter storage unit (6) while adding the threshold value: I by 1 until the calculated light quantity value: A is smaller than the threshold value: 1.
  • the reference table (61) force will be selected (step S14 to step S16).
  • the reference table (61) is configured such that the threshold value: I is smaller in order, the threshold value I finally selected in step S16 is the light amount calculated in step S12. Value: A value greater than A “light quantity value: A and threshold value: I”, and the calculated light quantity value: closest to A, the value threshold value: I is selected.
  • the parameter search processing unit (5) acquires the parameter value associated with the selected threshold value: I by referring to the reference table (61), and uses the acquired parameter value as a video encoder. (Step S17).
  • step S18ZYes when the parameter search processing unit (5) determines that a certain time has passed (step S18ZYes), the parameter search processing unit (5) returns to step S1 again and is shown in FIG. A series of search processes will be repeated.
  • the fixed time that becomes the waiting time can be set arbitrarily, and it is desirable to set a time of about 1Z30 seconds to 2 seconds as the fixed time.
  • the imaging apparatus performs a series of parameter search processes shown in FIG.
  • the determined parameter value is set in the video encoder section (6). It becomes possible.
  • the actual parameter value (compression rate) is such that the value of the meter (compression rate) decreases and the value (does not cut the high frequency component) as shown in Fig. 5 (b).
  • the parameter value (compression rate) is set to a higher value (value for cutting high-frequency components) for the brightness and region.
  • the parameter value (compression rate) has been fixed in the past, so the code amount per frame varies depending on the brightness of the subject environment.
  • the brightness of the subject environment is controlled by controlling the parameter value to vary based on the light intensity information calculated by the imaging control unit (2) as in the control operation of the form. Regardless of this, the code amount per frame can be held at a constant value.
  • the imaging apparatus is a parameter set in the video encoder unit (6) based on the light amount information (shutter speed and gain value) calculated by the imaging control unit (2).
  • the value (compression rate) as shown in Fig. 5 (b)
  • the code amount for each frame can be kept constant regardless of the brightness of the subject environment.
  • frame skipping due to insufficient bandwidth can be suppressed, and a constant frame rate can be maintained at all times.
  • the imaging apparatus is stored in the parameter storage unit (6) and can determine an optimal parameter value based on the reference table (61). It is possible to execute the series of processing operations shown in FIG. 4 using the idle time of the CPU. In addition, it can be realized at low cost without the need to add complicated control to the video encoder unit (3).
  • the optimal parameter value is determined based on the light amount information calculated based on the imaging data captured by the imaging unit (1). Based on the determined parameter value (compression ratio), the control operation described above can be applied to the upstream video processing of an imaging device equipped with the power videophone function. Is possible.
  • control operation in the imaging apparatus of the present embodiment described above can be executed by software such as a computer program, which is not a hardware configuration, and the above program is stored in an optical recording medium or a magnetic recording medium. Recording on a recording medium such as a magneto-optical recording medium or a semiconductor, and the above-mentioned control operation can be executed in the imaging apparatus by causing the imaging apparatus to read the above-mentioned program into an imaging apparatus capable of capturing an image. Is also possible.
  • the imaging device, the imaging control method, and the imaging control program according to the present invention can be applied to an imaging device with a built-in camera function such as a PHS or a mobile phone or a videophone function.
  • FIG. 1 is a diagram showing a correlation between brightness of a subject environment and a code amount per frame in a video encoder.
  • FIG. 2 is a diagram illustrating a configuration of an imaging apparatus according to the present embodiment.
  • FIG. 3 is a diagram showing a series of control operations in the imaging apparatus of the present embodiment.
  • FIG. 4 is a diagram showing a series of processing operations in a parameter search processing unit (5) constituting the imaging apparatus of the present embodiment.
  • FIG. 5 A diagram showing the correlation between the brightness of the subject environment and the amount of code per frame.
  • A shows the conventional control operation in which the parameter value (compression rate) was fixedly controlled.
  • B is a diagram showing the case of the control operation of the present embodiment in which the parameter value (compression rate) is controlled to vary.

Abstract

　被写体環境の明るさによるフレームレートの変動を抑制することを可能とする撮像装置を提供する。 　被写体を撮像し、画像データを取得する撮像手段（１、２）と、撮像手段（１、２）により取得した画像データをフレーム単位に圧縮する圧縮手段（３）と、撮像手段（１、２）により取得した画像データを基に、シャッタースピード及びゲイン値を含む光量情報を算出する光量情報算出手段（２）と、光量情報算出手段（２）により算出した光量情報を基に、圧縮手段（３）によりフレーム単位に圧縮する圧縮率を決定する圧縮率決定手段（５、６）と、を有し、圧縮手段（３）は、圧縮率決定手段（５、６）により決定した圧縮率を基に、画像データをフレーム単位に圧縮する。

Description

明 細 書
撮像装置、撮像制御方法及び撮像制御プログラム
技術分野
[0001] 本発明は、撮像装置、撮像制御方法及び撮像制御プログラムに関し、特に、被写 体を撮像し、画像データを生成し、その生成した画像データを圧縮する撮像装置、そ の撮像装置における撮像制御方法及び撮像制御プログラムに関するものである。 背景技術
[0002] 従来、画像データのノイズ量、あるいは、画像データの複雑度に応じて、画像デー タを圧縮するための圧縮率を変化させる技術は存在するが、処理内容が複雑になり 、また、入力画像全体に対する画像処理が必要なため、負荷が高ぐ上述した技術 を実装するのが困難であった。
[0003] また、上述した技術を実装しない場合、被写体環境の明るさによる符号量の変動が 激しぐ被写体環境が暗い場合には、フレームレートが維持されていても、被写体環 境が明るい場合には、フレームレートが一気に低下するという問題が発生することに なる。
[0004] 一般的に、撮像素子は、被写体環境が暗いと、出力信号も微弱となるため、入力信 号の明るさに応じて信号入力時間を長くとる制御が一般的である（シャッタースピード の制御)。
[0005] なお、携帯電話機等の通信端末装置に搭載されるような小面積のカメラセンサ (撮 像部)の場合には、もともとの画像信号が微弱な信号となるため、通常の撮影環境（ 例えば、屋外，屋内等)であっても信号入力時間は大きく変動することになる。
[0006] また、通信端末装置では、手ブレの影響を非常に受け易い構造であるため、信号 入力時間が長くなると画像に対するブレの影響が大きくなる。ブレは、画像をぼかす 要因として現れるため、結果として、被写体環境が暗くなることで、画像がぼける度合 いが非常に大きくなる。
[0007] これに対し、動画撮影時に使用される MPEG— 4, H. 263などの映像エンコーダ は、 DCT (Discrete Cosine Transform)により画像を周波数領域に変換した後、自然 画像には少ない高周波成分を意図的にカットすることで高い圧縮率を実現すること が可能である。このため、一定程度の画質を維持しつつ、符号ィ匕しょうとした場合に、 高周波成分が多い画像の場合は、効率よく圧縮することができず、 1フレーム当たり の符号量が増加し、逆に、高周波成分が低い画像の場合は、 1フレーム当たりの符 号量が少なくて済む傾向がある。
[0008] 以上のことから、通信端末装置における動画撮影では、被写体環境の明るさと、映 像エンコーダにおける 1フレーム当たりの符号量と、の間に、図 1に示すような相関関 係があることが判明する。
[0009] このため、図 1に示すような、被写体環境の明るさと、映像エンコーダにおける 1フレ ーム当たりの符号量と、の相関関係を適用し、被写体環境の明るさによるフレームレ ートの変動を抑制するように制御することが望まれる。
[0010] なお、本発明より先に出願された特許文献として、被写体像を撮像してデジタル画 像データを出力する撮像手段と、前記撮像手段への入射光量を制御する絞り手段と 、前記撮像手段からの画像データを圧縮するデータ圧縮手段と、前記圧縮手段によ り圧縮された画像データを格納する記録媒体とを備えたスチルカメラにぉ ヽて、前記 絞り手段の絞り値に基づいて、前記データ圧縮手段の圧縮率を制御する圧縮率制 御手段を備え、データ圧縮の圧縮係数を自動的に選定する場合にお！ヽて圧縮率選 定を低消費電力でかつ高速に行うことを可能とするスチルカメラが開示された文献が ある (例えば、特許文献 1参照)。
特許文献 1 :特開平 7— 177463号公報
発明の開示
発明が解決しょうとする課題
[0011] なお、上記特許文献 1は、絞り手段の絞り値に基づいて、データ圧縮手段の圧縮率 を制御することで、データ圧縮の圧縮係数を自動的に選定する場合にお!、て圧縮率 選定を低消費電力でかつ高速に行うことを可能とするものであり、被写体環境の明る さと、映像エンコーダにおける 1フレーム当たりの符号量と、の相関関係を適用し、被 写体環境の明るさによるフレームレートの変動を抑制するように制御する点について は考慮されたものではな 、。 [0012] 本発明は、上記事情に鑑みてなされたものであり、被写体環境の明るさと、映像ェ ンコーダにおける 1フレーム当たりの符号量と、の相関関係を適用し、被写体環境の 明るさによるフレームレートの変動を抑制することを可能とする撮像装置、撮像制御 方法及び撮像制御プログラムを提供することを目的とするものである。
課題を解決するための手段
[0013] かかる目的を達成するために、本発明は以下の特徴を有することとする。
[0014] 本発明にカゝかる撮像装置は、被写体を撮像し、画像データを取得する撮像手段と 、撮像手段により取得した画像データをフレーム単位に圧縮する圧縮手段と、撮像 手段により取得した画像データを基に、シャッタースピード及びゲイン値を含む光量 情報を算出する光量情報算出手段と、光量情報算出手段により算出した光量情報を 基に、圧縮手段によりフレーム単位に圧縮する圧縮率を決定する圧縮率決定手段と 、を有し、圧縮手段は、圧縮率決定手段により決定した圧縮率を基に、画像データを フレーム単位に圧縮することを特徴とするものである。
[0015] また、本発明に力かる撮像装置は、光量情報を基に、圧縮率を決定するための光 量値を算出する光量値算出手段と、閾値と、圧縮率と、を対応付けて管理する参照 テーブルと、を有し、光量値算出手段により算出した光量値に適した閾値を選定し、 該選定した閾値を基に、参照テーブルを参照し、光量値に適した閾値に対応付けら れた圧縮率を取得し、圧縮手段によりフレーム単位に圧縮する圧縮率を決定すること を特徴とするものである。
[0016] また、本発明にかかる撮像装置において、光量値算出手段は、光量値: Aを、光量 値: A=シャッタースピード Xゲイン値により算出することを特徴とするものである。
[0017] また、本発明にかかる撮像装置において、光量値算出手段は、光量値: Aを、光量 値: A =シャッタースピード +ゲイン値により算出することを特徴とするものである。
[0018] また、本発明にかかる撮像装置において、参照テーブルは、閾値が小さい値から 順に、閾値と、圧縮率と、を対応づけて管理し、光量値算出手段により算出した光量 値と、参照テーブルで管理している閾値と、を閾値力 、さい値力 順に比較し、光量 値算出手段により算出した光量値が、閾値よりも小さいと判断した閾値を、光量値算 出手段により算出した光量値に適した閾値として選定することを特徴とするものであ る。
[0019] また、本発明に力かる撮像装置にぉ 、て、光量情報が、アナログゲイン値と、デジタ ルゲイン値と、の 2つのゲイン値を含む情報の場合には、光量値算出手段は、光量 値： Aを、光量値： A=シャッタースピード Xゲイン値（アナログゲイン値 Xデジタルゲ イン値）により算出することを特徴とするものである。
[0020] また、本発明に力かる撮像装置にぉ 、て、光量情報が、アナログゲイン値と、デジタ ルゲイン値と、の 2つのゲイン値を含む情報の場合には、光量値算出手段は、光量 値： Aを、光量値： A=シャッタースピード +ゲイン値（アナログゲイン値 +デジタルゲ イン値）により算出することを特徴とするものである。
[0021] また、本発明にかかる撮像装置において、撮像手段は、光量情報算出手段により 算出した光量情報を基に、シャッタースピード及びゲイン値を制御し、被写体を撮像 することを特徴とするものである。
[0022] また、本発明にカゝかる撮像制御方法は、被写体を撮像し、画像データを取得する 撮像手段を有する撮像装置における撮像制御方法であって、撮像手段により取得し た画像データをフレーム単位に圧縮する圧縮工程と、撮像手段により取得した画像 データを基に、シャッタースピード及びゲイン値を含む光量情報を算出する光量情報 算出工程と、光量情報算出工程により算出した光量情報を基に、圧縮工程によりフレ ーム単位に圧縮する圧縮率を決定する圧縮率決定工程と、を、撮像装置が行い、圧 縮工程は、圧縮率決定工程により決定した圧縮率を基に、画像データをフレーム単 位に圧縮することを特徴とするものである。
[0023] また、本発明に力かる撮像制御方法は、撮像装置は、閾値と、圧縮率と、を対応付 けて管理する参照テーブルを有し、光量情報を基に、圧縮率を決定するための光量 値を算出する光量値算出工程を、撮像装置が行い、光量値算出工程により算出した 光量値に適した閾値を選定し、該選定した閾値を基に、参照テーブルを参照し、光 量値に適した閾値に対応付けられた圧縮率を取得し、圧縮工程によりフレーム単位 に圧縮する圧縮率を決定することを特徴とするものである。
[0024] また、本発明にかかる撮像制御方法において、光量値算出工程は、光量値: Aを、 光量値: A=シャッタースピード Xゲイン値により算出することを特徴とするものである [0025] また、本発明にかかる撮像制御方法において、光量値算出工程は、光量値: Aを、 光量値： A =シャッタースピード +ゲイン値により算出することを特徴とするものである
[0026] また、本発明に力かる撮像制御方法にぉ 、て、参照テーブルは、閾値が小さ!/、値 力も順に、閾値と、圧縮率と、を対応づけて管理し、光量値算出工程により算出した 光量値と、参照テーブルで管理している閾値と、を閾値力 、さい値力 順に比較し、 光量値算出工程により算出した光量値が、閾値よりも小さいと判断した閾値を、光量 値算出工程により算出した光量値に適した閾値として選定することを特徴とするもの である。
[0027] また、本発明にかかる撮像制御方法において、光量情報が、アナログゲイン値と、 デジタルゲイン値と、の 2つのゲイン値を含む情報の場合には、光量値算出工程は、 光量値： Aを、光量値： A=シャッタースピード Xゲイン値（アナログゲイン値 Xデジタ ルゲイン値）により算出することを特徴とするものである。
[0028] また、本発明にかかる撮像制御方法において、光量情報が、アナログゲイン値と、 デジタルゲイン値と、の 2つのゲイン値を含む情報の場合には、光量値算出工程は、 光量値： Aを、光量値： A=シャッタースピード +ゲイン値（アナログゲイン値 +デジタ ルゲイン値）により算出することを特徴とするものである。
[0029] また、本発明に力かる撮像制御プログラムは、被写体を撮像し、画像データを取得 する撮像手段を有する撮像装置において実行させる撮像制御プログラムであって、 撮像手段により取得した画像データをフレーム単位に圧縮する圧縮処理と、撮像手 段により取得した画像データを基に、シャッタースピード及びゲイン値を含む光量情 報を算出する光量情報算出処理と、光量情報算出処理により算出した光量情報を基 に、圧縮処理によりフレーム単位に圧縮する圧縮率を決定する圧縮率決定処理と、 を、撮像装置に実行させ、圧縮処理は、圧縮率決定処理により決定した圧縮率を基 に、画像データをフレーム単位に圧縮することを特徴とするものである。
[0030] また、本発明に力かる撮像制御プログラムは、撮像装置は、閾値と、圧縮率と、を対 応付けて管理する参照テーブルを有し、光量情報を基に、圧縮率を決定するための 光量値を算出する光量値算出処理を、撮像装置に実行させ、光量値算出処理により 算出した光量値に適した閾値を選定し、該選定した閾値を基に、参照テーブルを参 照し、光量値に適した閾値に対応付けられた圧縮率を取得し、圧縮処理によりフレー ム単位に圧縮する圧縮率を決定することを特徴とするものである。
[0031] また、本発明にかかる撮像制御プログラムにおいて、光量値算出処理は、光量値： Aを、光量値: A=シャッタースピード Xゲイン値により算出することを特徴とするもの である。
[0032] また、本発明にかかる撮像制御プログラムにおいて、光量値算出処理は、光量値： Aを、光量値: A=シャッタースピード +ゲイン値により算出することを特徴とするもの である。
[0033] また、本発明に力かる撮像制御プログラムにお！/、て、参照テーブルは、閾値が小さ い値から順に、閾値と、圧縮率と、を対応づけて管理し、光量値算出処理により算出 した光量値と、参照テーブルで管理している閾値と、を閾値力 、さい値力 順に比較 し、光量値算出処理により算出した光量値が、閾値よりも小さいと判断した閾値を、光 量値算出処理により算出した光量値に適した閾値として選定することを特徴とするも のである。
[0034] また、本発明に力かる撮像制御プログラムにお 、て、光量情報が、アナログゲイン 値と、デジタルゲイン値と、の 2つのゲイン値を含む情報の場合には、光量値算出処 理は、光量値: Aを、光量値: A=シャッタースピード Xゲイン値（アナログゲイン値 X デジタルゲイン値）により算出することを特徴とするものである。
[0035] また、本発明に力かる撮像制御プログラムにお 、て、光量情報が、アナログゲイン 値と、デジタルゲイン値と、の 2つのゲイン値を含む情報の場合には、光量値算出処 理は、光量値: Aを、光量値: A=シャッタースピード +ゲイン値（アナログゲイン値 + デジタルゲイン値）により算出することを特徴とするものである。
発明の効果
[0036] 本発明によれば、撮像手段により取得した画像データを基に、シャッタースピード及 びゲイン値を含む光量情報を算出し、その算出した光量情報を基に、フレーム単位 に圧縮する圧縮率を決定し、その決定した圧縮率を基に、画像データをフレーム単 位に圧縮することで、被写体環境の明るさによるフレームレートの変動を抑制すること が可能となる。
発明を実施するための最良の形態
[0037] まず、図 2を参照しながら、本実施形態における撮像装置の特徴について説明する
[0038] 本実施形態における撮像装置は、被写体を撮像し、画像データを取得する撮像手 段 (撮像部 1、撮像制御部 2に相当）と、撮像手段（1、 2)により取得した画像データを フレーム単位に圧縮する圧縮手段（映像エンコーダ部 3に相当）と、撮像手段（1、 2) により取得した画像データを基に、シャッタースピード及びゲイン値を含む光量情報 を算出する光量情報算出手段 (撮像制御部 2に相当）と、光量情報算出手段 (2)によ り算出した光量情報を基に、圧縮手段（3)によりフレーム単位に圧縮する圧縮率を決 定する圧縮率決定手段 (パラメータ検索処理部 5、ノラメータ格納部 6に相当）と、を 有し、圧縮手段 (3)は、圧縮率決定手段 (5、 6)により決定した圧縮率を基に、画像 データをフレーム単位に圧縮することを特徴とするものである。これにより、被写体環 境の明るさによらずフレーム毎の符号量を一定の値に保つことが可能となり、帯域不 足によるフレームスキップを抑制し、常に、一定のフレームレートを維持させることが 可能となる。以下、添付図面を参照しながら、本実施形態における撮像装置につい て説明する。
[0039] まず、図 2を参照しながら、本実施形態における撮像装置の構成について説明する 。なお、図 2は、本実施形態における撮像装置の構成を示す図である。
[0040] 本実施形態における撮像装置は、図 2に示すように、撮像部（1)と、撮像制御部（2 )と、映像エンコーダ部（3)と、メモリカード (4)と、パラメータ検索処理部（5)と、パラメ ータ格納部（6)と、を有して構成される。
[0041] 撮像部（1)は、動画撮影用の撮像データを撮像するためのものであり、撮像部（1) において撮像した撮像データを撮像制御部（2)に出力する。
[0042] 撮像制御部（2)は、撮像部（1)を制御し、また、撮像部（2)から出力された撮像デ ータに対し、画像処理を施し、その画像処理を施した画像データを、映像エンコーダ 部（3)に出力する。なお、撮像制御部（2)は、 DSP (Digital Signal Processor)などの 信号処理プロセッサで構成される。
[0043] また、撮像制御部（2)は、撮像部（1)を制御することになり、撮像制御部（2)は、撮 像部（1)から出力された撮像データの光量情報 (シャッタースピード、及び、ゲイン値 )を算出し、撮像部（1)から出力される撮像データの明度が適正値となるように、撮像 部（1)のシャッタースピード、及び、ゲイン値を調節することになる。
[0044] 映像エンコーダ部（3)は、 MPEG— 4、 H. 263などのエンコーダである。映像ェン コーダ部（3)は、一般的に使用されているものであり、専用のハードウェア、または、 DSPなどの信号処理プロセッサで構成される。
[0045] パラメータ検索処理部（5)は、撮像制御部（2)にお 、て算出した光量情報 (シャツタ 一スピード、及び、ゲイン値)を取得し、その取得した光量情報を基に、映像ェンコ一 ダ部（3)に設定する適切なパラメータ値 (圧縮率)を決定する。なお、パラメータ検索 処理部（5)は、ソフトウェアにて構成することも可能である。
[0046] パラメータ格納部（6)は、パラメータ検索処理部（5)がパラメータ値を決定する際に 参照する参照テーブル (61)を格納するものである。なお、参照テーブル (61)は、ソ フトウェアの固定データとして構成することも可能である。なお、参照テーブル (61)は 、閾値と、パラメータ値と、が組み合わされたパラメータ表が複数列含まれて構成され ており、閾値の小さ 、方力 順に選択されるように構成されて 、る。
[0047] メモリカード (4)は、映像ストリーム等の画像データを保存するためのものである。な お、メモリカード (4)は、撮像装置のスロット部（図示せず）に挿入する等の接続形式 で構成することも可能である。また、メモリカード (4)は、撮像装置に内蔵された不揮 発性のメモリにて代替することも可能である。
[0048] (撮像装置における制御動作）
次に、図 3を参照しながら、本実施形態における撮像装置における一連の制御動 作について説明する。
[0049] まず、撮像部（1)は、被写体を撮像し、撮像データを取得する (ステップ Sl)。次に 、撮像部（1)は、その取得した撮像データを、撮像制御部（2)に出力する。撮像制御 部（2)は、撮像部（1)から出力された撮像データに対し、画像処理を施し、画像デー タを生成する (ステップ S 2)。次に、撮像制御部（2)は、その生成した画像データを、 映像エンコーダ部（3)に出力する。
[0050] 映像エンコーダ部（3)は、撮像制御部（2)から出力された画像データに対し、パラ メータ検索処理部（5)から設定されたパラメータ値 (圧縮率)を基に、 MPEG— 4,H. 263などのコーデックアルゴリズムにより圧縮処理を施し、映像ストリームを生成する（ ステップ S3)。そして、映像エンコーダ部（3)は、その生成した映像ストリームを、メモ リカード (4)に記録する (ステップ S4)。なお、上述した図 3に示す一連の制御動作は 、フレーム単位で行うことになり、本実施形態の撮像装置は、上述した図 3に示す一 連の制御動作をフレーム単位で繰り返し行うことで、一定区間分の映像ストリームをメ モリカード (4)に記録することになる。
[0051] なお、本実施形態における撮像装置は、撮像制御部（2)は、撮影を行って!/ヽる間 は、常に、撮像部（1)から出力された撮像データの光量情報 (シャッタースピード、及 び、ゲイン値)を算出しており、撮像制御部（2)は、その算出した光量情報 (シャツタ 一スピード、及び、ゲイン値)を撮像部（1)に設定し、常に最適な光量情報 (シャツタ 一スピード、及び、ゲイン値)を撮像部（1)に設定することになる。
[0052] 次に、図 4を参照しながら、本実施形態の撮像装置の特徴部分となるパラメータ検 索処理部（5)における検索処理につ!、て説明する。
[0053] 本実施形態における撮像装置は、パラメータ検索処理部（5)が、図 4に示す一連の 検索処理を、上述した図 3に示す一連の制御動作と並行して行うことになる。
[0054] まず、パラメータ検索処理部（5)は、撮像制御部（2)において算出した光量情報（ シャッタースピード、及び、ゲイン値）を取得する（ステップ S 11)。
[0055] 次に、パラメータ検索処理部（5)は、その取得した光量情報を基に、光量値を算出 し (ステップ S 12)、その算出した光量値を基に、パラメータ格納部（6)に格納されて いる参照テーブル (61)を参照し、上記算出した光量値に適した閾値: Iに対応付けら れた最適なパラメータ値 (圧縮率)を決定することになる (ステップ S 13〜ステップ S 16
) o
[0056] なお、被写体環境の明るさに相当する情報は、光量情報の関数になっている。光 量情報については、撮像部（1)にとり片方しか存在しない場合もあるし、また、ゲイン 値がアナログ部とデジタル部などの 2つ以上に分離している場合もある。なお、ゲイン 値力 アナログ部とデジタル部との 2つに分離している場合には、アナログゲイン値と
、デジタルゲイン値と、の 2つのゲイン値を得ることになる。
[0057] まず、パラメータ検索処理部（5)は、撮像制御部（2)から取得した光量情報を基に
、撮像部（1)に応じた適切な計算式にて光量値: Aを算出する (ステップ S12)。なお
、光量値: Aの算出式としては、例えば、以下のような『算出式：1』、または、『算出式:
2』を適用することが可能である。
[0058] 光量値： A=シャッタースピード Xゲイン値（ =アナログゲイン値 Xデジタルゲイン 値） · · ·『算出式: 1』
[0059] 光量値： A=シャッタースピード +ゲイン値（ =アナログゲイン値 +デジタルゲイン 値）…『算出式: 2』
[0060] 次に、パラメータ検索処理部（5)は、閾値: Iを 0に初期化し (ステップ S 13)、上記ス テツプ S12において算出した光量値: Aと、閾値: Iと、を比較し (ステップ S 14)、上記 算出した光量値: Aが、閾値 :1よりも小さくなるまで、閾値: Iを 1ずつ加算させながら、 最適な閾値: Iをパラメータ格納部（6)に格納された参照テーブル (61)力 選択する ことになる（ステップ S 14〜ステップ S 16)。
[0061] なお、参照テーブル (61)は、閾値: Iが小さい方力も順に並んで構成されているた め、ステップ S16において最終的に選択される閾値: Iは、上記ステップ S12において 算出した光量値: Aより大きい値『光量値: Aく閾値: I』で、尚かつ、上記算出した光 量値： Aに最も近 、値の閾値： Iが選択されることになる。
[0062] 次に、パラメータ検索処理部（5)は、上記選択された閾値: Iに対応付けられたパラ メータ値を参照テーブル (61)力 取得し、その取得したパラメータ値を映像ェンコ一 ダ部（3)に設定することになる (ステップ S 17)。
[0063] 次に、パラメータ検索処理部（5)は、一定時間が経過したと判断した際に (ステップ S18ZYes)、パラメータ検索処理部（5)は、再び、ステップ S1に戻り、図 4に示す一 連の検索処理を繰り返すことになる。なお、待ち時間となる一定時間は、任意に設定 することが可能であり、一定時間としては、 1Z30秒〜 2秒程度の時間を設定すること が望ましい。
[0064] このように、本実施形態における撮像装置は、図 4に示す一連のパラメータ検索処 理を行うことで、刻々と変化する被写体環境の明るさに応じた最適なパラメータ値 (圧 縮率)を決定し、その決定したパラメータ値 (圧縮率)を映像エンコーダ部（6)に設定 することが可能となる。
[0065] なお、実際のパラメータ値 (圧縮率）としては、図 5 (b)に示すように、喑 、領域ほど、 ノ メータ値 (圧縮率)を低 、値 (高周波成分をカットしな 、値）に設定し、明る 、領域 ほど、パラメータ値 (圧縮率)を高い値 (高周波成分をカットする値）に設定することに なる。これにより、従来は、図 5 (a)に示すように、パラメータ値 (圧縮率)を固定にして いたため、被写体環境の明るさにより 1フレーム当たりの符号量が変動することになる 力 本実施形態の制御動作のように、撮像制御部（2)において算出した光量情報を 基に、パラメータ値を変動させるように制御することで、図 5 (b)に示すように、被写体 環境の明るさによらず 1フレーム当たり符号量を一定の値に保持することが可能とな る。
[0066] このように、本実施形態における撮像装置は、撮像制御部（2)において算出した光 量情報 (シャッタースピード、及び、ゲイン値）に基づき、映像エンコーダ部（6)に設 定するパラメータ値 (圧縮率)を変化させることで、図 5 (b)に示すように、被写体環境 の明るさによらずフレーム毎の符号量を一定の値に保つことが可能となる。これにより 、帯域不足によるフレームスキップを抑制し、常に、一定のフレームレートを維持させ ることが可能となる。
[0067] また、本実施形態における撮像装置は、パラメータ格納部（6)に格納されて 、る参 照テーブル (61)を基に、最適なパラメータ値を決定することが可能となるため、既存 の CPU等の空き時間を利用して上述した図 4に示す一連の処理動作を実行させるこ とが可能となる。また、映像エンコーダ部（3)に対して複雑な制御を追加する必要が なぐ低コストで実現することが可能となる。
[0068] なお、上述する実施形態は、本発明の好適な実施形態であり、上記実施形態のみ に本発明の範囲を限定するものではなぐ本発明の要旨を逸脱しない範囲において 種々の変更を施した形態での実施が可能である。
[0069] 例えば、上述する撮像装置における一連の処理動作は、撮像部（1)にお 、て撮像 した撮像データを基に算出した光量情報を基に、最適なパラメータ値 (圧縮率)を決 定し、その決定したパラメータ値 (圧縮率)を基に、画像データを圧縮することにした 力 TV電話機能を搭載した撮像装置の上り映像処理に対しても上述した制御動作 を適用することは可能である。
[0070] また、上述した本実施形態の撮像装置における制御動作は、ハード構成ではなぐ コンピュータプログラム等のソフトウェアにより実行することも可能であり、また、上記の プログラムは、光記録媒体、磁気記録媒体、光磁気記録媒体、または半導体等の記 録媒体に記録し、その記録媒体力も上記プログラムを、映像を撮像可能な撮像装置 に読み込ませることで、上述した制御動作を、撮像装置において実行させることも可 能である。また、所定のネットワークを介して接続されている外部機器力も上記プログ ラムを撮像装置に読み込ませることで、上述した制御動作を、撮像装置において実 行させることち可會である。
産業上の利用可能性
[0071] 本発明に力かる撮像装置、撮像制御方法及び撮像制御プログラムは、 PHS、携帯 電話機等のカメラ機能や、 TV電話機能が内蔵された撮像装置に適用可能である。 図面の簡単な説明
[0072] [図 1]被写体環境の明るさと、映像エンコーダにおける 1フレーム当たりの符号量と、 の相関関係を示す図である。
[図 2]本実施形態の撮像装置の構成を示す図である。
[図 3]本実施形態の撮像装置における一連の制御動作を示す図である。
[図 4]本実施形態の撮像装置を構成するパラメータ検索処理部（5)における一連の 処理動作を示す図である。
[図 5]被写体環境の明るさと、 1フレーム当たりの符号量と、の相関関係を示す図であ り、（a)は、パラメータ値 (圧縮率)を固定制御していた従来の制御動作の場合を示し 、（b)は、パラメータ値 (圧縮率)を変動制御する本実施形態の制御動作の場合を示 す図である。
符号の説明
[0073] 1 撮像部
2 撮像制御部 映像エンコーダ部 メモリカード パラメータ検索処理部 パラメータ格納部 参照テーブル

Claims

請求の範囲
[1] 被写体を撮像し、画像データを取得する撮像手段と、
前記撮像手段により取得した画像データをフレーム単位に圧縮する圧縮手段と、 前記撮像手段により取得した画像データを基に、シャッタースピード及びゲイン値 を含む光量情報を算出する光量情報算出手段と、
前記光量情報算出手段により算出した光量情報を基に、前記圧縮手段によりフレ ーム単位に圧縮する圧縮率を決定する圧縮率決定手段と、を有し、
前記圧縮手段は、前記圧縮率決定手段により決定した圧縮率を基に、前記画像デ ータをフレーム単位に圧縮することを特徴とする撮像装置。
[2] 前記光量情報を基に、前記圧縮率を決定するための光量値を算出する光量値算 出手段と、
閾値と、前記圧縮率と、を対応付けて管理する参照テーブルと、
を有し、
前記光量値算出手段により算出した光量値に適した閾値を選定し、該選定した閾 値を基に、前記参照テーブルを参照し、前記光量値に適した閾値に対応付けられた 圧縮率を取得し、前記圧縮手段によりフレーム単位に圧縮する圧縮率を決定するこ とを特徴とする請求項 1記載の撮像装置。
[3] 前記光量値算出手段は、前記光量値: Aを、光量値: A=シャッタースピード Xゲイ ン値により算出することを特徴とする請求項 2記載の撮像装置。
[4] 前記光量値算出手段は、前記光量値: Aを、光量値: A=シャッタースピード +ゲイ ン値により算出することを特徴とする請求項 2記載の撮像装置。
[5] 前記参照テーブルは、前記閾値が小さ!、値から順に、前記閾値と、前記圧縮率と、 を対応づけて管理し、
前記光量値算出手段により算出した光量値と、前記参照テーブルで管理している 前記閾値と、を前記閾値が小さい値力 順に比較し、前記光量値算出手段により算 出した光量値が、前記閾値よりも小さいと判断した閾値を、前記光量値算出手段によ り算出した光量値に適した閾値として選定することを特徴とする請求項 2記載の撮像 装置。
[6] 前記光量情報が、アナログゲイン値と、デジタルゲイン値と、の 2つのゲイン値を含 む情報の場合には、
前記光量値算出手段は、前記光量値: Aを、光量値: A=シャッタースピード Xゲイ ン値 (アナログゲイン値 Xデジタルゲイン値）により算出することを特徴とする請求項 3 記載の撮像装置。
[7] 前記光量情報が、アナログゲイン値と、デジタルゲイン値と、の 2つのゲイン値を含 む情報の場合には、
前記光量値算出手段は、前記光量値: Aを、光量値: A=シャッタースピード +ゲイ ン値 (アナログゲイン値 +デジタルゲイン値）により算出することを特徴とする請求項 4 記載の撮像装置。
[8] 前記撮像手段は、
前記光量情報算出手段により算出した光量情報を基に、シャッタースピード及びゲ イン値を制御し、前記被写体を撮像することを特徴とする請求項 1記載の撮像装置。
[9] 被写体を撮像し、画像データを取得する撮像手段を有する撮像装置における撮像 制御方法であって、
前記撮像手段により取得した画像データをフレーム単位に圧縮する圧縮工程と、 前記撮像手段により取得した画像データを基に、シャッタースピード及びゲイン値 を含む光量情報を算出する光量情報算出工程と、
前記光量情報算出工程により算出した光量情報を基に、前記圧縮工程によりフレ ーム単位に圧縮する圧縮率を決定する圧縮率決定工程と、
を、前記撮像装置が行い、
前記圧縮工程は、前記圧縮率決定工程により決定した圧縮率を基に、前記画像デ ータをフレーム単位に圧縮することを特徴とする撮像制御方法。
[10] 前記撮像装置は、閾値と、前記圧縮率と、を対応付けて管理する参照テーブルを 有し、
前記光量情報を基に、前記圧縮率を決定するための光量値を算出する光量値算 出工程を、前記撮像装置が行い、
前記光量値算出工程により算出した光量値に適した閾値を選定し、該選定した閾 値を基に、前記参照テーブルを参照し、前記光量値に適した閾値に対応付けられた 圧縮率を取得し、前記圧縮工程によりフレーム単位に圧縮する圧縮率を決定するこ とを特徴とする請求項 9記載の撮像制御方法。
[11] 前記光量値算出工程は、前記光量値: Aを、光量値: A=シャッタースピード Xゲイ ン値により算出することを特徴とする請求項 10記載の撮像制御方法。
[12] 前記光量値算出工程は、前記光量値: Aを、光量値: A=シャッタースピード +ゲイ ン値により算出することを特徴とする請求項 10記載の撮像制御方法。
[13] 前記参照テーブルは、前記閾値力 、さい値力 順に、前記閾値と、前記圧縮率と、 を対応づけて管理し、
前記光量値算出工程により算出した光量値と、前記参照テーブルで管理している 前記閾値と、を前記閾値が小さい値力 順に比較し、前記光量値算出工程により算 出した光量値が、前記閾値よりも小さいと判断した閾値を、前記光量値算出工程によ り算出した光量値に適した閾値として選定することを特徴とする請求項 10記載の撮 像制御方法。
[14] 前記光量情報が、アナログゲイン値と、デジタルゲイン値と、の 2つのゲイン値を含 む情報の場合には、
前記光量値算出工程は、前記光量値: Aを、光量値: A=シャッタースピード Xゲイ ン値 (アナログゲイン値 Xデジタルゲイン値）により算出することを特徴とする請求項 1 1記載の撮像制御方法。
[15] 前記光量情報が、アナログゲイン値と、デジタルゲイン値と、の 2つのゲイン値を含 む情報の場合には、
前記光量値算出工程は、前記光量値: Aを、光量値: A=シャッタースピード +ゲイ ン値 (アナログゲイン値 +デジタルゲイン値）により算出することを特徴とする請求項 1 2記載の撮像制御方法。
[16] 被写体を撮像し、画像データを取得する撮像手段を有する撮像装置にお！ヽて実行 させる撮像制御プログラムであって、
前記撮像手段により取得した画像データをフレーム単位に圧縮する圧縮処理と、 前記撮像手段により取得した画像データを基に、シャッタースピード及びゲイン値 を含む光量情報を算出する光量情報算出処理と、
前記光量情報算出処理により算出した光量情報を基に、前記圧縮処理によりフレ ーム単位に圧縮する圧縮率を決定する圧縮率決定処理と、
を、前記撮像装置に実行させ、
前記圧縮処理は、前記圧縮率決定処理により決定した圧縮率を基に、前記画像デ ータをフレーム単位に圧縮することを特徴とする撮像制御プログラム。
[17] 前記撮像装置は、閾値と、前記圧縮率と、を対応付けて管理する参照テーブルを 有し、
前記光量情報を基に、前記圧縮率を決定するための光量値を算出する光量値算 出処理を、前記撮像装置に実行させ、
前記光量値算出処理により算出した光量値に適した閾値を選定し、該選定した閾 値を基に、前記参照テーブルを参照し、前記光量値に適した閾値に対応付けられた 圧縮率を取得し、前記圧縮処理によりフレーム単位に圧縮する圧縮率を決定するこ とを特徴とする請求項 16記載の撮像制御プログラム。
[18] 前記光量値算出処理は、前記光量値: Aを、光量値: A=シャッタースピード Xゲイ ン値により算出することを特徴とする請求項 17記載の撮像制御プログラム。
[19] 前記光量値算出処理は、前記光量値: Aを、光量値: A=シャッタースピード +ゲイ ン値により算出することを特徴とする請求項 17記載の撮像制御プログラム。
[20] 前記参照テーブルは、前記閾値が小さ!、値から順に、前記閾値と、前記圧縮率と、 を対応づけて管理し、
前記光量値算出処理により算出した光量値と、前記参照テーブルで管理している 前記閾値と、を前記閾値が小さい値力 順に比較し、前記光量値算出処理により算 出した光量値が、前記閾値よりも小さいと判断した閾値を、前記光量値算出処理によ り算出した光量値に適した閾値として選定することを特徴とする請求項 17記載の撮 像制御プログラム。
[21] 前記光量情報が、アナログゲイン値と、デジタルゲイン値と、の 2つのゲイン値を含 む情報の場合には、
前記光量値算出処理は、前記光量値: Aを、光量値: A=シャッタースピード Xゲイ ン値 (アナログゲイン値 Xデジタルゲイン値）により算出することを特徴とする請求項 1 8記載の撮像制御プログラム。
前記光量情報が、アナログゲイン値と、デジタルゲイン値と、の 2つのゲイン値を含 む情報の場合には、
前記光量値算出処理は、前記光量値: Aを、光量値: A=シャッタースピード +ゲイ ン値 (アナログゲイン値 +デジタルゲイン値）により算出することを特徴とする請求項 1 9記載の撮像制御プログラム。
PCT/JP2007/051014 2006-01-30 2007-01-23 撮像装置、撮像制御方法及び撮像制御プログラム WO2007086387A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2007555955A JPWO2007086387A1 (ja) 2006-01-30 2007-01-23 撮像装置、撮像制御方法及び撮像制御プログラム
EP20070707265 EP1981264A4 (en) 2006-01-30 2007-01-23 PICTURE DEVICE, PICTURE CONTROL PROCEDURE AND PICTURE CONTROL PROGRAM
US12/160,657 US7965321B2 (en) 2006-01-30 2007-01-23 Imaging device, imaging control method, and imaging control program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006-020713 2006-01-30
JP2006020713 2006-01-30

Publications (1)

Publication Number Publication Date
WO2007086387A1 true WO2007086387A1 (ja) 2007-08-02

Family

ID=38309177

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2007/051014 WO2007086387A1 (ja) 2006-01-30 2007-01-23 撮像装置、撮像制御方法及び撮像制御プログラム

Country Status (5)

Country Link
US (1) US7965321B2 (ja)
EP (1) EP1981264A4 (ja)
JP (1) JPWO2007086387A1 (ja)
CN (1) CN101379811A (ja)
WO (1) WO2007086387A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5625543B2 (ja) * 2010-06-28 2014-11-19 ソニー株式会社 符号化装置、電子機器、撮像装置、および撮像システム
JPWO2012132624A1 (ja) 2011-03-29 2014-07-24 ルネサスエレクトロニクス株式会社 表示装置及び表示装置制御回路
US9635212B2 (en) * 2014-05-30 2017-04-25 Apple Inc. Dynamic compression ratio selection
JP2016171383A (ja) * 2015-03-11 2016-09-23 株式会社リコー 情報端末、画像表示システム及びプログラム
CN105959587B (zh) * 2016-05-27 2019-02-12 北京小米移动软件有限公司 快门速度获取方法和装置
US10453221B2 (en) 2017-04-10 2019-10-22 Intel Corporation Region based processing
WO2019193867A1 (ja) * 2018-04-03 2019-10-10 オリンパス株式会社 内視鏡装置
JP7052021B2 (ja) * 2018-05-01 2022-04-11 オリンパス株式会社 内視鏡装置及び内視鏡ならびに内視鏡装置の作動方法
CN110111633B (zh) * 2019-05-23 2022-01-07 中国人民解放军海军航空大学青岛校区 一种快门模拟控制方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08181908A (ja) * 1994-12-21 1996-07-12 Nikon Corp スチルカメラ
JP2001061148A (ja) * 1999-06-14 2001-03-06 Nikon Corp 圧縮符号化方法，圧縮符号化プログラムを記録した記録媒体，および圧縮符号化方法を実施する電子カメラ
JP2002209137A (ja) * 2001-01-09 2002-07-26 Canon Inc 電子カメラ
JP2003110924A (ja) * 2001-09-27 2003-04-11 Olympus Optical Co Ltd 電子カメラ

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06165027A (ja) * 1992-11-25 1994-06-10 Nikon Corp スチルカメラ
JP3427454B2 (ja) 1993-12-21 2003-07-14 株式会社ニコン スチルカメラ
US6314206B1 (en) * 1997-04-07 2001-11-06 Asahi Kogaku Kogyo Kabushiki Kaisha Compression ratio setting device
DE19835284C2 (de) * 1998-08-05 2001-03-01 Tuhh Tech Gmbh Vorrichtung und Verfahren zur automatischen Fokussierung und Belichtung von Bildaufnahmesystemen
JP2005124039A (ja) * 2003-10-20 2005-05-12 Seiko Epson Corp 露出制御装置および露出制御方法
JP2005167924A (ja) * 2003-12-05 2005-06-23 Matsushita Electric Ind Co Ltd 撮像装置及び撮像方法
US7791656B2 (en) * 2005-08-16 2010-09-07 Konica Minolta Holdings, Inc. Image sensing apparatus and image processing method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08181908A (ja) * 1994-12-21 1996-07-12 Nikon Corp スチルカメラ
JP2001061148A (ja) * 1999-06-14 2001-03-06 Nikon Corp 圧縮符号化方法，圧縮符号化プログラムを記録した記録媒体，および圧縮符号化方法を実施する電子カメラ
JP2002209137A (ja) * 2001-01-09 2002-07-26 Canon Inc 電子カメラ
JP2003110924A (ja) * 2001-09-27 2003-04-11 Olympus Optical Co Ltd 電子カメラ

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP1981264A4 *

Also Published As

Publication number Publication date
JPWO2007086387A1 (ja) 2009-06-18
EP1981264A4 (en) 2011-09-07
US7965321B2 (en) 2011-06-21
US20100231736A1 (en) 2010-09-16
EP1981264A1 (en) 2008-10-15
CN101379811A (zh) 2009-03-04

Similar Documents

Publication Publication Date Title
WO2007086387A1 (ja) 撮像装置、撮像制御方法及び撮像制御プログラム
US8494306B2 (en) Method and an apparatus for creating a combined image
JP4794987B2 (ja) 映像信号処理装置
JP2009303236A (ja) 適応的画像安定
JP5525592B2 (ja) 映像信号処理装置
US8488681B2 (en) Image capturing apparatus, control method therefor, program, and storage medium
US6347118B1 (en) Image processing apparatus having means for controlling exposure using an orthogonal transformation coefficient
JPH03267877A (ja) 画像符号化装置及びその方法
US20050069214A1 (en) Image compression method and image compression device
JP2011119868A (ja) 画像処理装置及び画像処理方法
JP4079375B2 (ja) 手ぶれ補正装置
US8306358B2 (en) Image processing apparatus, image processing method, and imaging apparatus for slicing an image
US20120092521A1 (en) Image processing apparatus having function of correcting image based on ambient illumination, and image processing method
JP2012156838A (ja) 撮像装置、撮像制御方法、およびプログラム
TWI390959B (zh) 視頻訊號處理裝置，視頻訊號處理方法及視頻訊號處理程式
US8305467B2 (en) Image pickup apparatus and image pickup method
JP2004187036A (ja) 輪郭補正システム
JP2018110300A (ja) 撮像装置、その制御方法、プログラム及び記録媒体
US20070009164A1 (en) Imaging device
JP4253839B2 (ja) 画像圧縮方法、画像圧縮プログラム、画像圧縮装置及びデジタルカメラ
JP2008104223A (ja) 手ぶれ補正装置
JP2012060469A (ja) 撮像装置
JP2006319465A (ja) 撮像装置
JP2001024932A (ja) 画像入力装置及び画像入力方法
Spampinato et al. DCT Domain Best Shot System

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
ENP Entry into the national phase

Ref document number: 2007555955

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 12160657

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2007707265

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 200780003991.7

Country of ref document: CN

NENP Non-entry into the national phase

Ref country code: DE