[go: up one dir, main page]

WO2000004716A1 - Image pickup device - Google Patents

Image pickup device Download PDF

Info

Publication number
WO2000004716A1
WO2000004716A1 PCT/JP1998/003215 JP9803215W WO0004716A1 WO 2000004716 A1 WO2000004716 A1 WO 2000004716A1 JP 9803215 W JP9803215 W JP 9803215W WO 0004716 A1 WO0004716 A1 WO 0004716A1
Authority
WO
WIPO (PCT)
Prior art keywords
compression
circuit
image information
state
interface
Prior art date
Application number
PCT/JP1998/003215
Other languages
French (fr)
Japanese (ja)
Inventor
Hiroki Jinbo
Kenichi Munei
Kikuo Shioya
Hiroaki Takagishi
Original Assignee
Hitachi, Ltd.
Hitachi Tohbu Semiconductor, Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to TW087111613A priority Critical patent/TW416229B/en
Application filed by Hitachi, Ltd., Hitachi Tohbu Semiconductor, Ltd. filed Critical Hitachi, Ltd.
Priority to PCT/JP1998/003215 priority patent/WO2000004716A1/en
Publication of WO2000004716A1 publication Critical patent/WO2000004716A1/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals

Definitions

  • the present invention relates to an imaging device such as a camera for sequentially transmitting captured moving image information to a host device.
  • an imaging device such as a camera for sequentially transmitting captured moving image information to a host device.
  • a host device For example, in a video conference system, a television telephone, or the like, an image is captured in a limited band.
  • technology related to technology that is effective when applied to a data processing system such as an image compression / decompression device that compresses image information with hardware or software and decompresses compressed data with software. Things. Background art
  • USB Universal Serial Bus
  • SCSI Serial Computer System Interface
  • IrDA Infrared Data Association
  • RS232C RS232C
  • USB is a standard for serial data transfer, and its data transfer rate is 12 Mbps.
  • the USB Standard (REV1.0) was published on November 13, 1995.
  • the frame rate of the image information is about 25 Hz.
  • the image size of one frame is 352 x 2888 pixels.
  • the image data format is 4: 2: 0 (the luminance data per pixel is 8 bits and the color difference data per pixel is 4 bits)
  • the amount of image information data to be transmitted Is about 29 M bps.
  • the USB data transfer rate is 12 Mb-ps, so when transmitting image information using a USB, image data captured by a monitor camera is compressed or thinned out. And so on. For example, if the compression ratio is reduced to 1/4, the data amount will be approximately 7.3 Mbps, which can satisfy the USB data transfer rate.
  • QCIF Quadrater Common Intermediate Format
  • the size of one frame is 1/4 of CIF
  • QCIF Quadrater Common Intermediate Format
  • the image information can be transferred to the host device via USB as it is, and decompression processing is unnecessary on the host device side, which is preferable because the data processing time is reduced and the load on the processor is reduced.
  • USB devices peripheral devices
  • USB devices can be connected to one host device via a hub.
  • USB specification when a USB device is connected to a port, various configuration information of the USB device is transferred to the host device. Then, the host device always schedules what kind of transfer and when to perform it in units of 1 ms. At this time, since the maximum data transfer rate per second is the above-mentioned 12 Mbps, multiple USB devices must be able to perform data transmission operation in time-division multiplexing without significantly impairing real-time performance. The total data transfer rate of all USB devices must be less than 12 Mbps.
  • the amount of information can be reduced by calculating the difference.
  • the difference is frequency-transformed by the discrete cosine transform.
  • the data after frequency conversion is quantized to reduce the information of high frequency components with a small amount of information.
  • variable-length coding assigns a short code length to a code with a high appearance frequency and a long code length to a code with a low appearance frequency.
  • difference data between frames is calculated in the order of variable length decoding, inverse quantization, and inverse discrete cosine transform. The difference is added to the past image information frame to reproduce the image.
  • Such a method is intended to reduce the amount of information by focusing on the temporal and spatial redundancy of the image.
  • An object of the present invention is to provide an image pickup apparatus capable of efficiently transmitting image information while maintaining good image quality in accordance with an image size (amount of information) and a band (a transfer capacity) of a transmission path. It is in.
  • Another object of the present invention is to reduce the cost of an image pickup apparatus that transmits image information efficiently and with good image quality according to the image size and the bandwidth of the transmission path.
  • An image pickup apparatus is used for image pickup means, compression means for compressing image information acquired via the image pickup means at a variable compression rate, and data transmission of compressed image information output from the compression means.
  • the compression means includes a plurality of compression logic means for respectively compressing image information, means for selecting a compression rate for processing using the compression logic means, and means for indicating a compression rate selected by the selection means. .
  • the compression rate is optimized according to the expansion processing capacity of the host device that receives the different image sizes, transfer capacities, and coded compressed image information. It becomes possible to do.
  • the compression logic is capable of completing the compression process within a single image information frame. In other words, the compression process can be completed with the data in the image information frame. Therefore, the cost of hardware for compressing an image can be reduced, and it is not necessary to have a frame memory for compression.
  • the plurality of compression logic means includes a thinning circuit for image information, ⁇ ⁇ ⁇ V circuit can be adopted. At this time, the selection means may select a state using only the thinning circuit, a state using only the AYUV circuit, a state using both the thinning circuit and the ⁇ YUV circuit, and a state using both the thinning circuit and the ⁇ YUV circuit. One state can be selected from among the states that allow image information to pass through as unused.
  • each image information can be compressed at the selected constant compression ratio, and it is easy to secure a constant frame rate. It is. As a result, it is possible to suppress the deterioration of the image quality of the image information that has undergone compression and expansion.
  • compression logic means consideration is given to decompression processing by software, and the emphasis is on algorithm simplicity rather than compression ratio.
  • compression for example, 1 / m decimation with a compression ratio of lZm, 1 / n decimation with a compression ratio of 1 / n, and a compression ratio of 1/111 ⁇ 1; And compress them in series to compress l / m, l / n, l / (m'n), and 1 / (m ⁇ m).
  • the algorithm of the compression process is easy, and the load on the software for performing the decompression process can be reduced.
  • a USB port of a host device to which a USB device having a USB interface function is connected has a large number of USB ports.
  • the maximum data transfer rate of the USB port of the host device is limited to 12 Mbps, and when multiple USB devices transfer data by time division multiplexing, At this time, since the image pickup device can select a compression ratio of image information, in the case of a USB device having a relatively high data transfer rate such as an image pickup device, The compression ratio of the image information can be varied in consideration of the number of other USB devices sharing the USB port and the data transfer rate.
  • the host device connected to the interface means gives the instruction, the host device refers to the compression ratio instruction at that time. The decompression process can be performed.
  • FIG. 1 is a block diagram showing an overall configuration of an image compression / decompression system including a monitoring camera and a host computer according to an embodiment of the present invention.
  • FIG. 2 is a block diagram showing an example of a variable compression section.
  • FIG. 3 is a schematic diagram illustrating a 1/2 thinning operation selected by the variable compression section.
  • FIG. 4 is a circuit diagram showing an example of a thinning circuit provided in the variable compression section.
  • FIG. 5 is a schematic diagram illustrating the 1/4 thinning operation selected by the variable compression unit.
  • FIG. -FIG. 6 is an explanatory diagram showing a specific example of a data conversion in the compression / decompression processing by the AYUV circuit.
  • FIG. 7 is an explanatory diagram showing a conversion table for converting difference data between adjacent images into transmission data in the AYUV circuit.
  • FIG. 8 is an explanatory diagram showing a conversion table for converting a received data into a difference data from an adjacent image in the AYUV circuit.
  • FIG. 9 is a flowchart showing an example of a compression data decompression process performed by the host computer.
  • FIG. 10 is a flowchart showing an example of realizing compression processing of image data by software.
  • Fig. 1 shows the overall configuration of an image compression / decompression system equipped with a monitor camera and a host computer.
  • reference numeral 4 denotes a host computer such as a personal computer, for example, which has a USB interface function as an external interface, and is connected to a USB port located on a US host hub 20.
  • a device that supports USB can be connected to the port.
  • the USB host hub 20 is connected to an interface controller inside the host computer 4 and controls data transfer instructed by a data transfer command from a processor (not shown). This is performed in accordance with the provisions of the USB Function Specification (REV1.0).
  • REV1.0 USB Function Specification
  • the monitoring camera 21 is one of the USB devices.
  • the monitoring camera 21 is connected to the USB host hub 20 via an interface cable 10A.
  • USB host To the DSU (Digital Service Unit) and TA (Terminal Adapter) 23 which are typically shown as separate USB devices, via an interface cable 10B and an external hub 22.
  • Board 24 is connected.
  • the input image signal is converted into a luminance signal and a chrominance signal by the signal processing unit 5.c
  • the variable compression unit 6 compresses the luminance signal and the chrominance signal by varying the compression ratio.
  • Compressed data (compression The image information) is transmitted from the USB interface circuit 7 to the host computer 4 via the interface cable 1 OA.
  • the host computer 4 expands the received compressed image signal by software and displays it on a monitor.
  • the CCD 1 and the A / D converter 2 operate in synchronization with a signal generated by the timing control unit 8.
  • the image information from the CCD 1 is sequentially read out one pixel at a time for each scanning line, and supplied to the signal processing unit 5.
  • the camera 21 does not need to have a frame memory corresponding to image information such as CIF.
  • FIG. 2 shows a detailed circuit example of the variable compression section 6.
  • the variable compression section includes a 1/2 thinning circuit 11 for compressing the information amount of the captured image to 1/2, a 1/4 thinning circuit 12 for compressing the information amount of the captured image to 1/4, It has an AYUV circuit 13 for compressing the information amount of the image to half, and switch circuits 14 and 15 for selecting three kinds of compression circuits.
  • the switch states of the switch circuit 14 and the switch circuit 15 are controlled by an instruction from the general control unit (general control circuit) 9. By switching the switches 14 and 15, it is possible to set a path for outputting the input signal without compression and a path for compressing the compression ratio of 1/2, 1/4, and 1/8.
  • FIG. 3 schematically shows luminance (or color difference) signals arranged two-dimensionally.
  • the 1/2 thinning circuit compresses the above information amount to 1/2 by sampling 1/2 data and thinning out 1/2 data. However, if only 1/2 of the data is thinned out, the image may be distorted due to the effect of aliasing. Therefore, before thinning, the image is subjected to a two-dimensional LPF (Low Pass Filter) operation to reduce high frequency components.
  • Fig. 4 shows an example of LPF configuration.
  • the horizontal storage element 16 is a 7-pin filter and the vertical storage element 17 is a 3-tap FIR (Finite Impulse Response) type filter. You.
  • a luminance (or color difference) signal is input one pixel at a time in the horizontal direction, a product-sum operation is performed using coefficients 1 & A to 18J, and the operation result is replaced with the data of the center pixel.
  • the selection circuit 19 performs the thinning according to FIG. 3 to compress the information amount to half.
  • the ⁇ YUV circuit 13 will be described.
  • the AYUV method is a compression technology that has been put to practical use in car navigation and the like.
  • Figure 6 shows an example of conversion from original data to compressed data.
  • the dynamic range of luminance (or color difference) signal 0 to 255 is compressed to 16 to 235 by the conversion formula ⁇ 2 (y / 255) ⁇ 219 + 16.
  • Yn—Predicted value Pn Difference Dn is obtained.
  • the difference Dn is encoded according to the conversion table shown in FIG. 7, and the obtained ⁇ n is transmitted.
  • ⁇ Yn is re-converted according to the conversion template shown in Fig.
  • Pn + 1 is 16 or less or 235 or more, clip to 16 or 235.
  • the AYUV circuit 13 also reduces the amount of information by half.
  • variable compression section 6 the processing is completed in the image information frame, and there is no need to use a frame memory in the compression / expansion processing, and the cost of the image compression / expansion apparatus can be reduced. it can. Furthermore, there is no change in the number of processes due to the redundancy of the image information, the frame rate can be kept constant, and the smooth operation of the object of the reproduced image is guaranteed.
  • compression processing is necessary (S10), it is determined whether or not compression by thinning is possible (S11) based on the compression ratio instructed from the host computer.
  • S11 it is determined whether it is 1/2 thinning or 1/4 thinning (S12), and select either 1/2 thinning processing (S13) or 1/4 thinning processing (S14). Or execute.
  • AYUV is required
  • S16 If neither compression is necessary, the luminance (color difference) signal is output through.
  • thinning 1/4 and thinning 1/2 and AYUV are two methods: thinning 1/4 and thinning 1/2 and AYUV. Either method can be selected depending on the image quality and the processing capability of the decompressing software.
  • the compressed image information is displayed as it is from the interface cable 10 on the display means (host computer 4). It is possible to display reduced-size images without using YUV decoding means.
  • Host computer 4 can be connected via interface cable 1 OA
  • the control information is given to the variable compression section 6 to indicate the compression ratio.
  • the host computer 4 stores the control information and, when decompressing the received compressed data, refers to the stored control information and performs processing according to the flowchart of FIG. .
  • the host computer 4 refers to the control information to determine whether compression by AYUV has been performed (S1), and if compression by AYUV has been performed, performs expansion processing by ⁇ YUV (S2). .
  • the host computer 4 refers to the control information to determine whether compression by thinning has been performed (S3), and if so, determines whether it is 1/2 thinning or 1/4 thinning. Yes (S4). If 1/2 has been thinned out, a filter operation for interpolating the data thinned out in the double interpolation processing (S5) is performed. If 1/4 thinning has been performed, it is determined whether decompression processing is possible (S6). If the display screen size by the host computer 4 is 1/4 of the screen size before compression, the decompression process is omitted. Performs a filter calculation. When the decompression process is completed, the image is displayed (S8).
  • the compression method of image information is a variable compression ratio, it is possible to cope with a case where priority is given to either the compression ratio or the image quality, which are in opposite relations. Since each frame is compressed at a predetermined compression ratio, the amount of operation of each compression algorithm is small, and multiple frame memories are not required, the USB port of the c host computer 4 that can realize a system at low cost has many USB devices share.
  • the maximum data transfer rate of the USB port of the host computer 4 has a limit of 12 Mbps, and when multiple USB devices transfer data by time division multiplexing, the limit must be satisfied. .
  • the monitor camera 21 can select the compression ratio of the image information, the USB data having a relatively large data transfer rate like the camera camera 21 is used.
  • the compression rate of image information can be varied in consideration of the transfer rate of several USB devices sharing the USB port. For example, if the imaging frame rate of CCD 1 is 25 Hz, the image data format is 4: 2: 0, and the image size is CIF, the number of USB devices connected to the USB host hub 20 When the number of other USB devices is increasing, the compression ratio can be set to 1/8.
  • the compression ratio can be set to 1/2 or 1/4.
  • the monitor camera 21 having the USB interface function has a large data transfer amount, the number of other USB devices sharing the USB port and the data transfer rate are taken into consideration.
  • the compression ratio of image information can be varied, making it ideal for USB interface.
  • the interface means is not limited to USB, but may be another serial interface or a parallel interface.
  • the image format of the luminance signal and the color difference signal may be 4: 2: 2.
  • the image frame rate of the image information picked up by the image pickup means is not limited to 25 Hz, but may be 30 Hz or the like.
  • the image size of the image information imaged by the imaging means is not limited to CIF and QCIF.
  • the settings of the overall control unit 9 are set from the host computer 4, but items that do not require external setting changes may be fixed in advance. Industrial applicability
  • the present invention can be widely applied to a monitor camera, a video conference system, a video phone, and the like which are used by being connected to a personal computer.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

An image pickup device which has a compressing means (6, 9) which compresses image information obtained through an image pickup means (1) at a variable compressibility. The compressed image information outputted from the compressing means is supplied to a host device (4) through an interface means (7). The compressibility is specified by the compressing means in accordance with control information supplied by the interface means and the compression at the compressibility can be completed by the compressing means within a single image information frame. Thus the compressibility can be optimized in accordance with the decompression capability of the host device which receives different image sizes, transfer capacities and compressed image information. Further, since the compression can be completed by data in the image information frame, the cost of the hardware for compressing images can be reduced and a frame memory for compression is not necessary.

Description

明 細  Details
技術分野 Technical field
本発明は、撮像した動画像情報をホスト装置に向けて逐次送出するモ 二夕用カメラなどの撮像装置に係り、 例えば、 テレビ会議システムゃテ レビ電話等において、制限された帯域の中で画像情報を転送するため、 ハ一ドウエアまたはソフ トウエアで画像情報を圧縮処理し、ソフ トゥェ ァで圧縮データを伸張処理する画像圧縮伸張装置等のデ一夕処理シス テムに適用して有効な技術に関するものである。 背景技術  The present invention relates to an imaging device such as a camera for sequentially transmitting captured moving image information to a host device. For example, in a video conference system, a television telephone, or the like, an image is captured in a limited band. In order to transfer the information, technology related to technology that is effective when applied to a data processing system such as an image compression / decompression device that compresses image information with hardware or software and decompresses compressed data with software. Things. Background art
本発明者はパーソナルコンピュ一夕の外部ィン夕フエ一スを介して 接続されるモニタ用カメラについて検討した。パーソナルコンピュータ と周辺機器を接続するイン夕フェースとしては、 U S B (Universal Serial Bus) や S C S I (Small Computer System Interface)や I r D A (Infrared Data Association)や、 R S 2 3 2 C等が知られる。 例え ば U S Bはシリアルデータ転送の規格であり、デ一夕転送速度は 1 2 M b p sである。 U S Bの規格書 (REV1.0)は、 1995年 11月 13日に出版 されている。  The inventor has studied a monitor camera connected via an external interface of a personal computer. Known interfaces for connecting a personal computer and peripheral devices include a USB (Universal Serial Bus), a SCSI (Small Computer System Interface), an IrDA (Infrared Data Association), and an RS232C. For example, USB is a standard for serial data transfer, and its data transfer rate is 12 Mbps. The USB Standard (REV1.0) was published on November 13, 1995.
画像情報のフレームレートは 2 5 H z程度有れば十分であり、例えば、 C I F (Common Intermediate Fonat) であれば 1フレームの画像サイ ズは 3 5 2 x 2 8 8ピクセルである。 画像データフォーマッ トが 4 : 2 : 0 ( 1画素当りの輝度デ一夕が 8ビッ ト、 1画素当りの色差デ一夕 が 4ビッ ト) とすれば、 伝送されるべき画像情報のデータ量は約 2 9 M bp sにもなる。前記したように U S Bのデ一夕転送速度は 1 2 Mb-p sであるから、 U SBを用いて画像情報を伝送する場合には、 モニタ用 カメラで撮像された画像データは圧縮または間引き処理等をしなけれ ばならない。 例えば、 圧縮率を 1/4にすればデータ量は大凡 7. 3M b p sになり、 US Bのデータ転送レートを満足することができる。 一方、 1フレームのサイズが C I Fの 1/4である Q C I F (Quarter Common Intermediate Format) であれは、 圧縮を行わずに、 USBのデ 一夕転送レートを満足することができる。圧縮が不要であればそのまま 画像情報を US Bでホス ト装置に転送してやればよく、ホスト装置側で は伸張処理が不用になり、 データ処理時間の短縮、 プロセッサの負担軽 減上、 好ましい。 これにより、 本発明者の検討に係るモニタ用カメラで は画像情報の圧縮率を選択可能にする必要性が明らかにされた。 It is sufficient that the frame rate of the image information is about 25 Hz. For example, in the case of CIF (Common Intermediate Fonat), the image size of one frame is 352 x 2888 pixels. If the image data format is 4: 2: 0 (the luminance data per pixel is 8 bits and the color difference data per pixel is 4 bits), the amount of image information data to be transmitted Is about 29 M bps. As described above, the USB data transfer rate is 12 Mb-ps, so when transmitting image information using a USB, image data captured by a monitor camera is compressed or thinned out. And so on. For example, if the compression ratio is reduced to 1/4, the data amount will be approximately 7.3 Mbps, which can satisfy the USB data transfer rate. On the other hand, QCIF (Quarter Common Intermediate Format), where the size of one frame is 1/4 of CIF, can satisfy the USB overnight transfer rate without compression. If compression is not required, the image information can be transferred to the host device via USB as it is, and decompression processing is unnecessary on the host device side, which is preferable because the data processing time is reduced and the load on the processor is reduced. As a result, the necessity of making it possible to select the compression ratio of image information in the monitoring camera according to the study of the present inventors has been clarified.
また、 U S Bの規格によれば、 ハブを介して最大 1 27個の周辺機器 (U S Bデバイス) を一つのホス ト装置に接続できる。 U S Bの仕様で は U S Bデバイスがポートに接続されたとき、その U S Bデバイスが持 つさまざまな構成情報がホス ト装置に引き上げられるようになつてい る。 そして、 ホス ト装置は、 1 msを単位としてどのような転送を、 い つ行うかを、 常にスケジューリングしている。 このとき、 1秒間の最大 データ転送量は前述の 1 2 Mb p sであるから、複数個の U S Bデバイ スが時分割多重でリアルタイム性を大幅に損なうことなくデ一夕伝送 動作できるようにするには、全ての U S Bデバイスのデ一夕転送レート の合計が 1 2Mbp s以下でなければならない。 このため、撮像装置の ようにデータ転送レー卜の比較的大きな USBデバイスの場合には、 U S Bポ一トを共有するその他の U S Bデバイスの数やデータ転送レ一 トを考慮して、画像情報の圧縮率を可変できるようにすることが望まし く、 この点においても、 モニタ用カメラにおける画像情報の圧縮率を選 択可能にする必要性が明らかにされた。 - また、 本発明者は、 その場合における画像デ一夕の圧縮手法について 検討した。 例えば、 電話線で動画像情報を転送するために、 情報を圧縮 伸張する規格として H . 2 6 1等が知られている。 この情報圧縮手法は、 圧縮側で、先ず過去の画像情報フレームと現在の画像情報フレームとの 差分を検出する。動画像では時間的に連続する画像情報フレームの相関 は高いので、 差分を演算することで情報量を削減できる。 次に、 差分を 離散コサイン変換により周波数変換する。一般に画像を周波数変換する と、 低周波成分に情報が集中する。周波数変換後のデータを量子化し、 情報量の少ない高周波成分の情報を削減する。最後に、 符号の出現頻度 に注目し、 出現頻度の高い符号には短い符号長を、 出現頻度の低い符号 には長い符号長を割り当てる可変長符号化を行う。伸張側では、 可変長 復号化、 逆量子化、 逆離散コサイン変換の順番でフレーム間の差分デー 夕を演算する。差分デ一夕を過去の画像情報フレームに加算し、 画像を 再現する。 そのような手法は、 画像の持つ時間的、 空間的冗長度に注目 して情報量を削減しょうとするものである。 According to the USB standard, up to 127 peripheral devices (USB devices) can be connected to one host device via a hub. According to the USB specification, when a USB device is connected to a port, various configuration information of the USB device is transferred to the host device. Then, the host device always schedules what kind of transfer and when to perform it in units of 1 ms. At this time, since the maximum data transfer rate per second is the above-mentioned 12 Mbps, multiple USB devices must be able to perform data transmission operation in time-division multiplexing without significantly impairing real-time performance. The total data transfer rate of all USB devices must be less than 12 Mbps. For this reason, in the case of a USB device having a relatively large data transfer rate, such as an imaging device, the number of other USB devices sharing the USB port and the data transfer rate are taken into consideration, and the image information is transferred. It is desirable to be able to change the compression ratio. In this regard, too, the compression ratio of the image information in the monitor camera is selected. The need to make it optional was identified. -In addition, the present inventor has studied a compression method of image data overnight in that case. For example, H.261 and the like are known as standards for compressing and expanding information in order to transfer moving image information over a telephone line. In this information compression method, a difference between a past image information frame and a current image information frame is first detected on the compression side. Since the correlation between temporally continuous image information frames in a moving image is high, the amount of information can be reduced by calculating the difference. Next, the difference is frequency-transformed by the discrete cosine transform. Generally, when an image is frequency-converted, information is concentrated on low-frequency components. The data after frequency conversion is quantized to reduce the information of high frequency components with a small amount of information. Finally, we focus on the frequency of appearance of the code, and perform variable-length coding that assigns a short code length to a code with a high appearance frequency and a long code length to a code with a low appearance frequency. On the decompression side, difference data between frames is calculated in the order of variable length decoding, inverse quantization, and inverse discrete cosine transform. The difference is added to the past image information frame to reproduce the image. Such a method is intended to reduce the amount of information by focusing on the temporal and spatial redundancy of the image.
しかしながら、 そのような画像情報圧縮技術は、 フレーム間の相関を 用いた情報圧縮を行っており、複数フレーム分の画像情報を蓄積するこ とが必要であり、 フレームメモリを多数必要とするという点で、 ハ一ド ウェアにコス トがかかり過ぎる。  However, such image information compression technology performs information compression using the correlation between frames, and it is necessary to accumulate image information for a plurality of frames, thus requiring a large number of frame memories. Hardware is too costly.
また、 上記手法は、 時間的に連続するフレームの相関が低い時や、 画 像情報の周波数成分が高周波に集中している時は、情報の圧縮率が低下 する。 そのような場合、 符号化時に画像のこま落としによる情報量削減 を行うため、 フレームレ一ト (単位時間当たりのフレーム数) が変化し、 伸張後の再生画像の被写体動作がぎく しゃく した不自然なものになる ことが予想される。 またソフ トウエアでの伸張処理を行った場合、逆離散コサイン変換で は非常に演算数が多くなり、 ホスト装置側の負担が大きくなる。 In the above method, the compression ratio of the information decreases when the correlation between temporally consecutive frames is low or when the frequency components of the image information are concentrated at high frequencies. In such a case, the frame rate (the number of frames per unit time) changes in order to reduce the amount of information by dropping the image during encoding, and the movement of the subject in the expanded reproduced image is unnatural. It is expected that Also, when the decompression processing is performed by software, the number of operations in the inverse discrete cosine transform becomes extremely large, and the load on the host device side increases.
本発明の目的は、 画像サイズ (情報量) と伝送路の帯域 (転送容量) とに応じて、画像情報を能率的に且つ良好な画質を保って伝達すること ができる撮像装置を提供することにある。  An object of the present invention is to provide an image pickup apparatus capable of efficiently transmitting image information while maintaining good image quality in accordance with an image size (amount of information) and a band (a transfer capacity) of a transmission path. It is in.
本発明の別の目的は、画像サイズと伝送路の帯域とに応じて画像情報 を能率的に且つ良好な画質を保って伝達する撮像装置のコス トを低減 することにある。  Another object of the present invention is to reduce the cost of an image pickup apparatus that transmits image information efficiently and with good image quality according to the image size and the bandwidth of the transmission path.
本発明の上記並びにその他の目的と新規な特徴は本明細書の以下の 記述と添付図面から明らかにされるであろう。 発明の開示  The above and other objects and novel features of the present invention will become apparent from the following description of the present specification and the accompanying drawings. Disclosure of the invention
本発明に係る撮像装置は、 撮像手段、 前記撮像手段を介して取得され た画像情報を圧縮率可変で圧縮する圧縮手段、及び前記圧縮手段から出 力される圧縮画像情報のデータ伝送に用いられるィン夕フェース手段 を含む。前記圧縮手段は、 夫々画像情報を圧縮する複数個の圧縮論理手 段、 前記圧縮論理手段を用いた処理の圧縮率を選択する手段、 及び前記 選択手段が選択する圧縮率を指示する手段を含む。 このように、 複数個 の圧縮論理手段を用いて圧縮率を選択できるから、異なる画像サイズ、 転送容量、符号化圧縮画像情報を受け取るホス ト装置の伸張処理能力に 応じて、 圧縮率を最適化することが可能になる。  An image pickup apparatus according to the present invention is used for image pickup means, compression means for compressing image information acquired via the image pickup means at a variable compression rate, and data transmission of compressed image information output from the compression means. Includes an ink face means. The compression means includes a plurality of compression logic means for respectively compressing image information, means for selecting a compression rate for processing using the compression logic means, and means for indicating a compression rate selected by the selection means. . As described above, since the compression rate can be selected using a plurality of compression logic means, the compression rate is optimized according to the expansion processing capacity of the host device that receives the different image sizes, transfer capacities, and coded compressed image information. It becomes possible to do.
前記圧縮論理手段は、単一の画像情報フレーム内で圧縮処理を完了可 能である。換言すれば、 圧縮処理を画像情報フレーム内のデータで完結 させることができる。 したがって、 画像を圧縮するハ一ドウエアのコス トを低減でき、 圧縮のためにフレームメモリを持たなくてもよい。 前記複数個の圧縮論理手段として、 画像情報の間引き回路と、 Δ Υ ΙΙ V回路とを採用できる。 このとき、 選択手段は、 前記間引き回路のみを 用いる状態、 前記 AYUV回路のみを用いる状態、 前記間引き回路と前 記 Δ YUV回路の双方を用いる状態、及び前記間引き回路と△ YUV回 路の双方を不使用として画像情報をスルーさせる状態の中から一つの 状態を選択可能に構成することができる。 これにより、 画像情報のもつ、 空間的又は時間的冗長度に関わらずに、 夫々の画像情報を、 選択された 一定の圧縮率で圧縮することができ、一定のフレームレートを確保する ことが容易である。 これにより、 圧縮 ·伸張を経た画像情報の画質劣化 を抑えることができる。 The compression logic is capable of completing the compression process within a single image information frame. In other words, the compression process can be completed with the data in the image information frame. Therefore, the cost of hardware for compressing an image can be reduced, and it is not necessary to have a frame memory for compression. The plurality of compression logic means includes a thinning circuit for image information, Δ Υ ΙΙ V circuit can be adopted. At this time, the selection means may select a state using only the thinning circuit, a state using only the AYUV circuit, a state using both the thinning circuit and the ΔYUV circuit, and a state using both the thinning circuit and the △ YUV circuit. One state can be selected from among the states that allow image information to pass through as unused. Thereby, regardless of the spatial or temporal redundancy of the image information, each image information can be compressed at the selected constant compression ratio, and it is easy to secure a constant frame rate. It is. As a result, it is possible to suppress the deterioration of the image quality of the image information that has undergone compression and expansion.
また、圧縮論理手段に対しては、 ソフ トウヱァでの伸張処理を考慮し、 圧縮率よりアルゴリズムの容易性に重点を置いている。圧縮には、 例え ば圧縮率が lZmである 1/m間引きと、圧縮率が 1/nである 1/n 間引き、 さらに圧縮率が 1/111でぁる ¥1; 方式を用意し、 それらを 組み合わせ直列に処理することにより、 l/m、 l/n、 l/(m' n)、 1/ (m · m) の圧縮を行う。 これにより、 圧縮処理のァルゴリズムが 容易であり、これに応じて伸張処理を行うソフ トウェアの負担を軽減で きる。  For the compression logic means, consideration is given to decompression processing by software, and the emphasis is on algorithm simplicity rather than compression ratio. For compression, for example, 1 / m decimation with a compression ratio of lZm, 1 / n decimation with a compression ratio of 1 / n, and a compression ratio of 1/111 ¥ 1; And compress them in series to compress l / m, l / n, l / (m'n), and 1 / (m · m). As a result, the algorithm of the compression process is easy, and the load on the software for performing the decompression process can be reduced.
前記 1/m間引きと 1/n間引きの 2種類の間引きは共に主な処理 がフィル夕演算であるため、 ハードウヱァに共通部分が多く、 1/m間 引きと 1 / n間引きを両方用意することによる回路規模増加は極めて 少ない。フィル夕演算は入力された画像データを順次積和演算するだけ でよく、 AYUV方式も入力された画像データの差分を符号化するだけ でよい。 アルゴリズムが容易であることは、圧縮処理のハードウエアを 低コス 卜で実現可能とし、伸張処理のソフ トウ Xァの負担も少なくする 前記圧縮手段は特に専用ハードウエアに限定されるものではなく、ソ フ トウェアで実現されてもよい。 前記ィン夕フエース手段には例えば U S Bに準拠したインタフエ「 ス機能を採用することができる。 U S Bィン夕フェース機能を有する U S Bデバイスが接続されるホス ト装置の U S Bポ一トは多数の U S B デバイスで共有することができる。ホスト装置の U S Bポートの最大デ 一夕転送レートは 1 2 M b p sのような制限が有り、複数個の U S Bデ バイスが時分割多重でデータ転送を行う場合にはその制限を満足しな ければならない。 このとき、 前記撮像装置は画像情報の圧縮率を選択可 能であるから、撮像装置のようにデ一夕転送レートの比較的大きな U S Bデバイスの場合には、 U S Bポートを共有するその他の U S Bデバイ スの数やデータ転送レートを考慮して、画像情報の圧縮率を可変できる。 前記圧縮率選択の指示を与える指示手段は、前記イン夕フェース手段 から供給される制御情報に従って前記指示を与えることができる。イン 夕フエ一ス手段に接続されたホス ト装置がその指示を与える場合、ホス ト装置は、その時の圧縮率の指示を参照して伸張処理を行うことができ る。 図面の簡単な説明 The main processing of both types of 1 / m thinning and 1 / n thinning is the filter operation, so there are many common parts in the hardware, and both 1 / m thinning and 1 / n thinning should be prepared. The increase in the circuit size due to is small. The filter operation only needs to sequentially perform a product-sum operation on input image data, and the AYUV method only needs to encode the difference between the input image data. The simplicity of the algorithm allows the compression processing hardware to be realized at low cost, and reduces the load on the decompression processing software Xa.The compression means is not particularly limited to dedicated hardware. It may be realized by software. For example, an interface function conforming to USB can be adopted as the interface means. A USB port of a host device to which a USB device having a USB interface function is connected has a large number of USB ports. The maximum data transfer rate of the USB port of the host device is limited to 12 Mbps, and when multiple USB devices transfer data by time division multiplexing, At this time, since the image pickup device can select a compression ratio of image information, in the case of a USB device having a relatively high data transfer rate such as an image pickup device, The compression ratio of the image information can be varied in consideration of the number of other USB devices sharing the USB port and the data transfer rate. When the host device connected to the interface means gives the instruction, the host device refers to the compression ratio instruction at that time. The decompression process can be performed.
第 1図は本発明の一実施例に係るモニタ用カメラとホス トコンピュ 一夕を備えた画像圧縮伸張システムの全体構成を示すプロック図であ る。  FIG. 1 is a block diagram showing an overall configuration of an image compression / decompression system including a monitoring camera and a host computer according to an embodiment of the present invention.
第 2図は可変圧縮部の一例を示すプロック図である。  FIG. 2 is a block diagram showing an example of a variable compression section.
第 3図は可変圧縮部で選択される 1 / 2間引き動作を説明する模式 図である。  FIG. 3 is a schematic diagram illustrating a 1/2 thinning operation selected by the variable compression section.
第 4図は可変圧縮部に設けられる間引き回路の一例を示す回路図で ある。  FIG. 4 is a circuit diagram showing an example of a thinning circuit provided in the variable compression section.
第 5図は可変圧縮部で選択される 1 / 4間引き動作を説明する模式 図である。 - 第 6図は AYUV回路による圧縮'伸張処理の具体的なデ一夕変換例 を示す説明図である。 Fig. 5 is a schematic diagram illustrating the 1/4 thinning operation selected by the variable compression unit. FIG. -FIG. 6 is an explanatory diagram showing a specific example of a data conversion in the compression / decompression processing by the AYUV circuit.
第 7図は AYUV回路において隣接画像との差分データを送信デ一 夕に変換する変換テーブルを示す説明図である。  FIG. 7 is an explanatory diagram showing a conversion table for converting difference data between adjacent images into transmission data in the AYUV circuit.
第 8図は AYUV回路において受信デ一夕を隣接画像との差分デー 夕に変換する変換テ一ブルを示す説明図である。  FIG. 8 is an explanatory diagram showing a conversion table for converting a received data into a difference data from an adjacent image in the AYUV circuit.
第 9図はホス トコンピュータが行う圧縮デ一夕の伸張処理の一例を 示すフロ一チヤ一トである。  FIG. 9 is a flowchart showing an example of a compression data decompression process performed by the host computer.
第 1 0図は画像デ一夕の圧縮処理をソフ トウェアで実現する一例を 示すフローチヤ一トである。 発明を実施するための最良の形態  FIG. 10 is a flowchart showing an example of realizing compression processing of image data by software. BEST MODE FOR CARRYING OUT THE INVENTION
第 1 図にはモニタ用カメラとホストコンピュータを備えた画像圧縮 伸張システムの全体構成が示される。第 1図において 4で示されるもの はパーソナルコンピュータ等のホス トコンピュー夕であり、例えば外部 イン夕フエ一スとして U SBィン夕フェース機能を有し、 US Βホスト ハブ 2 0に配置された U S Bポートに U S Bに対応したデバイス( U S Bデバイス) が接続可能にされている。 特に図示はしないが、 USBホ ス トハブ 2 0はホス トコンピュータ 4の内部でイン夕フェースコント ローラに接続され、図示を省略するプロセッサからのデ一夕転送コマン ドによって指示されるデータ転送制御を、 前記 U S B機能仕様書 (REV1.0)の規定に準拠して行う。  Fig. 1 shows the overall configuration of an image compression / decompression system equipped with a monitor camera and a host computer. In FIG. 1, reference numeral 4 denotes a host computer such as a personal computer, for example, which has a USB interface function as an external interface, and is connected to a USB port located on a US host hub 20. A device that supports USB (USB device) can be connected to the port. Although not specifically shown, the USB host hub 20 is connected to an interface controller inside the host computer 4 and controls data transfer instructed by a data transfer command from a processor (not shown). This is performed in accordance with the provisions of the USB Function Specification (REV1.0).
第 1図では、 特に制限されないが、 モニタ用カメラ 2 1は U S Bデバ イスの一つとされる。モニタ用カメラ 2 1はイン夕フェースケーブル 1 0 Aで U S Bホス トハブ 2 0に接続されている。 また、 U SBホストハ ブ 20にはィン夕フェースケ一ブル 10 B及び外部ハブ 22を介して-、 別の U S Bデバイスと して代表的に図示された D S U ( Digital Service Unit) 及び TA (Terminal Adapter) 23とキ一ボード 24が 接続されている。 In FIG. 1, although not particularly limited, the monitoring camera 21 is one of the USB devices. The monitoring camera 21 is connected to the USB host hub 20 via an interface cable 10A. In addition, USB host To the DSU (Digital Service Unit) and TA (Terminal Adapter) 23, which are typically shown as separate USB devices, via an interface cable 10B and an external hub 22. Board 24 is connected.
前記モニタ用カメラ 2 1は、 CCD (Charge Coupled Device:撮像 素子) 1、 A/D変換器 (アナログ /ディジタル変換器) 2、 及び画像 処理部 3を有する。 画像処理部 3は、 特に制限されないが、 1個の半導 体集積回路化されている。 C CD 1で取り込まれた映像信号 (画像信 号) は、 A/D変換器 2を介して、 画像処理部 3へ R (RED), G (G REEN) , B (BLUE)等の信号 (色信号) として入力される。 入 力された画像信号は、信号処理部 5で輝度信号と色差信号に変換される c 可変圧縮部 6では、輝度信号と色差信号を、圧縮率可変で情報圧縮する c 圧縮されたデータ (圧縮画像情報) は、 U SBイン夕フェース回路 7か らインタフエースケーブル 1 OAを介してホス トコンビユー夕 4へ送 信される。 ホストコンピュータ 4では、 受信した圧縮画像信号をソフ ト ウェアで伸張して、 モニタ上に表示する。  The monitor camera 21 includes a charge coupled device (CCD) 1, an A / D converter (analog / digital converter) 2, and an image processing unit 3. Although not particularly limited, the image processing unit 3 is formed as one semiconductor integrated circuit. The video signal (image signal) captured by the CCD 1 is sent to the image processing unit 3 via the A / D converter 2 to output a signal (R (RED), G (G REEN), B (BLUE), etc.) (Color signal). The input image signal is converted into a luminance signal and a chrominance signal by the signal processing unit 5.c The variable compression unit 6 compresses the luminance signal and the chrominance signal by varying the compression ratio.c Compressed data (compression The image information) is transmitted from the USB interface circuit 7 to the host computer 4 via the interface cable 1 OA. The host computer 4 expands the received compressed image signal by software and displays it on a monitor.
信号処理部 5及び可変圧縮部 6は、 特に図示しないが、 マイクロコン ピュー夕などによるソフ トウェアで各処理を行ってもよい。  Although not shown, the signal processing unit 5 and the variable compression unit 6 may perform each process using software such as a microcomputer.
CCD A/D変換器 2、 信号処理部 5、 及び可変圧縮部 6に対す る動作タイ ミングの制御はタイ ミング制御部 8が行う。可変圧縮部 6の 圧縮率の選択や、扱う画像サイズの変更に伴う信号処理部 5やタイミン グ制御部 8に対する設定変更は、ホストコンピュ一夕 4から全体制御部 9を介して任意に行なわれる。具体的には、 画像処理部 3に設定変更の 必要が生じたとき、 ホス トコンピュータ 4は、伝送路 1 OAを介して命 令若しくはコマンドを発行し、 特に制限されないが、 その命令若しくは コマン ドに付随する制御情報によって全体制御部 9の設定を切り替え る。 制御情報は、 特に制限されないが、 全体制御部 9のコントロールレ ジス夕 25に格納され、格納された制御情報を用いて可変圧縮部 6の圧 縮率を選択する。 The timing control section 8 controls the operation timing of the CCD A / D converter 2, the signal processing section 5, and the variable compression section 6. The selection of the compression ratio of the variable compression unit 6 and the setting change to the signal processing unit 5 and the timing control unit 8 according to the change of the image size to be handled are arbitrarily performed from the host computer 4 via the overall control unit 9. . Specifically, when the image processing unit 3 needs to change the setting, the host computer 4 issues an instruction or command via the transmission path 1 OA, and although not particularly limited, the instruction or command is not required. Switch the setting of the general control unit 9 according to the control information attached to You. Although the control information is not particularly limited, the control information is stored in the control register 25 of the overall control unit 9, and the compression ratio of the variable compression unit 6 is selected using the stored control information.
上記 CCD 1及び上記 A/D変換器 2は、タイ ミング制御部 8で生成 される信号に同期して動作する。 C CD 1からの画像情報は、 1走査ラ ィン毎に 1画素づっ順次読み出されて、 信号処理部 5に与えられる。モ 二夕用カメラ 2 1は C I Fなどの画像情報に対応するフレームメモリ を備える必要はない。  The CCD 1 and the A / D converter 2 operate in synchronization with a signal generated by the timing control unit 8. The image information from the CCD 1 is sequentially read out one pixel at a time for each scanning line, and supplied to the signal processing unit 5. The camera 21 does not need to have a frame memory corresponding to image information such as CIF.
第 2図には前記可変圧縮部 6の詳細な回路例が示される。上記可変圧 縮部は、取り込んだ画像の情報量を 1/2に圧縮する 1/2間引き回路 1 1、取り込んだ画像の情報量を 1/4に圧縮する 1/4間引き回路 1 2、 取り込んだ画像の情報量を 1/2に圧縮する AYUV回路 13、 及 び 3種類の圧縮回路を選択するスィツチ回路 14, 15を有する。スィ ツチ回路 14及びスィッチ回路 15は、 全体制御部 (全体制御回路) 9 の指示によってスィッチ状態が制御される。 当該スィッチ 14 , 15の 切り替えにより、 入力された信号を圧縮せずに出力する経路や、圧縮率 1/2、 1/4、 1/8の圧縮を行う経路を設定できる。  FIG. 2 shows a detailed circuit example of the variable compression section 6. The variable compression section includes a 1/2 thinning circuit 11 for compressing the information amount of the captured image to 1/2, a 1/4 thinning circuit 12 for compressing the information amount of the captured image to 1/4, It has an AYUV circuit 13 for compressing the information amount of the image to half, and switch circuits 14 and 15 for selecting three kinds of compression circuits. The switch states of the switch circuit 14 and the switch circuit 15 are controlled by an instruction from the general control unit (general control circuit) 9. By switching the switches 14 and 15, it is possible to set a path for outputting the input signal without compression and a path for compressing the compression ratio of 1/2, 1/4, and 1/8.
前記 1/2間引き回路 1 1について説明する。第 3図には 2次元に配 置された輝度 (又は色差)信号を模式的に示している。 1/2間引き回 路は、 1/2のデータを標本化し、 1/2のデ一夕を間引くことにより、 上記情報量を 1/2に圧縮する。 ただし、 単純に 1/2のデータを間引 いただけでは、 ェリァシングの影響により、 画像に歪みの生じることが ある。 そこで間引きを行う前に、 画像に 2次元の L P F (Low Pass Filter)演算を施し、 高周波成分を低減させる。 L P Fの構成例を第 4 図に示す。水平方向の記憶素子 16が 7夕ップ、 垂直方向の記憶素子 1 7が 3タップの F IR (Finite Impulse Response) 型のフィル夕であ る。 輝度 (又は色差) 信号を水平方向に 1画素づっ入力し、 係数 1 &A 〜18 Jを用いた積和演算を行い、演算結果を中心画素のデータに置き 換える。選択回路 19は第 3図に従った間引きを行って情報量を 1/2 に圧縮する。 The 1/2 thinning circuit 11 will be described. FIG. 3 schematically shows luminance (or color difference) signals arranged two-dimensionally. The 1/2 thinning circuit compresses the above information amount to 1/2 by sampling 1/2 data and thinning out 1/2 data. However, if only 1/2 of the data is thinned out, the image may be distorted due to the effect of aliasing. Therefore, before thinning, the image is subjected to a two-dimensional LPF (Low Pass Filter) operation to reduce high frequency components. Fig. 4 shows an example of LPF configuration. The horizontal storage element 16 is a 7-pin filter and the vertical storage element 17 is a 3-tap FIR (Finite Impulse Response) type filter. You. A luminance (or color difference) signal is input one pixel at a time in the horizontal direction, a product-sum operation is performed using coefficients 1 & A to 18J, and the operation result is replaced with the data of the center pixel. The selection circuit 19 performs the thinning according to FIG. 3 to compress the information amount to half.
前記 1/4間引き回路 12について説明する。 1/4間引き回路 12 は、 第 5図に示すように、 1/4のデータを標本化し、 3/4のデ一夕 を間引くことにより、情報量を 1/4に圧縮する。 ここでも間引き前に、 LPF演算を行う。 フィル夕構成は第 4図と全く同じであるが、 1/2 間引き回路 1 1とは係数 18 A〜l 8 Jの値が異なる。 1/2間引き回 路 1 1と 1/4間引き回路 12は、 同時に動作することはないので、係 数 18 A~l 8 Jだけ 2種類用意し、その他の回路部分は 1/2間引き 回路 1 1と 1/4間引き回路 12に共用する。  The 1/4 thinning circuit 12 will be described. As shown in FIG. 5, the 1/4 thinning circuit 12 samples 1/4 data and thins out 3/4 data to compress the information amount to 1/4. Here, LPF calculation is performed before thinning. The filter configuration is exactly the same as in FIG. 4, but the values of the coefficients 18 A to 18 J are different from those of the 1/2 thinning circuit 11. 1/2 decimation circuit 1 Since 1 and 1/4 decimation circuit 12 do not operate at the same time, only two types of coefficients, 18 A to l8 J, are prepared, and the other circuit parts are 1/2 decimation circuit 1 Shared with 1 and 1/4 thinning circuit 12.
前記 Δ YUV回路 13について説明する。 AYUV方式はカーナビゲ ーシヨン等で実用化されている圧縮技術である。元デ一夕を圧縮デ一夕 に変換する変換の例を第 6図に示す。 輝度 (又は色差)信号のダイナミ ックレンジ 0~255を変換式 Υ二(y/255) · 219 + 16により 16〜 23 5に圧縮する。 予測値 P nとして、 Y n—予測値 P n =差分 D nを求め る。差分 D nを第 7図に示した変換テ一ブルに従って符号化し、 得られ た ΔΥ nを送信する。△ Y nを第 8図に示した変換テ一プルに従って再 変換した D'nを、 予測値 P nに加え、 次回の予測値 P n+1 とする (P n+l=P n + D'n) 。 P n+1が 16以下または 235以上の場合は、 16 または 235にクリップする。 AYUV回路 13も情報量を 1/2に圧 縮する。  The ΔYUV circuit 13 will be described. The AYUV method is a compression technology that has been put to practical use in car navigation and the like. Figure 6 shows an example of conversion from original data to compressed data. The dynamic range of luminance (or color difference) signal 0 to 255 is compressed to 16 to 235 by the conversion formula Υ2 (y / 255) · 219 + 16. As the predicted value Pn, Yn—Predicted value Pn = Difference Dn is obtained. The difference Dn is encoded according to the conversion table shown in FIG. 7, and the obtained ΔΥn is transmitted. Δ Yn is re-converted according to the conversion template shown in Fig. 8, and D'n is added to the predicted value Pn to obtain the next predicted value Pn + 1 (Pn + l = Pn + D 'n). If P n + 1 is 16 or less or 235 or more, clip to 16 or 235. The AYUV circuit 13 also reduces the amount of information by half.
受信側では、受信した ΔΥ ηを第 8図に示した変換テーブルより差分 D' ηに復号し、直前の復元デ一夕 Υ'η- 1に D'nを加えてレンジ圧縮デ —夕 Y,nを得る。 さらに、 変換式 y,=( Υ,- 16) · 255/219によりダイナ ミックレンジを拡大し、 復元デ一夕 y'nを得る。 On the receiving side, the received ΔΥη is decoded into the difference D′ η from the conversion table shown in FIG. 8, and D′ n is added to the immediately preceding decompressed data Υ′η−1, and the range compression data is decompressed. , N. Furthermore, the dynamo is calculated by the conversion formula y, = (Υ, -16) · 255/219. Expand the mic range and get y'n.
以上のように、 上記可変圧縮部 6は、処理が画像情報フレーム内で完 結しており、圧縮伸張処理においてフレームメモリを用いる必要がなく、 当該画像圧縮伸張装置の低コスト化を図ることができる。 さらに、 画像 情報の冗長度による処理数の変化はなく、フレームレートを一定に保つ ことができ、 再生画像の被写体は滑らかな動作を保証される。  As described above, in the variable compression section 6, the processing is completed in the image information frame, and there is no need to use a frame memory in the compression / expansion processing, and the cost of the image compression / expansion apparatus can be reduced. it can. Furthermore, there is no change in the number of processes due to the redundancy of the image information, the frame rate can be kept constant, and the smooth operation of the object of the reproduced image is guaranteed.
前記信号処理部 5、可変圧縮部 6の機能をソフ トウェァで処理する場 合を第 1 0図のフローチャートを用いて説明する。  The case where the functions of the signal processing unit 5 and the variable compression unit 6 are processed by software will be described with reference to the flowchart of FIG.
A/D変換器 2から入力される、 デジタル化された R、 G、 B等の映 像信号を、 輝度信号と色差信号に変換する ( S 9 ) 。 次に、 ホス トコン ピュー夕から指示された圧縮率により、 圧縮処理が必要なら (S 1 0)、 間引きによる圧縮の可否を判断する (S 1 1 ) 。 間引きによる圧縮を行 う場合、 1/2間引きか 1/4間引きかを判断し ( S 1 2 ) 、 1/2間 引き処理 (S 1 3 ) 又は 1/4間引き処理 (S 1 4) どちらかを実行す る。 更に、 AYUVによる圧縮を必要とする時 ( S 1 5 ) は、 AYUV 圧縮処理を行う ( S 1 6 ) 。 いずれの圧縮も必要ない場合は、 輝度(色 差)信号をスルーで出力する。  The digitalized video signals of R, G, B, etc., input from the A / D converter 2, are converted into a luminance signal and a color difference signal (S9). Next, if compression processing is necessary (S10), it is determined whether or not compression by thinning is possible (S11) based on the compression ratio instructed from the host computer. When performing compression by thinning, determine whether it is 1/2 thinning or 1/4 thinning (S12), and select either 1/2 thinning processing (S13) or 1/4 thinning processing (S14). Or execute. Further, when compression by AYUV is required (S15), AYUV compression processing is performed (S16). If neither compression is necessary, the luminance (color difference) signal is output through.
例えば、 圧縮率 1/4の場合、 間引き 1/4による方法と、 間引き 1 / 2かつ AYUVによる方法がある。画質や伸張するソフ トウエアの処 理能力によりどちらの方法も選択可能とする。  For example, when the compression ratio is 1/4, there are two methods: thinning 1/4 and thinning 1/2 and AYUV. Either method can be selected depending on the image quality and the processing capability of the decompressing software.
△ YUVによる圧縮を実施せずに、 1/4間引きだけの圧縮を行った 場合、圧縮された画像情報をィン夕フヱ一スケーブル 1 0 Αからそのま ま表示手段(ホス トコンピュータ 4のディスプレイ等) に供給すれば、 △ YUVの復号手段を用いなくても、縮小サイズの画像表示が可能であ る。  △ If only 1/4 decimation is performed without performing YUV compression, the compressed image information is displayed as it is from the interface cable 10 on the display means (host computer 4). , It is possible to display reduced-size images without using YUV decoding means.
ホス トコンピュ一夕 4はインタフェ一スケ一ブル 1 O Aを介して可 変圧縮部 6に制御情報を与えて圧縮率を指示する。ホストコンピュー.夕 4は、 その制御情報を記憶しておき、 受信した圧縮デ一夕を伸張すると き、 記憶しておいた制御情報を参照して、 第 9図のフローチャートに従 つた処理を行う。 Host computer 4 can be connected via interface cable 1 OA The control information is given to the variable compression section 6 to indicate the compression ratio. The host computer 4 stores the control information and, when decompressing the received compressed data, refers to the stored control information and performs processing according to the flowchart of FIG. .
ホス トコンピュータ 4は前記制御情報を参照して AYUVによる圧 縮を施したかを判定し ( S 1 )、 AYUVによる圧縮が施されている場 合は、 Δ YUVによる伸張処理を行う (S 2 ) 。 次に、 ホストコンビュ 一夕 4は前記制御情報を参照して間引きによる圧縮が施されているか を判断し ( S 3 ) 、 されている場合は、 1/2間引きか 1/4間引きか を判断する ( S 4) 。 1/2間引きが施されている場合は、 2倍補間処 理 (S 5 ) で間引きされたデ一夕を補間するフィル夕演算を行う。 1/ 4間引きが施されている場合は、 伸張処理の可否を判断する ( S 6 ) 。 ホストコンピュータ 4による表示画面サイズが、圧縮前の画面サイズの 1/4でよければ、 伸張処理を省略し、伸張処理が必要なら 4倍補間処 理 ( S 7 ) で間引きされたデータを補間するフィル夕演算を行う。 伸張 処理が完了したら画像を表示する ( S 8 ) 。  The host computer 4 refers to the control information to determine whether compression by AYUV has been performed (S1), and if compression by AYUV has been performed, performs expansion processing by ΔYUV (S2). . Next, the host computer 4 refers to the control information to determine whether compression by thinning has been performed (S3), and if so, determines whether it is 1/2 thinning or 1/4 thinning. Yes (S4). If 1/2 has been thinned out, a filter operation for interpolating the data thinned out in the double interpolation processing (S5) is performed. If 1/4 thinning has been performed, it is determined whether decompression processing is possible (S6). If the display screen size by the host computer 4 is 1/4 of the screen size before compression, the decompression process is omitted. Performs a filter calculation. When the decompression process is completed, the image is displayed (S8).
画像情報の圧縮方式が可変圧縮率であるため、相反する関係にある圧 縮率と画質のどちらを優先する場合にも対応できる。既定の圧縮率で各 フレームを圧縮し、 個々の圧縮アルゴリズムの演算量が少なく、 複数の フレームメモリも必要としないので、低コス トでシステムを実現できる c ホス トコンピュータ 4の U S Bポートは多数の U S Bデバイスが共 有する。ホス トコンピュータ 4の U S Bポートの最大デ一夕転送レート は 1 2 Mb p sの制限が有り、複数個の US Bデバイスが時分割多重で データ転送を行う場合にはその制限を満足しなければならない。このと き、 モニタ用カメラ 2 1は画像情報の圧縮率を選択可能であるから、 モ 二夕用カメラ 2 1のようにデータ転送レ一卜の比較的大きな U S Bデ バイスの場合には、 U S Bポートを共有するその他の U S Bデバイスの 数ゃデ一夕転送レートを考慮して、 画像情報の圧縮率を可変できる。例 えば、 C C D 1による撮像のフレームレートが 2 5 H z、 画像デ一タフ ォーマツ 卜が 4 : 2 : 0、 画像サイズが C I Fの場合、 U S Bホス トハ ブ 2 0に接続される U S Bデバイスの数が少ないときは、圧縮率を 1 / 4に設定し、その他の U S Bデバイスの数がさらに多くなつてきたとき は圧縮率を 1 / 8に設定することができる。 Since the compression method of image information is a variable compression ratio, it is possible to cope with a case where priority is given to either the compression ratio or the image quality, which are in opposite relations. Since each frame is compressed at a predetermined compression ratio, the amount of operation of each compression algorithm is small, and multiple frame memories are not required, the USB port of the c host computer 4 that can realize a system at low cost has many USB devices share. The maximum data transfer rate of the USB port of the host computer 4 has a limit of 12 Mbps, and when multiple USB devices transfer data by time division multiplexing, the limit must be satisfied. . At this time, since the monitor camera 21 can select the compression ratio of the image information, the USB data having a relatively large data transfer rate like the camera camera 21 is used. In the case of a device, the compression rate of image information can be varied in consideration of the transfer rate of several USB devices sharing the USB port. For example, if the imaging frame rate of CCD 1 is 25 Hz, the image data format is 4: 2: 0, and the image size is CIF, the number of USB devices connected to the USB host hub 20 When the number of other USB devices is increasing, the compression ratio can be set to 1/8.
また、 C C D 1による撮像のフレームレー卜が 2 5 H z、 画像データ フォ一マツ トが 4 : 2 : 0、 画像サイズが Q C I Fの場合には、 可変圧 縮部 6にデ一夕スルー (圧縮率 0 ) を選択させ、 その他の U S Bデバイ スの数が多くなってきたときは圧縮率を 1 / 2又は 1 / 4に設定する ことができる。  When the frame rate of imaging with CCD 1 is 25 Hz, the image data format is 4: 2: 0, and the image size is QCIF, the data is passed through the variable Select the ratio 0), and when the number of other USB devices increases, the compression ratio can be set to 1/2 or 1/4.
上述のような圧縮率の設定制御は、ホストコンピュータが各 U S Bデ バイスから取得した構成情報を参照して行えばよい。  The compression ratio setting control as described above may be performed by the host computer with reference to the configuration information acquired from each USB device.
このように、 U S Bイン夕フエ一ス機能を有するモニタ用カメラ 2 1 は、 デ一夕転送量が大きい故に、 U S Bポートを共有するその他の U S Bデバイスの数ゃデ一夕転送レートを考慮して、画像情報の圧縮率を可 変にでき、 U S Bイン夕フェースに最適である。  As described above, since the monitor camera 21 having the USB interface function has a large data transfer amount, the number of other USB devices sharing the USB port and the data transfer rate are taken into consideration. The compression ratio of image information can be varied, making it ideal for USB interface.
以上本発明者によってなされた発明を実施例に基づいて具体的に説 明したが本発明はそれに限定されるものではなく、その要旨を逸脱しな い範囲において種々変更可能である。  The invention made by the present inventor has been specifically described based on the embodiments, but the present invention is not limited thereto, and can be variously modified without departing from the gist thereof.
例えば、 ィン夕フェース手段は U S Bに限定されず、 その他のシリア ルイン夕フェース、又はパラレルインタフエースなどであってもよい。 また、 輝度信号及び色差信号の画像デ一夕フォーマツ トは 4 : 2 : 2な どであってもよい。 また、撮像手段により撮像される画像情報の画像フ レームレ一トは 2 5 H zに限定されず、 3 0 H zなどであってもよい。 また、 撮像手段により撮像される画像情報の画像サイズは C I F , Q-C I Fに限定されない。 また、 上記全体制御部 9の設定を上記ホス トコン ピュー夕 4より設定するが、外部からの設定変更が必要ない項目につい ては、 予め、 固定にしておいてもよい。 産業上の利用可能性 For example, the interface means is not limited to USB, but may be another serial interface or a parallel interface. The image format of the luminance signal and the color difference signal may be 4: 2: 2. Further, the image frame rate of the image information picked up by the image pickup means is not limited to 25 Hz, but may be 30 Hz or the like. Further, the image size of the image information imaged by the imaging means is not limited to CIF and QCIF. The settings of the overall control unit 9 are set from the host computer 4, but items that do not require external setting changes may be fixed in advance. Industrial applicability
本発明は、パーソナルコンビュ一夕に接続されて用いられるモニタ用 カメラ、 テレビ会議システム、 テレビ電話等に広く適用することができ る。  INDUSTRIAL APPLICABILITY The present invention can be widely applied to a monitor camera, a video conference system, a video phone, and the like which are used by being connected to a personal computer.

Claims

請 求 の 範 囲 - The scope of the claims -
1.撮像手段と、 前記撮像手段を介して取得された画像情報を圧縮率 可変で圧縮する圧縮手段と、前記圧縮手段から出力される圧縮画像情 報のデ一夕伝送に用いられるィン夕フェース手段とを含み、 1. Imaging means, compression means for compressing image information obtained via the imaging means at a variable compression rate, and an image used for one-time transmission of compressed image information output from the compression means And face means,
前記圧縮手段は、夫々画像情報を圧縮する複数個の圧縮論理手段と、 前記圧縮論理手段を用いた処理の圧縮率を選択する手段と、前記選択 手段が選択する圧縮率を指示する手段とを含む撮像装置。  The compression unit includes: a plurality of compression logic units for respectively compressing image information; a unit for selecting a compression ratio for processing using the compression logic unit; and a unit for indicating a compression ratio selected by the selection unit. Imaging device including.
2.前記圧縮論理手段は、 単一の画像情報フレーム内で圧縮処理を完了 可能である請求の範囲第 1項に記載の撮像装置。 2. The imaging device according to claim 1, wherein said compression logic means is capable of completing a compression process within a single image information frame.
3.前記複数個の圧縮論理手段として画像情報の間引き回路及び ΔΥυ V回路を有し、 前記選択手段は、 前記間引き回路を用いる状態、 前記 Δ YUV回路を用いる状態、及び前記間引き回路と AYUV回路の双 方を不使用として画像情報をスルーさせる状態の中から一つの状態 を選択可能である請求の範囲第 2項に記載の撮像装置。  3. The plurality of compression logic means includes a thinning circuit for image information and a ΔΥυV circuit, and the selecting means includes a state using the thinning circuit, a state using the ΔYUV circuit, and a thinning circuit and an AYUV circuit. 3. The imaging device according to claim 2, wherein one state can be selected from a state in which image information is passed through by disabling both of them.
.前記複数個の圧縮論理手段として、 画像情報の 1/m間引き回路と、 画像情報の 1/n間引き回路と、 AYUV回路とを有し、  The plurality of compression logic means includes a 1 / m thinning circuit for image information, a 1 / n thinning circuit for image information, and an AYUV circuit;
前記選択手段は、 前記 l/m間引き回路を用いる状態、 前記 1/n 間引き回路を用いる状態、 前記△ YUV回路を用いる状態、 前記 1/ m間引き回路及び前記 AYUV回路を用いる状態、前記 1/n間引き 回路及び前記 AYUV回路を用いる状態、及び全ての圧縮論理手段を 不使用として画像情報をスルーさせる状態の中から一つの状態を選 択可能である請求の範囲第 2項に記載の撮像装置。  The selecting means includes: a state using the l / m thinning circuit; a state using the 1 / n thinning circuit; a state using the △ YUV circuit; a state using the 1 / m thinning circuit and the AYUV circuit; The imaging apparatus according to claim 2, wherein one state can be selected from a state in which the n-thinning circuit and the AYUV circuit are used, and a state in which image information is passed without using all compression logic means. .
5.前記ィン夕フヱ一ス手段は USBに準拠したィン夕フェース機能を 有する請求の範囲第 3項又は第 4項に記載の撮像装置。  5. The imaging device according to claim 3, wherein the interface means has an interface function conforming to USB.
6. 前記指示手段は、 前記ィン夕フェース手段から供給される制御情報 に従って前記指示を与える請求の範囲第 5項記載の撮像装置。 6. The instruction means includes control information supplied from the interface means. 6. The imaging device according to claim 5, wherein the instruction is given according to:
7 . 撮像手段と、 前記撮像手段を介して取得された画像情報を圧縮率可 変で圧縮する圧縮手段と、前記圧縮手段から出力される圧縮画像情報 のデータ伝送に用いられるィン夕フェース手段とを含み、  7. Imaging means, compression means for compressing the image information obtained via the imaging means at a variable compression rate, and interface means used for data transmission of the compressed image information output from the compression means And
前記圧縮手段は、前記ィン夕フェース手段から供給される制御情報 に従って圧縮率が指示され、単一の画像情報フレーム内で圧縮処理を 完了可能な撮像装置。  An image pickup apparatus wherein the compression means is instructed on a compression ratio in accordance with control information supplied from the interface means, and is capable of completing compression processing within a single image information frame.
8 .前記イン夕フェース手段は U S Bに準拠したィン夕フェース機能を 有する請求の範囲第 7項に記載の撮像装置。  8. The image pickup apparatus according to claim 7, wherein the interface means has an interface function conforming to USB.
9 . 撮像装置とホス ト装置とを有するデ一夕処理システムであって、 前記撮像装置は、 撮像手段と、 前記撮像手段を介して取得された画 像情報を圧縮率可変で圧縮する圧縮手段と、前記圧縮手段から出力さ れる圧縮画像情報のデ一夕伝送に用いられるィン夕フェース手段と を含み、 前記圧縮手段は、 前記イン夕フェース手段から供給される制 御情報に従って圧縮率が指示され、単一の画像情報フレーム内で圧縮 処理を完了可能であり、 9. A data processing system including an imaging device and a host device, wherein the imaging device includes an imaging unit, and a compression unit that compresses image information acquired via the imaging unit at a variable compression ratio. And an interface means used for data transmission of the compressed image information output from the compression means, wherein the compression means has a compression rate according to the control information supplied from the interface means. Instructed to complete the compression process within a single image information frame,
前記ホスト装置は、前記ィン夕フエース手段から伝送されてくる圧 縮画像情報を、前記圧縮率を指示した制御情報を参照して伸張可能な 伸張手段とを含んで成るデ一夕処理システム。  A decompression processing system comprising: a decompression unit that can decompress the compressed image information transmitted from the interface unit with reference to the control information indicating the compression ratio.
1 0 .前記ィン夕フェース手段は U S Bに準拠したィン夕フェース機能 を有し、ホス ト装置はパーソナルコンピュータである請求の範囲第 9 に項記載のデータ処理システム。 10. The data processing system according to claim 9, wherein said interface means has an interface function conforming to USB, and said host device is a personal computer.
1 1 . 画像情報を取り込むための撮像素子と、 前記撮像素子を介して取 得された画像情報を圧縮率可変で圧縮する可変圧縮部と、前記可変圧 縮部から出力される圧縮された画像情報のデ一夕伝送に用いられる インタフヱース回路とを含み、 前記可変圧縮部は、夫々画像情報を圧縮する複数個の圧縮論理回.路 と、前記圧縮論理回路を用いた処理の圧縮率を選択するスィツチ回路 と、前記スィツチ回路が選択する圧縮率を指示する制御部とを含む撮 1 2. 前記圧縮論理回路は、 単一の画像情報フレーム内で圧縮処理を完 了可能である請求の範囲第 1 1項に記載の撮像装置。 11. An image sensor for capturing image information, a variable compressor for compressing image information obtained via the image sensor at a variable compression rate, and a compressed image output from the variable compressor. And an interface circuit used for data overnight transmission, The variable compression unit includes a plurality of compression logic circuits for compressing image information, a switch circuit for selecting a compression ratio for processing using the compression logic circuit, and a compression ratio for the switch circuit. 12. The imaging apparatus according to claim 11, wherein the compression logic circuit can complete the compression processing within a single image information frame.
13.前記複数個の圧縮論理回路として画像情報の間引き回路及び ΔΥ UV回路を有し、 前記スィツチ回路は、 前記間引き回路を用いる状態、 前記△ YUV回路を用いる状態、及び前記間引き回路と ΔΥυν回路 の双方を不使用として画像情報をスルーさせる状態の中から一つの 状態を選択可能である請求の範囲第 1 2項に記載の撮像装置。  13. The plurality of compression logic circuits include a thinning circuit for image information and a ΔΥUV circuit, wherein the switch circuit is in a state using the thinning circuit, a state using the △ YUV circuit, and a thinning circuit and a ΔΥυν circuit. 13. The imaging device according to claim 12, wherein one state can be selected from a state in which image information is passed through by disabling both.
14.前記複数個の圧縮論理回路として、 画像情報の 1/m間引き回路 と、 画像情報の 1/n間引き回路と、 AYUV回路とを有し、  14. The plurality of compression logic circuits include a 1 / m thinning circuit for image information, a 1 / n thinning circuit for image information, and an AYUV circuit,
前記スィツチ回路は、 前記 1/m間引き回路を用いる状態、 前記 1 /n間引き回路を用いる状態、 前記△ YUV回路を用いる状態、 前記 The switch circuit includes a state using the 1 / m thinning circuit, a state using the 1 / n thinning circuit, a state using the YUV circuit,
1/m間引き回路及び前記 AYUV回路を用いる状態、前記 1/n間 引き回路及び前記 AYUV回路を用いる状態、及び全ての圧縮論理回 路を不使用として画像情報をスルーさせる状態の中から一つの状態 を選択可能である請求の範囲第 12項に記載の撮像装置。 One of a state in which the 1 / m thinning circuit and the AYUV circuit are used, a state in which the 1 / n thinning circuit and the AYUV circuit are used, and a state in which all the compression logic circuits are not used and the image information is passed. 13. The imaging device according to claim 12, wherein a state can be selected.
15.前記ィン夕フエース回路はシリアルデータ転送のィン夕フェース 機能を有する請求の範囲第 13項又は第 14項に記載の撮像装置。15. The imaging apparatus according to claim 13, wherein the interface circuit has an interface function of serial data transfer.
16.前記制御部は、 前記イン夕フェース回路から供給される制御情報 に従って前記指示を与える請求の範囲第 15項記載の撮像装置。 16. The imaging device according to claim 15, wherein the control unit gives the instruction according to control information supplied from the interface circuit.
17.撮像素子と、 前記撮像素子を介して取得された画像情報を圧縮率 可変で圧縮する可変圧縮部と、前記可変圧縮部から出力される圧縮画 像情報のデータ伝送に用いられるィン夕フェース回路とを含み、 前記可変圧縮部は、前記ィン夕フェース回路から供給される制御精 報に従って圧縮率が指示され、単一の画像情報フレーム内で圧縮処理 を完了可能な撮像装置。 17. An image sensor, a variable compression unit that compresses image information obtained via the image sensor at a variable compression rate, and an imager used for data transmission of compressed image information output from the variable compressor. And a face circuit, An imaging apparatus in which the variable compression section is instructed on a compression ratio in accordance with control information supplied from the interface circuit, and is capable of completing a compression process within a single image information frame.
8 .前記ィン夕フェース回路はシリアルデ一夕転送のィン夕フェース 機能を有する請求の範囲第 1 7項に記載の撮像装置。  8. The imaging device according to claim 17, wherein the interface circuit has an interface function of serial data transfer.
9 . 撮像装置とホス ト装置とを有するデータ処理システムであって、 前記撮像装置は、 撮像素子と、 前記撮像素子を介して取得された画 像情報を圧縮率可変で圧縮する圧縮部と、前記圧縮部から出力される 圧縮画像情報のデータ伝送に用いられるィン夕フェース回路とを含 み、 前記圧縮部は、 前記イ ンタフヱ一ス回路から供給される制御情報 に従って圧縮率が指示され、単一の画像情報フレーム内で圧縮処理を 完了可能であり、  9. A data processing system including an imaging device and a host device, wherein the imaging device includes: an imaging device; and a compression unit configured to compress image information acquired via the imaging device at a variable compression rate. An interface circuit used for data transmission of compressed image information output from the compression unit, wherein the compression unit is instructed on a compression ratio according to control information supplied from the interface circuit, The compression process can be completed within a single image information frame,
前記ホスト装置は、前記ィン夕フェース回路から伝送されてくる圧 縮画像情報を、前記圧縮率を指示した制御情報を参照して伸張可能な 伸張回路とを含んで成るデ一夕処理システム。  A decompression processing system comprising: a decompression circuit that can decompress the compressed image information transmitted from the interface circuit with reference to the control information indicating the compression ratio.
0 .前記ィン夕フエ一ス回路はシリアルデータ転送のィン夕フエ一ス 機能を有し、ホス ト装置はパーソナルコンピュータである請求の範囲 第 1 9に項記載のデータ処理システム。  10. The data processing system according to claim 19, wherein said interface circuit has an interface function of serial data transfer, and said host device is a personal computer.
PCT/JP1998/003215 1998-07-17 1998-07-17 Image pickup device WO2000004716A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW087111613A TW416229B (en) 1998-07-17 1998-07-16 Photographing apparatus
PCT/JP1998/003215 WO2000004716A1 (en) 1998-07-17 1998-07-17 Image pickup device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP1998/003215 WO2000004716A1 (en) 1998-07-17 1998-07-17 Image pickup device

Publications (1)

Publication Number Publication Date
WO2000004716A1 true WO2000004716A1 (en) 2000-01-27

Family

ID=14208650

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP1998/003215 WO2000004716A1 (en) 1998-07-17 1998-07-17 Image pickup device

Country Status (2)

Country Link
TW (1) TW416229B (en)
WO (1) WO2000004716A1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004112396A1 (en) * 2003-06-13 2004-12-23 Nokia Corporation Electronic device for compressing image data and creating thumbnail image, image processor, and data structure
JP2007124212A (en) * 2005-10-27 2007-05-17 Megachips Lsi Solutions Inc Image processor and device connected to image processor
CN1320809C (en) * 2001-08-29 2007-06-06 佳能株式会社 Picture processing device and method, and computer program and storage medium
JP2011155693A (en) * 2011-04-27 2011-08-11 Mega Chips Corp Image processing device, and device connected to image processing device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0262856U (en) * 1988-10-27 1990-05-10
JPH07264092A (en) * 1994-03-17 1995-10-13 Fujitsu Ltd Information provision device
JPH08289251A (en) * 1995-04-18 1996-11-01 Tec Corp Multi-media processor

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0262856U (en) * 1988-10-27 1990-05-10
JPH07264092A (en) * 1994-03-17 1995-10-13 Fujitsu Ltd Information provision device
JPH08289251A (en) * 1995-04-18 1996-11-01 Tec Corp Multi-media processor

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
M. WRIGHT: "Digital-camera interfaces lead to ubiquitous deployment", EDN, vol. 43, no. 2, 1998, US, pages 63 - 64, 66, 68, 70, 72-73, XP002927439 *
SATOSHI FUKINO: "Practical Theory on USB (in Japanse)", ELECTRONICS, vol. 43, no. 5, 1998, TOKYO, pages 31 - 51, XP002927440 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1320809C (en) * 2001-08-29 2007-06-06 佳能株式会社 Picture processing device and method, and computer program and storage medium
WO2004112396A1 (en) * 2003-06-13 2004-12-23 Nokia Corporation Electronic device for compressing image data and creating thumbnail image, image processor, and data structure
JPWO2004112396A1 (en) * 2003-06-13 2006-07-27 ノキア コーポレイション Electronic devices that compress image data and create thumbnail images, image processing devices, and data structures
US7362970B2 (en) 2003-06-13 2008-04-22 Nokia Corporation Electronic device for compressing image data and producing thumbnail image, image processing apparatus, and data structure
JP4571074B2 (en) * 2003-06-13 2010-10-27 ノキア コーポレイション Electronic devices that compress image data and create thumbnail images, image processing devices, and data structures
JP2007124212A (en) * 2005-10-27 2007-05-17 Megachips Lsi Solutions Inc Image processor and device connected to image processor
JP2011155693A (en) * 2011-04-27 2011-08-11 Mega Chips Corp Image processing device, and device connected to image processing device

Also Published As

Publication number Publication date
TW416229B (en) 2000-12-21

Similar Documents

Publication Publication Date Title
US20230421808A1 (en) Line-based compression for digital image data
JP4138056B2 (en) Multi-standard decompression and / or compression device
JP3547572B2 (en) Receiver having analog and digital video modes and receiving method thereof
US9025929B2 (en) Image capturing apparatus and image capturing method
US8619866B2 (en) Reducing memory bandwidth for processing digital image data
KR100781629B1 (en) A method for reducing the memory required for decompression by storing compressed information using DCT base technology and a decoder for implementing the method
JP4346697B2 (en) Imaging device
US7672569B2 (en) Moving picture recording and sending device having zoom processing capability
WO2009125673A1 (en) Dynamic image processing device, dynamic image processing method, and dynamic image processing program
WO2000004716A1 (en) Image pickup device
WO2002104035A1 (en) Method and apparatus for data compression of multi-channel moving pictures
GB2296618A (en) Digital video decoding system requiring reduced memory space
JPH11239329A (en) Image transmitter and image transmission system using the same
JP3630879B2 (en) Video camera
US6430221B1 (en) Transmitter, receiver, transmitting method and receiving method
JP3406924B2 (en) Image processing apparatus and method
JP2001231046A (en) Digital camera system and image transfer method used in it
KR20080006774A (en) Thumbnail data transmission method and device
JPH1169377A (en) Image information encoding device and device applying the same
WO2022130873A1 (en) Image capture apparatus, program, and encoder selecting method
JPH0686130A (en) Picture processor
JP5131954B2 (en) Video recorder and camera system
JP2591437B2 (en) High-definition video signal encoding / decoding device
KR100393382B1 (en) Digital Video Decoding Apparatus and Method
JP3745605B2 (en) Electronic still camera

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): CN JP KR SG US

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE

DFPE Request for preliminary examination filed prior to expiration of 19th month from priority date (pct application filed before 20040101)
121 Ep: the epo has been informed by wipo that ep was designated in this application
122 Ep: pct application non-entry in european phase