WO2010086918A1 - 動画像表示装置 - Google Patents

動画像表示装置 Download PDF

Info

Publication number
WO2010086918A1
WO2010086918A1 PCT/JP2009/003649 JP2009003649W WO2010086918A1 WO 2010086918 A1 WO2010086918 A1 WO 2010086918A1 JP 2009003649 W JP2009003649 W JP 2009003649W WO 2010086918 A1 WO2010086918 A1 WO 2010086918A1
Authority
WO
WIPO (PCT)
Prior art keywords
moving image
image data
data
unit
switching control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2009/003649
Other languages
English (en)
French (fr)
Inventor
井須久美子
対馬尚之
虻川雅浩
村山修
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to CN2009801504510A priority Critical patent/CN102257807B/zh
Priority to JP2010548264A priority patent/JP5230756B2/ja
Priority to US13/126,180 priority patent/US20110199535A1/en
Priority to EP09839110.5A priority patent/EP2383997A4/en
Publication of WO2010086918A1 publication Critical patent/WO2010086918A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/10—Special adaptations of display systems for operation with variable images
    • G09G2320/103—Detection of image changes, e.g. determination of an index representative of the image change
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory

Definitions

  • the present invention relates to a moving image display device that switches screens when an error occurs due to deterioration of radio wave conditions or the like.
  • Patent Document 1 discloses a technique for switching from a moving image to a still image when received encoded data cannot be decoded at an appropriate timing.
  • a timer is provided, and when the control is not performed at an appropriate timing with respect to the timer, the selector automatically selects the output of the still image and outputs the high-quality still image.
  • Patent Document 2 an error is detected from digital data and compared with a threshold determined according to the genre of the program corresponding to the video data, the video size, and the type of the digital data, and the number of unit blocks having an error is the threshold.
  • a technique for switching to a still image when there is more than a value is disclosed.
  • the screen display is uniquely switched by comparing the time required for decoding, the number of errors, and a threshold value.
  • this method does not take into account human visual characteristics, and handles large and small scenes equally and switches the screen display.
  • it is not worrisome to notice that it is moving, but in a scene with small movements such as landscapes, even if the same image is disturbed, there is no big change in the image, so the viewer recognizes the disorder of the image There was a problem.
  • the screen display is switched equally, so you are aware of the image disturbance. There has been a problem of causing a non-viewer to recognize image disturbance.
  • the present invention has been made to solve the above-described problems, and when an error occurs due to deterioration in radio wave conditions, the viewer can change the switching between moving images and still images appropriately. It is an object of the present invention to provide a moving image display apparatus capable of minimizing the recognition of image disturbance.
  • a moving image display device detects a piece of error information at the time of decoding by decoding a moving image data from a data generation unit that extracts encoded data from received data, and the encoded data extracted by the data generation unit
  • a decoding unit that detects visual characteristic information indicating the characteristics of the screen to be displayed; a storage unit that stores moving image data decoded by the decoding unit as still image data; and error information and visual characteristics detected by the decoding unit According to the information, there is provided a switching control unit that outputs moving image data decoded by the decoding unit or still image data stored in the storage unit as display data.
  • the present invention since it is configured as described above, when an error occurs due to deterioration of radio wave conditions or the like, switching between a moving image and a still image is appropriately changed according to the amount of movement of the screen and the error position. By doing so, it is possible to minimize the viewer's perception of image disturbance.
  • FIG. 1 is a block diagram showing an outline of a moving image display apparatus 1 according to Embodiment 1 of the present invention.
  • the moving image display device 1 includes a data generation unit 10, a decoding unit 13, a storage unit 14, and a switching control unit 15.
  • the data generation unit 10 extracts encoded data from the reception data received by the antenna, and includes a tuner / demodulation unit 11 and a TS (Transport Stream) decoding processing unit 12.
  • the tuner / demodulator 11 includes a tuner and a demodulator.
  • the tuner tunes and amplifies the broadcast wave desired by the user from the received data received by the antenna.
  • the demodulator demodulates the reception data tuned by the tuner and outputs digital data (TS).
  • the digital data output from the tuner / demodulator 11 is sent to the TS decode processor 12.
  • the TS decode processing unit 12 decodes the digital data output from the tuner / demodulation unit 11 and extracts encoded data (moving image).
  • the encoded data output by the TS decode processing unit 12 is sent to the decoding unit 13.
  • the decoding unit 13 decodes moving image data from the encoded data output from the TS decoding processing unit 12. Further, simultaneously with the decoding process of the encoded data, the decoding unit 13 detects whether or not there is an error in the decoded moving image data, and outputs it as error information at the time of decoding.
  • the error detected from the moving image data is a decoding error such as a syntax error.
  • the error information output by the decoding unit 13 includes information on whether or not there is an error and position information if there is an error.
  • the decoding unit 13 detects the amount of motion of the screen based on the decoded frame and the preceding and succeeding frames as visual characteristic information indicating the characteristics of the screen to be displayed. The decoding unit 13 holds the previous and subsequent frames.
  • the amount of motion of the screen is determined according to the correlation between the motion vector and the image with the previous and next frames, the relationship with the data amount with the previous and next frames, and the like.
  • the correlation as an image is a difference such as a hue and luminance constituting each frame. If the motion vector is large or the difference is large, the amount of motion is assumed to be large, and if the motion vector is small or the difference is small, the amount of motion is assumed to be small. Further, when the data amount of the frame increases, it is assumed that the amount of motion is large because the difference from the previous frame is large.
  • the data amount in the I frame increases because the reference to the preceding and following frames is not performed. Therefore, an increase in the data amount in the I frame is not considered.
  • the moving image data, error information, and screen motion amount output by the decoding unit 13 are sent to the switching control unit 15.
  • the decoding unit 13 sends the decoded moving image data to the storage unit 14 as still image data.
  • a threshold value to be compared with the number of errors included in the decoded moving image data a value of the number of errors is set in advance so that the viewer does not care even if it is included in the still image data.
  • the storage unit 14 stores the moving image data decoded by the decoding unit 13 as still image data.
  • the still image data is stored as the moving image data is output to the storage unit 14 as still image data. This is stored in the unit 14. Further, the storage unit 14 outputs still image data to the switching control unit 15 when the switching control unit 15 displays still image data.
  • the switching control unit 15 outputs the moving image data decoded by the decoding unit 13 or the still image data stored in the storage unit 14 as display data based on the error information output by the decoding unit 13 and the motion amount of the screen. To do.
  • the number of errors included in the moving image data is counted from the error information acquired from the decoding unit 13, the counted number of errors is equal to or greater than a predetermined threshold, and the amount of motion of the screen acquired from the decoding unit 13 is equal to or less than the predetermined threshold.
  • still image data stored in the storage unit 14 is output as display data, and switching to a still image is performed.
  • FIG. 2 is a flowchart showing switching control processing of the moving image display apparatus 1 according to Embodiment 1 of the present invention.
  • the switching control unit 15 acquires moving image data and error information (step ST200). That is, the switching control unit 15 acquires moving image data output from the decoding unit 13 and error information indicating whether or not there is an error in the moving image data.
  • step ST201 the switching control unit 15 counts the number of errors (step ST201). That is, in step ST200, the switching control unit 15 counts the number of errors existing in one frame of moving image data acquired from the decoding unit 13 based on the error information acquired from the decoding unit 13.
  • the switching control unit 15 determines whether the number of errors is equal to or greater than a threshold (step ST202). That is, in step ST201, the switching control unit 15 determines whether the number of errors existing in the counted moving image data is equal to or greater than a preset threshold value.
  • the threshold value set in advance is set to the value of the number of errors so that the viewer is not concerned.
  • step ST202 when the switching control unit 15 determines that the number of errors included in the moving image data is equal to or greater than the threshold value, the switching control unit 15 then acquires the amount of motion on the screen (step ST203). That is, the switching control unit 15 acquires the amount of screen motion detected by the decoding unit 13.
  • the switching control unit 15 determines whether the screen motion amount is equal to or less than the threshold (step ST204). That is, in step ST203, the switching control unit 15 determines whether the screen motion amount acquired from the decoding unit 13 is equal to or less than a preset threshold value.
  • step ST204 when the switching control unit 15 determines that the amount of motion on the screen is equal to or less than the threshold value, it acquires still image data (step ST205). That is, the switching control unit 15 acquires still image data to be output as display data from the storage unit 14.
  • step ST206 the switching control unit 15 performs switching to a still image. That is, in step ST205, the switching control unit 15 outputs the still image data acquired from the storage unit 14 as display data. Thereafter, the sequence ends.
  • step ST202 determines in step ST202 that the number of errors included in the moving image data is not greater than or equal to the threshold, or in step ST204.
  • the switching control unit 15 determines that the screen motion amount is not less than or equal to the threshold.
  • step ST207 it is determined whether a still image is displayed. That is, the switching control unit 15 determines whether or not a still image is displayed on the display screen.
  • step ST207 when the switching control unit 15 determines that a still image is displayed, it next switches to a moving image (step ST208). That is, the switching control unit 15 performs a switching process from the still image displayed on the display screen to the moving image. Thereafter, the sequence ends.
  • step ST207 when the switching control unit 15 determines in step ST207 that a still image is not displayed, the moving image is displayed as it is (step ST209). That is, the switching control unit 15 continues to display the moving image displayed on the display screen as it is. Thereafter, the sequence ends.
  • the switching control unit 15 determines from the error information received from the decoding unit 13 that the moving image data includes an error, from the decoding unit 13, Since the screen movement amount is received as visual characteristic information indicating the characteristics of the screen to be displayed, and it is configured to determine whether to switch to the still image according to the size, the detected screen movement at the time of error detection If the amount is larger than the set threshold, the viewer is paying attention to the movement, so even if some disturbance of the image occurs, the moving image is not changed without switching to the still image.
  • the viewer If the amount of movement of the screen is smaller than the threshold, the viewer is looking carefully at a certain video, so the screen is likely to be disturbed, so switch to a still image, Depending on the amount of motion of the surface, by appropriately changing the switching of moving images and still images, viewers can minimize to recognize the disturbance of the screen.
  • the threshold value to be compared with the number of errors existing in the moving image data is set in advance, but this threshold value is set according to the amount of motion of the screen.
  • this threshold value is set according to the amount of motion of the screen.
  • switching to a still image may be performed, and if the number of errors is equal to or less than the threshold, a moving image may be displayed.
  • the processing in step ST203 and step ST204 shown in FIG. 2 is not necessary.
  • FIG. FIG. 3 is a block diagram showing an outline of the moving image display apparatus 1 according to Embodiment 2 of the present invention.
  • the same or similar components as those in the first embodiment of the present invention shown in FIG.
  • the difference between the second embodiment of the present invention and the first embodiment of the present invention is that the amount of motion of the screen is not output from the decoding unit 13 to the switching control unit 15, but as visual characteristic information indicating the characteristics of the screen to be displayed.
  • the point of interest information on the screen is output from the decoding unit 13 to the switching control unit 15.
  • the difference from the first embodiment of the present invention will be mainly described.
  • the decoding unit 13 performs a process of decoding the encoded data of the decoding unit 13 according to Embodiment 1 of the present invention and outputting moving image data, and a process of detecting an error in the decoded moving image data and outputting error information.
  • a region of interest is extracted using a motion vector as visual characteristic information indicating the characteristics of the screen to be displayed.
  • the attention area is an area that the viewer pays attention to when viewing the screen, such as a moving part on the screen or the face of a talking person.
  • the decoding unit 13 obtains a motion vector of the moving image data based on the decoded frame and the held previous and subsequent frame information, and extracts a set including all unit blocks whose motion vector is a certain value or more as a region of interest.
  • the moving image data, error information, and attention area information output by the decoding unit 13 are sent to the switching control unit 15.
  • the decoding unit 13 sends the decoded moving image data to the storage unit 14 as still image data.
  • FIG. 4 is a diagram showing an example of a region of interest extracted by the moving image display apparatus 1 according to Embodiment 2 of the present invention.
  • the decoding unit 13 obtains a motion vector of moving image data from the decoded frame and the previous and subsequent frames that are held, and operates with a small movement portion such as a building as a non-attention area. A part that moves like a human being is extracted as a region of interest.
  • an area having a motion vector may be detected as the attention area.
  • the switching control unit 15 acquires the attention area information extracted by the decoding unit 13 and compares it with the error position of the moving image data to determine whether an error exists in the attention area of the moving image data. When the number of errors in the attention area of the moving image data is greater than or equal to the threshold, the still image data stored in the storage unit 14 is output as display data, and switching to the still image is performed.
  • FIG. 5 is a flowchart showing switching control processing of the moving image display apparatus 1 according to Embodiment 2 of the present invention.
  • the switching control unit 15 acquires moving image data and error information from the decoding unit 13 (step ST200).
  • the switching control unit 15 determines whether an error exists (step ST500). That is, in step ST200, the switching control unit 15 determines whether an error exists in the acquired moving image data based on the error information acquired from the decoding unit 13.
  • step ST500 if the switching control unit 15 determines that the acquired moving image data includes an error, it next acquires attention area information (step ST501). That is, the switching control unit 15 acquires the attention area information of the moving image data that the viewer pays attention extracted by the decoding unit 13.
  • the switching control unit 15 determines whether an error exists in the attention area (step ST502). That is, the switching control unit 15 determines whether an error existing in the moving image data acquired from the decoding unit 13 in step ST200 is located in the attention area acquired from the decoding unit 13 in step ST501.
  • step ST502 if the switching control unit 15 determines that there is an error in the attention area of the moving image data, then it counts the number of errors in the attention area (step ST503). That is, the switching control unit 15 counts the number of errors existing in the attention area in one frame of moving image data.
  • the switching control unit 15 determines whether the number of errors is equal to or greater than a threshold value (step ST504). That is, in step ST503, the switching control unit 15 determines whether the number of errors in the attention area of the moving image data counted is equal to or greater than a preset threshold value.
  • the threshold value set in advance is set to the value of the number of errors so that the viewer is not concerned.
  • step ST504 when the switching control unit 15 determines that the number of errors in the attention area of the moving image data is equal to or greater than the threshold value, it acquires still image data from the storage unit 14 (step ST205). Next, the switching control unit 15 performs switching to a still image (step ST206). Thereafter, the sequence ends.
  • the switching control unit 15 determines that there is no error in the moving image data in step ST500, or determines that there is no error in the attention area of the moving image data in step ST502, or If it is determined in step ST504 that the number of errors in the attention area of the moving image data is not greater than or equal to the threshold value, it is then determined whether a still image is displayed (step ST207).
  • step ST207 when the switching control unit 15 determines that a still image is displayed, it switches to a moving image (step ST208). Thereafter, the sequence ends.
  • the switching control unit 15 determines in step ST207 that no still image is displayed, the moving image is displayed as it is (step ST209). Thereafter, the sequence ends.
  • the switching control unit 15 acquires the attention area information of the screen from the decoding unit 13 as the visual characteristic information indicating the characteristics of the screen to be displayed. Since it is configured to switch between a moving image and a still image according to an error existing in the image, if there is a moving part, the human visual characteristic of paying attention to the region is used, for example, a talk program If so, the face of the person who is talking is set as the attention area, and if an error occurs in this attention area, the viewer is observing the attention area, and the screen is likely to be disturbed.
  • FIG. FIG. 6 is a block diagram showing an outline of the moving image display apparatus 1 according to Embodiment 3 of the present invention.
  • the same or similar components as those in the first embodiment shown in FIG. The difference between the third embodiment of the present invention and the first embodiment of the present invention is that the amount of screen motion is not output from the decoding unit 13 to the switching control unit 15 but displayed on an OSD (On Screen Display).
  • An OSD screen control unit 17 that generates position information of an image and a position information holding unit 18 that holds the position information of the OSD image are added. From the position information holding unit 18 as visual characteristic information indicating the characteristics of the screen to be displayed. The point is that the position information of the OSD image is output to the switching control unit 15.
  • the difference from the first embodiment of the present invention will be mainly described.
  • the OSD screen controller 17 controls the display of the OSD image such as a clock, subtitles, and channel information displayed on the OSD.
  • the OSD image such as a clock, subtitles, and channel information displayed on the OSD.
  • data generated from the received data is received from the TS decoding processing unit 12, and data stored in the moving image display device 1 in advance is received from the moving image display device 1. From these data, position information of an OSD image to be displayed on the OSD is generated.
  • the position information of the OSD image generated by the OSD screen control unit 17 is sent to the position information holding unit 18.
  • the position information holding unit 18 holds the position information of the OSD image generated by the OSD screen control unit 17.
  • the position information of the OSD image displayed on the OSD stored by the position information holding unit 18 is sent to the switching control unit 15 as necessary.
  • the switching control unit 15 acquires the position information of the OSD image to be displayed on the OSD such as subtitles, clock, channel display, program title, etc. as visual characteristic information indicating the characteristics of the screen to be displayed, and the error information included in the error information.
  • the number of errors existing at positions other than the display position of the OSD image is counted from the position information and the position information of the OSD image, and the still image data stored in the storage unit 14 when the counted number of errors is equal to or greater than a predetermined threshold. Is displayed as display data, and switching to a still image is performed. As shown in FIG. 7, the OSD image is displayed on a graphic plane different from the moving image plane on which moving image data is displayed, and the OSD image is displayed superimposed on the moving image data.
  • FIG. 8 is a flowchart showing switching control processing of the moving image display apparatus 1 according to Embodiment 3 of the present invention.
  • the switching control unit 15 acquires moving image data and error information from the decoding unit 13 (step ST200), and determines whether an error exists (step ST500). .
  • step ST500 when the switching control unit 15 determines that there is an error in the moving image data acquired from the decoding unit 13, it then acquires the position information of the OSD image (step ST800). That is, the switching control unit 15 acquires the position information of the OSD image to be displayed on the OSD from the position information holding unit 18.
  • the switching control unit 15 determines whether there is an error other than the display position of the OSD image (step ST801). That is, in step ST200, the switching control unit 15 has an error existing in the moving image data acquired from the decoding unit 13 at a position other than the display position of the OSD image acquired from the position information holding unit 18 in step ST800. Determine whether.
  • step ST801 when the switching control unit 15 determines that there is an error at a position other than the display position of the OSD image, it next counts the number of errors that exist outside the display position of the OSD image (step ST802). In other words, the switching control unit 15 counts the number of errors for an error in one frame that exists at a position other than the display position of the OSD image.
  • the switching control unit 15 determines whether the number of errors is equal to or greater than a threshold value (step ST803). That is, in step ST802, the switching control unit 15 determines whether the number of errors existing at a position other than the counted display position of the OSD image is equal to or greater than a preset threshold value.
  • the threshold value set in advance is set to the value of the number of errors so that the viewer is not concerned.
  • step ST803 when the switching control unit 15 determines that the number of errors existing at a position other than the display position of the OSD image displayed on the OSD is equal to or greater than the threshold value, the switch control unit 15 then acquires still image data from the storage unit 14 ( Next, switching to a still image is performed (step ST206). Thereafter, the sequence ends.
  • step ST500 determines that there is no error in the moving image data
  • step ST801 determines that there is no error in a position other than the display position of the OSD image, or If it is determined in step ST803 that the number of errors existing at a position other than the display position of the OSD image is not greater than or equal to the threshold value, it is then determined whether a still image is displayed (step ST207).
  • step ST207 when the switching control unit 15 determines that a still image is displayed, it next switches to a moving image (step ST208). Thereafter, the sequence ends.
  • step ST209 determines in step ST209 that no still image is displayed.
  • the switching control unit 15 uses the positional information of the OSD image displayed on the OSD from the positional information holding unit 18 as the visual characteristic information indicating the characteristics of the screen to be displayed. Since the moving image and the still image are switched according to an error that exists outside the display range of the OSD image, the error is detected under the display position of the OSD image on the OSD. The error portion is hidden by the OSD image and the viewer does not notice the error, and in the case of the translucent OSD image, the viewer pays attention to the OSD image, so the error is difficult to notice.
  • the moving image is displayed as it is, and the viewer can change the image by appropriately changing the switching between the moving image and the still image according to the error outside the display range of the OSD image. It can be minimized to recognize the disorder.
  • FIG. 9 is a block diagram showing an outline of the moving image display apparatus 1 according to Embodiment 4 of the present invention.
  • the same or similar components as those in the first embodiment of the present invention shown in FIG.
  • the difference between the fourth embodiment of the present invention and the first embodiment of the present invention is that the amount of motion of the screen is not output from the decoding unit 13 to the switching control unit 15, but as visual characteristic information indicating the characteristics of the screen to be displayed.
  • the flat area information of the screen is output from the decoding unit 13 to the switching control unit 15.
  • the difference from the first embodiment of the present invention will be mainly described.
  • the decoding unit 13 performs a process of decoding the encoded data of the decoding unit 13 according to Embodiment 1 of the present invention and outputting moving image data, and a process of detecting errors in the decoded moving image data and outputting error information.
  • a flat area is extracted as visual characteristic information indicating the characteristics of the screen to be displayed.
  • the flat region is a region where there is no significant change in color or brightness, such as the sky or the sea.
  • the decoding unit 13 obtains a spatial frequency for each fixed region, and extracts a set including all regions where the obtained spatial frequency is equal to or less than a predetermined threshold as a flat region.
  • the moving image data, error information, and flat area information output by the decoding unit 13 are sent to the switching control unit 15.
  • the decoding unit 13 sends the decoded moving image data to the storage unit 14 as still image data.
  • the switching control unit 15 acquires the flat area information extracted by the decoding unit 13 and compares it with the error position of the moving image data to determine whether an error exists in the flat area of the moving image data. If there is an error in the flat area of the moving image data, the difference between the error and the surrounding luminance is calculated from the moving image data decoded by the decoding unit 13 as the luminance of the error position and the surrounding luminance adjacent to the error. A difference from the average value is obtained, and the number of errors for which the difference in luminance is equal to or greater than a predetermined threshold is counted. When the counted number of errors is equal to or greater than a predetermined threshold, the still image data stored in the storage unit 14 is output as display data, and switching to a still image is performed.
  • the switching control unit 15 calculates the difference between the error and the surrounding hue as the average value of the hue at the position of the error and the surrounding hue that touches the error.
  • the number of errors for which the calculated hue difference is equal to or greater than a predetermined threshold value may be counted, and switching to a still image may be determined according to the counted number of errors.
  • the error in the flat area to be counted may be determined by combining the difference in luminance and the difference in hue.
  • FIG. 10 is a flowchart showing switching control processing of the moving image display apparatus 1 according to Embodiment 4 of the present invention.
  • the same or similar components as those in the flowcharts in the first and second embodiments shown in FIGS.
  • the switching control unit 15 acquires moving image data and error information from the decoding unit 13 (step ST200), and determines whether an error exists (step ST500). .
  • step ST500 when the switching control unit 15 determines that there is an error in the moving image data acquired from the decoding unit 13, it next acquires flat area information (step ST1000). That is, the switching control unit 15 acquires flat region information indicating a region with little change in color and brightness extracted by the decoding unit 13.
  • the switching control unit 15 determines whether an error exists in the flat region (step ST1001). That is, the switching control unit 15 determines whether an error existing in the moving image data acquired from the decoding unit 13 in step ST200 is located in the flat area acquired from the decoding unit 13 in step ST1000.
  • step ST1001 when the switching control unit 15 determines that an error exists in the flat area of the moving image data, it next obtains the difference between the luminance of the error and the luminance around the error (step ST1002). That is, the switching control unit 15 obtains an average value of the luminance at the error position and the luminance around the error based on the moving image data acquired from the decoding unit 13, and obtains the difference in luminance.
  • the switching control unit 15 counts the number of errors whose luminance difference from the surroundings is equal to or greater than a threshold (step ST1003). That is, the switching control unit 15 counts the number of errors that exist in a flat region within one frame of moving image data and that have a luminance difference equal to or greater than a threshold value.
  • the switching control unit 15 determines whether the number of errors is equal to or greater than a threshold (step ST1004). That is, in step ST1003, the switching control unit 15 determines whether the number of errors whose luminance difference with the surroundings existing in the flat area of the counted moving image data is equal to or greater than a threshold is equal to or greater than a preset threshold. To do.
  • the threshold value set in advance is set to the value of the number of errors so that the viewer is not concerned.
  • step ST1004 when the switching control unit 15 determines that the number of errors whose luminance difference with the surroundings existing in the flat region of the moving image data is equal to or greater than the threshold value is equal to or greater than the threshold value, then, from the storage unit 14, the still image Data is acquired (step ST205), and then switching to a still image is performed (step ST206). Thereafter, the sequence ends.
  • the switching control unit 15 determines that there is no error in the moving image data in step ST500, or determines that there is no error in the flat area of the moving image data in step ST1001, or In Step ST1004, when it is determined that the number of errors whose luminance difference with the surrounding area existing in the flat area of the moving image data is equal to or greater than the threshold is not equal to or greater than the threshold, it is determined whether a still image is displayed. (Step ST207). In step ST207, when the switching control unit 15 determines that a still image is displayed, the switching control unit 15 performs switching to a moving image (step ST208). Thereafter, the sequence ends. On the other hand, when the switching control unit 15 determines in step ST207 that no still image is displayed, the moving image is displayed as it is (step ST209). Thereafter, the sequence ends.
  • step ST1002 and step ST1003 the same switching control processing can be performed by performing processing using a difference in hue instead of a difference in luminance or a combination of a difference in luminance and a difference in hue.
  • the switching control unit 15 acquires the flat area information of the screen from the decoding unit 13 as the visual characteristic information indicating the characteristics of the screen to be displayed.
  • a flat screen with little change in color and brightness.
  • the human visual characteristics that it is easy to recognize screen disturbance
  • a still image Since it is easy to perceive as a screen disturbance, a still image is displayed.Errors in uneven areas and errors with small differences in brightness and color even in flat areas are difficult to feel the difference with the surroundings.
  • the moving image is displayed as it is, and the switching between the moving image and the still image is appropriately performed according to the error that exists in the flat area of the screen and the difference in brightness and hue from the surroundings is more than the threshold value. By changing, it is possible to minimize the viewer's perception of screen disturbance.
  • FIG. FIG. 11 is a block diagram showing an outline of the moving image display apparatus 1 according to the fifth embodiment of the present invention.
  • the difference between the fifth embodiment of the present invention and the first embodiment of the present invention is that importance level information extraction for extracting the importance level of the screen without outputting the screen motion amount from the decoding unit 13 to the switching control unit 15
  • the point 19 is added, and the importance level of the screen is output from the importance level information extraction unit 19 to the switching control unit 15 as information indicating the characteristics of the screen to be displayed.
  • the difference from the first embodiment of the present invention will be mainly described.
  • the decoding unit 13 in Embodiment 1 of the present invention In addition to the process of decoding the encoded data of the decoder 13 and outputting moving image data and the process of detecting errors in the decoded moving image data and outputting error information, the decoding unit 13 in Embodiment 1 of the present invention Then, the encoded data is decoded and sound data is output. The moving image data and error information output by the decoding unit 13 are sent to the switching control unit 15, and the sound data are sent to the importance level information extracting unit 19.
  • the importance level information extraction unit 19 determines whether the moving image data decoded by the decoding unit 13 from the metadata output by the TS decoding processing unit 12 or the sound data output by the decoding unit 13 is an important scene. And the importance of the screen is extracted.
  • an example of an important scene is a sports scoring scene. In such a case, attention is paid to the motion of the video, and it is considered that the user wants to continue to watch the motion of the video even if there is a disturbance rather than to see a still image with little disturbance.
  • the importance level extracted by the importance level information extraction unit 19 is sent to the switching control unit 15 as necessary.
  • the importance level information extraction unit 19 when the sound data decoded by the decoding unit 13 is used to determine the importance level of the screen, for example, in the scoring scene that is an important scene of sports, the cheering of the audience occurs. There are features. Therefore, when this sound data is analyzed and a feature such as a cheer is detected, it is determined that the screen is important, and the importance of the screen is increased. In addition, dramas and movies have the feature that music increases in important scenes. From this feature, the scene where music flows is judged to be important, and the importance of the screen is increased. Also, when the importance level information extraction unit 19 acquires the metadata output by the TS decode processing unit 12, if the metadata indicates the level of importance of the moving image data, it is displayed on the screen. It can also be used as importance. Furthermore, if multiple pieces of sound data and metadata can be acquired, the importance of the screen may be set by combining them.
  • the switching control unit 15 acquires the importance level of the screen extracted by the importance level information extraction unit 19 and counts the number of errors included in the moving image data based on the error information output by the decoding unit 13. When the number of errors is equal to or greater than a predetermined threshold and the importance of the screen is equal to or less than the predetermined threshold, the still image data stored in the storage unit 14 is output as display data and switched to a still image.
  • FIG. 12 is a flowchart showing switching control processing of the moving image display apparatus 1 according to the fifth embodiment of the present invention.
  • the switching control unit 15 acquires moving image data and error information from the decoding unit 13 (step ST200), and counts the number of errors (step ST201). Next, the switching control unit 15 determines whether the number of errors is greater than or equal to a threshold value (step ST202).
  • step ST202 if the switching control unit 15 determines that the number of errors included in the moving image data is equal to or greater than the threshold value, then it acquires the importance of the screen (step ST1200). That is, the switching control unit 15 acquires the importance level of the screen extracted by the importance level information extraction unit 19.
  • the switching control unit 15 determines whether the importance of the screen is equal to or less than a threshold (step ST1201). That is, in step ST1200, the switching control unit 15 determines whether the importance level of the screen acquired from the importance level information extraction unit 19 is equal to or less than a preset threshold value.
  • step ST1201 when the switching control unit 15 determines that the importance level of the screen is equal to or less than the threshold value, it next acquires still image data from the storage unit 14 (step ST205), and then performs switching to a still image (step ST205). Step ST206). Thereafter, the sequence ends.
  • step ST207 when the switching control unit 15 determines that a still image is displayed, the switching control unit 15 performs switching to a moving image (step ST208). Thereafter, the sequence ends.
  • step ST208 when the switching control unit 15 determines in step ST207 that no still image is displayed, the moving image is displayed as it is (step ST209). Thereafter, the sequence ends.
  • the importance level information extraction unit 19 is configured to receive the importance of the screen as information indicating the characteristics of the screen to be displayed, and to determine whether or not to switch to a still image according to the importance. If the importance of the screen is greater than the set threshold, we are paying attention to the movement of the video and we want to keep watching the movement, so we do not mind even if there is some disturbance in the video, so we do not switch to a still image If the importance of the screen is less than or equal to the threshold value, the video is not focused on and the screen is likely to be disturbed. Heavy Depending on the time, by appropriately changing the switching of moving images and still images, viewers can minimize to recognize image disturbance.
  • the threshold value to be compared with the number of errors existing in the moving image data is set in advance, but this threshold value is set according to the importance of the screen. It may be configured to switch to a still image when there is an error above the set threshold and to display a moving image if the number of errors is below the threshold. At this time, the threshold is set to be larger as the importance of the screen is higher, and the threshold is set to be smaller as the importance of the screen is lower. Further, when the threshold is set according to the importance level of the screen, the processes of step ST1200 and step ST1201 shown in FIG. 12 are not necessary.
  • the moving image display device minimizes the viewer's perception of the image disturbance by appropriately changing the switching between the moving image and the still image according to the amount of movement of the screen and the error position. It can be suppressed, and is suitable for use in a moving image display device or the like that switches from a moving image to a still image when an error occurs due to deterioration of radio wave conditions or the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Television Systems (AREA)

Abstract

　受信データから符号化データを抽出するデータ生成部１０と、データ生成部１０により抽出された符号化データから動画像データを復号し、復号時のエラー情報を検出すると共に、表示する画面の特徴を示す視覚特性情報を検出する復号部１３と、復号部１３により復号された動画像データを静止画像データとして記憶する記憶部１４と、復号部１３により検出されたエラー情報及び視覚特性情報に応じて、復号部１３により復号された動画像データ又は記憶部１４に記憶された静止画像データを表示データとして出力する切替え制御部１５とを有する。

Description

動画像表示装置
　この発明は、電波状況の悪化などによりエラーが発生した場合に、画面の切替えを行う動画像表示装置に関するものである。
　デジタル放送の受信において、電波状況の悪化などによりエラーが発生した場合に、動画像から静止画像への切替えを行う技術が知られている。例えば、特許文献１では、受信した符号化データを適切なタイミングで復号化できなかった場合に、動画像から静止画像への切替えを行う技術が開示されている。この技術では、タイマーを設け、タイマーに対して適切なタイミングで制御が行われない場合に、セレクタが自動的に静止画像の出力を選択して、高品位の静止画像を出力するようにしている。
　また、特許文献２では、デジタルデータからエラーを検出し、映像データに対応する番組のジャンル、映像サイズ、デジタルデータの種類に応じて決定した閾値と比較し、エラーを有する単位ブロック数が閾値の値以上に存在する場合に、静止画像への切替えを行う技術が開示されている。
特開２００２－１５２７４３号公報 特開２００６－１８６７８７号公報
　従来の動画像表示装置では、上記のように、復号化にかかる時間やエラー数と閾値との比較によって一意的に画面の表示の切替えを行っている。
　しかし、この方法では人間の視覚特性を考慮しておらず、動きの大きい場面も小さい場面も同等に扱い画面の表示の切替えを行うため、動きが大きい場面であれば、多少画像が乱れていても、動いていることに注目するため気にならないが、風景などのように動きが小さい場面では同じ画像の乱れでも、映像に大きな変化がないため、視聴者が画像の乱れを認識してしまうという課題があった。
　また、人が注目しないような画面の隅に画像の乱れが発生した場合も、画面中央に画像の乱れが発生した場合も同等に扱い画面の表示の切り替えを行うため、画像の乱れに気づいていない視聴者に画像の乱れを認識させてしまうという課題があった。
　この発明は、上記のような課題を解決するためになされたもので、電波状況の悪化により、エラーが発生した場合に、動画像と静止画像の切替えを適切に変更することで、視聴者が画像の乱れを認知することを最小限に抑えることができる動画像表示装置を提供することを目的とする。
　この発明に係る動画像表示装置は、受信データから符号化データを抽出するデータ生成部と、データ生成部により抽出された符号化データから動画像データを復号し、復号時のエラー情報を検出すると共に、表示する画面の特徴を示す視覚特性情報を検出する復号部と、復号部により復号された動画像データを静止画像データとして記憶する記憶部と、復号部により検出されたエラー情報及び視覚特性情報に応じて、復号部により復号された動画像データ又は記憶部に記憶された静止画像データを表示データとして出力する切替え制御部とを有するものである。
　この発明によれば、上記のように構成したので、電波状況の悪化などにより、エラーが発生した場合に、画面の動き量やエラー位置に応じて、動画像と静止画像の切替えを適切に変更することで、視聴者が画像の乱れを認知することを最小限に抑えることができる。
この発明の実施の形態１に係る動画像表示装置の概要を示すブロック図である。 この発明の実施の形態１に係る動画像表示装置の切替え制御処理を示すフローチャートである。 この発明の実施の形態２に係る動画像表示装置の概要を示すブロック図である。 この発明の実施の形態２に係る動画像表示装置の注目領域の一例を示す図である。 この発明の実施の形態２に係る動画像表示装置の切替え制御処理を示すフローチャートである。 この発明の実施の形態３に係る動画像表示装置の概要を示すブロック図である。 この発明の実施の形態３に係る動画像表示装置のＯＳＤ画像を説明するための図である。 この発明の実施の形態３に係る動画像表示装置の切替え制御処理を示すフローチャートである。 この発明の実施の形態４に係る動画像表示装置の概要を示すブロック図である。 この発明の実施の形態４に係る動画像表示装置の切替え制御処理を示すフローチャートである。 この発明の実施の形態５に係る動画像表示装置の概要を示すブロック図である。 この発明の実施の形態５に係る動画像表示装置の切替え制御処理を示すフローチャートである。
　以下、この発明の実施の形態について図面を参照しながら詳細に説明する。
実施の形態１．
　図１は、この発明の実施の形態１に係る動画像表示装置１の概要を示すブロック図である。図１に示すように、動画像表示装置１は、データ生成部１０、復号部１３、記憶部１４及び切替え制御部１５から構成されている。
　データ生成部１０は、アンテナにより受信された受信データから符号化データを抽出するものであり、チュ－ナ／復調部１１及びＴＳ（Transport Stream）デコード処理部１２により構成される。
　チュ－ナ／復調部１１は、チュ－ナと復調部により構成される。チュ－ナはアンテナにより受信した受信データからユ－ザの希望する放送波をチュ－ニングして増幅するものである。復調部は、チュ－ナによりチュ－ニングされた受信データを復調してデジタルデータ（ＴＳ）を出力するものである。
　このチュ－ナ／復調部１１により出力されるデジタルデータはＴＳデコード処理部１２に送られる。
　ＴＳデコード処理部１２は、チュ－ナ／復調部１１により出力されたデジタルデータをデコ－ド（解読）し、符号化データ（動画像）を取り出すものである。
　このＴＳデコード処理部１２により出力される符号化データは復号部１３に送られる。
　復号部１３は、ＴＳデコード処理部１２により出力された符号化データから動画像データを復号するものである。
　また、復号部１３は、符号化データの復号化処理と同時に、復号した動画像データにエラーが存在するかどうかの検出を行い、復号時のエラー情報として出力する。この動画像データから検出されるエラーは、シンタックスエラーなどのデコードエラーである。復号部１３により出力されるエラー情報には、エラーがあるか否かの情報及びエラーがある場合にはその位置情報が含まれる。
　また、復号部１３は、表示する画面の特徴を示す視覚特性情報として、復号したフレームとその前後フレームに基づいて画面の動き量を検出する。前後フレームは、復号部１３が保持している。画面の動き量は、動きベクトルや前後フレームとの画像としての相関関係、前後フレームとのデータ量の関係等に応じて決定する。ここでの画像としての相関関係とは、各フレームを構成する色合いや輝度などの差分である。動きベクトルが大きい場合や差分が大きい場合には、動き量が大きいとし、動きベクトルが小さい場合や差分が小さい場合には、動き量が小さいとする。また、フレームのデータ量が増加する場合は、前フレームとの差分が大きいため動き量が大きいとする。しかし、例えばＭＰＥＧ２の様な前後フレームを参照しないＩフレームの場合、前後フレームの参照を行わないため、Ｉフレームにおけるデータ量は多くなる。そのため、Ｉフレームにおけるデータ量の増加は考慮しない。
　この復号部１３により出力される動画像データ、エラー情報及び画面の動き量は、切替え制御部１５に送られる。
　さらに、復号部１３は、復号した動画像データの１フレーム内に含まれるエラー数が所定の閾値以下である場合、この復号した動画像データを静止画像データとして記憶部１４に送る。ここで、復号した動画像データに含まれるエラー数と比較する閾値には、静止画像データに含まれていても視聴者が気にならないようなエラー数の値が予め設定される。
　記憶部１４は、復号部１３により復号された動画像データを静止画像データとして記憶するものである。この静止画像データは、復号部１３により復号された動画像データに含まれるエラー数が所定の閾値以下であるとき、この動画像データが静止画像データとして記憶部１４へ出力されることにより、記憶部１４に記憶されるものである。また、記憶部１４は、切替え制御部１５が静止画像データを表示する場合に、切替え制御部１５へ静止画像データを出力する。
　切替え制御部１５は、復号部１３により出力されたエラー情報及び画面の動き量に基づいて、復号部１３により復号された動画像データ又は記憶部１４に記憶された静止画像データを表示データとして出力するものである。復号部１３から取得したエラー情報から動画像データに含まれるエラー数をカウントし、カウントしたエラー数が所定の閾値以上であり、かつ復号部１３から取得した画面の動き量が所定の閾値以下である場合、記憶部１４に記憶された静止画像データを表示データとして出力し、静止画像への切替えを行う。
　次に、上記のように構成された、この発明の実施の形態１に係る動画像表示装置１の切替え制御部１５による動画像と静止画像の切替え制御処理について説明する。
　図２は、この発明の実施の形態１に係る動画像表示装置１の切替え制御処理を示すフローチャートである。
　切替え制御処理では、まず、切替え制御部１５は動画像データとエラー情報を取得する（ステップＳＴ２００）。すなわち、切替え制御部１５は、復号部１３により出力される動画像データと、その動画像データにエラーが存在するか否かのエラー情報を取得する。
　次いで、切替え制御部１５はエラー数をカウントする（ステップＳＴ２０１）。すなわち、切替え制御部１５は、ステップＳＴ２００において、復号部１３から取得したエラー情報に基づいて、復号部１３から取得した動画像データの１フレーム内に存在するエラー数をカウントする。
　次いで、切替え制御部１５はエラー数が閾値以上であるかを判断する（ステップＳＴ２０２）。すなわち、切替え制御部１５は、ステップＳＴ２０１において、カウントした動画像データに存在するエラー数が予め設定された閾値以上であるかを判断する。ここで、予め設定される閾値は、視聴者が気にならないようなエラー数の値を設定する。
　このステップＳＴ２０２において、切替え制御部１５は動画像データに含まれるエラー数が閾値以上であると判断すると、次いで、画面の動き量を取得する（ステップＳＴ２０３）。すなわち、切替え制御部１５は、復号部１３により検出される画面の動き量を取得する。
　次いで、切替え制御部１５は画面の動き量が閾値以下であるかを判断する（ステップＳＴ２０４）。すなわち、切替え制御部１５は、ステップＳＴ２０３において、復号部１３から取得した画面の動き量が予め設定された閾値以下であるかを判断する。
　このステップＳＴ２０４において、切替え制御部１５は画面の動き量が閾値以下であると判断すると、次いで、静止画像データを取得する（ステップＳＴ２０５）。すなわち、切替え制御部１５は、表示データとして出力するための静止画像データを記憶部１４から取得する。
　次いで、切替え制御部１５は静止画像への切替えを行う（ステップＳＴ２０６）。すなわち、切替え制御部１５では、ステップＳＴ２０５において、記憶部１４から取得した静止画像データを表示データとして出力する。その後、シーケンスは終了する。
　一方、切替え制御部１５は、ステップＳＴ２０２において、動画像データに含まれるエラー数が閾値以上ではないと判断した場合、または、ステップＳＴ２０４において、画面の動き量が閾値以下ではないと判断した場合には、次いで、静止画像が表示されているかを判断する（ステップＳＴ２０７）。すなわち、切替え制御部１５は、表示画面に静止画像が表示されている状態であるか否かを判断する。
　このステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていると判断すると、次いで、動画像への切替えを行う（ステップＳＴ２０８）。すなわち、切替え制御部１５は表示画面に表示されている静止画像から動画像への切替え処理を行う。その後、シーケンスは終了する。
　一方、ステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていないと判断すると、そのまま動画像を表示する（ステップＳＴ２０９）。すなわち、切替え制御部１５は、表示画面に表示されている動画像をそのまま表示し続ける。その後、シーケンスは終了する。
　以上のように、この発明の実施の形態１によれば、切替え制御部１５は、復号部１３から受け取ったエラー情報から、動画像データにエラーが含まれると判断した場合、復号部１３から、表示する画面の特徴を示す視覚特性情報として画面の動き量を受け取り、その大きさによって静止画像への切替えを行うか否かを決定するように構成したので、エラー検出時に、検出した画面の動き量が設定した閾値よりも大きい場合には、視聴者は動きに注目しているため、多少画像の乱れが発生していても気にならないので、静止画像への切替えを行わずに動画像を表示するようにし、画面の動き量が閾値よりも小さい場合は、視聴者はある特定の映像をじっくりと見ているため、画面の乱れが気になりやすいので、静止画像へ切替えるようにし、画面の動き量に応じて、動画像と静止画像の切替えを適切に変更することで、視聴者が画面の乱れを認識するのを最小限に抑えることができる。
　また、この発明の実施の形態１では、動画像データに存在するエラー数と比較される閾値は予め設定されるものとしたが、この閾値を画面の動き量の大きさに応じて設定するようにし、設定された閾値以上にエラーが存在する場合には静止画像への切替えを行い、閾値以下のエラー数であれば動画像を表示するように構成してもよい。このとき、画面の動き量が大きいほど、閾値を大きく設定し、画面の動き量が小さいほど、閾値を小さく設定する。また、画面の動き量の大きさに応じて閾値を設定する場合、図２に示したステップＳＴ２０３及びステップＳＴ２０４の処理は不要となる。
実施の形態２．
　図３は、この発明の実施の形態２に係る動画像表示装置１の概要を示すブロック図である。同図において、図１に示した、この発明の実施の形態１と同一または同様の構成要素には同一符号を付し、その説明を省略する。
　この発明の実施の形態２とこの発明の実施の形態１との相違点は、復号部１３から切替え制御部１５に画面の動き量は出力せず、表示する画面の特徴を示す視覚特性情報として、復号部１３から切替え制御部１５に画面の注目領域情報を出力する点である。以下、この発明の実施の形態１との相違点を中心に説明する。
　復号部１３は、この発明の実施の形態１における復号部１３の符号化データを復号して動画像データを出力する処理及び復号した動画像データ内のエラーを検出しエラー情報を出力する処理に加えて、表示する画面の特徴を示す視覚特性情報として、動きベクトルを用いて注目領域の抽出を行う。ここで、注目領域とは、画面上の動いている部分やしゃべっている人の顔など、視聴者が画面を見る際に注目する領域のことである。復号部１３は、復号したフレーム及び保持している前後フレーム情報に基づいて、動画像データの動きベクトルを求め、その動きベクトルが一定値以上の単位ブロックをすべて含むような集合を注目領域として抽出する。
　この復号部１３により出力される動画像データ、エラー情報及び注目領域情報は切替え制御部１５に送られる。
　また、復号部１３は、復号した動画像データに含まれるエラー数が所定の閾値以下である場合に、この復号した動画像データを静止画像データとして記憶部１４に送る。
　図４は、この発明の実施の形態２に係る動画像表示装置１により抽出される注目領域の一例を示す図である。図４に示すように、復号部１３は、復号したフレーム及び保持している前後フレームから動画像データの動きベクトルを求め、建物のように動きの小さい部分は非注目領域とし、動作している人間のように動きのある部分を注目領域として抽出するように構成される。
　また、同一チャネル内での異なる種類の符号化されたデータ（Ｈ．２６４等）から動画像データを構成するオブジェクトの形状情報やテクスチャ情報を取得可能であれば、取得した情報から、同一オブジェクト内に動きベクトルを持つ領域を注目領域として検出するようにしてもよい。
　切替え制御部１５は、復号部１３により抽出された注目領域情報を取得し、動画像データのエラー位置と比較することで、動画像データの注目領域内にエラーが存在するかどうかを判断する。動画像データの注目領域内のエラー数が閾値以上である場合、記憶部１４に記憶された静止画像データを表示データとして出力し、静止画像への切替えを行う。
　次に上記のように構成された、この発明の実施の形態２に係る動画像表示装置１の切替え制御部１５による動画像と静止画像の切替え制御処理について説明する。
　図５は、この発明の実施の形態２に係る動画像表示装置１の切替え制御処理を示すフローチャートである。同図において、図２に示した、実施の形態１におけるフローチャートと同一または同様の構成については同一符号を付し、その説明を省略する。
　この発明の実施の形態２における切替え制御処理では、まず、切替え制御部１５は復号部１３から動画像データとエラー情報を取得する（ステップＳＴ２００）。次いで、切替え制御部１５はエラーが存在するかを判断する（ステップＳＴ５００）。すなわち、切替え制御部１５は、ステップＳＴ２００において、復号部１３から取得したエラー情報に基づいて、取得した動画像データにエラーが存在するか否かの判断を行う。
　このステップＳＴ５００において、切替え制御部１５は取得した動画像データにエラーが含まれていると判断すると、次いで、注目領域情報を取得する（ステップＳＴ５０１）。すなわち、切替え制御部１５は、復号部１３により抽出された、視聴者が注目する動画像データの注目領域情報を取得する。
　次いで、切替え制御部１５は注目領域内にエラーが存在するかを判断する（ステップＳＴ５０２）。すなわち、切替え制御部１５は、ステップＳＴ５０１において、復号部１３から取得した注目領域内に、ステップＳＴ２００において、復号部１３から取得した動画像データに存在するエラーが位置するか否かを判断する。
　このステップＳＴ５０２において、切替え制御部１５は動画像データの注目領域内にエラーが存在すると判断すると、次いで、注目領域内のエラー数をカウントする（ステップＳＴ５０３）。すなわち、切替え制御部１５は、動画像データの１フレーム内の注目領域内に存在するエラーの数をカウントする。
　次いで、切替え制御部１５はエラー数が閾値以上であるかを判断する（ステップＳＴ５０４）。すなわち、切替え制御部１５は、ステップＳＴ５０３において、カウントした動画像データの注目領域内のエラー数が、予め設定された閾値以上であるかを判断する。ここで、予め設定される閾値は、視聴者が気にならないようなエラー数の値を設定する。
　このステップＳＴ５０４において、切替え制御部１５は動画像データの注目領域内のエラー数が閾値以上であると判断すると、次いで、記憶部１４から静止画像データを取得する（ステップＳＴ２０５）。次いで、切替え制御部１５は静止画像への切替えを行う（ステップＳＴ２０６）。その後、シーケンスは終了する。
　一方、切替え制御部１５は、ステップＳＴ５００において、動画像データにエラーが存在しないと判断した場合、または、ステップＳＴ５０２において、動画像データの注目領域内にエラーが存在しないと判断した場合、または、ステップＳＴ５０４において、動画像データの注目領域内のエラー数が閾値以上ではないと判断した場合には、次いで、静止画像が表示されているかを判断する（ステップＳＴ２０７）。
　このステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていると判断すると、動画像への切替えを行う（ステップＳＴ２０８）。その後、シーケンスは終了する。一方、ステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていないと判断すると、そのまま動画像を表示する（ステップＳＴ２０９）。その後、シーケンスは終了する。
　以上のように、この発明の実施の形態２によれば、切替え制御部１５は、表示する画面の特徴を示す視覚特性情報として、復号部１３から画面の注目領域情報を取得し、この注目領域内に存在するエラーに応じて、動画像と静止画像の切替えを行うように構成したので、動いている部分があれば、その領域に注目するという人間の視覚特性を利用し、例えば、トーク番組であれば、話をしている人の顔を注目領域とし、この注目領域内にエラーが発生した場合には、視聴者は注目領域を注視しているため、画面の乱れが気になりやすいので、静止画像を表示するようにし、背景などの注目領域以外であれば、視聴者は多少画像の乱れが発生していても気にならないので、そのまま動画像を表示するようにし、画面の注目領域内外でのエラーに応じて、動画像と静止画像の切替えを適切に変更することで、視聴者が画像の乱れを認知することを最小限に抑えることができる。
実施の形態３．
　図６は、この発明の実施の形態３に係る動画像表示装置１の概要を示すブロック図である。同図において、図１に示した、実施の形態１と同一または同様な構成要素には同一符号を付し、その説明を省略する。
　この発明の実施の形態３とこの発明の実施の形態１との相違点は、復号部１３から切替え制御部１５に画面の動き量は出力せず、ＯＳＤ（On Screen Display）上に表示するＯＳＤ画像の位置情報を生成するＯＳＤ画面制御部１７と、そのＯＳＤ画像の位置情報を保持する位置情報保持部１８を付加し、表示する画面の特徴を示す視覚特性情報として、位置情報保持部１８から切替え制御部１５にＯＳＤ画像の位置情報を出力する点である。以下、この発明の実施の形態１との相違点を中心に説明する。
　ＯＳＤ画面制御部１７は、ＯＳＤ上に表示する時計や字幕、チャネル情報などＯＳＤ画像の表示についての制御を行うものである。ＯＳＤ上に表示する情報としては、時計や字幕など受信データから生成されるデータと、チャネル情報などあらかじめ動画像表示装置１が保持しているデータがある。受信データから生成されたデータについては、ＴＳデコード処理部１２から受け取り、あらかじめ動画像表示装置１が保持しているデータについては、動画像表示装置１からデータを受け取る。これらのデータから、ＯＳＤ上に表示するＯＳＤ画像の位置情報を生成する。
　このＯＳＤ画面制御部１７により生成されるＯＳＤ画像の位置情報は位置情報保持部１８に送られる。
　位置情報保持部１８は、ＯＳＤ画面制御部１７により生成されたＯＳＤ画像の位置情報を保持するものである。
　この位置情報保持部１８により記憶されるＯＳＤ上に表示するＯＳＤ画像の位置情報は、必要に応じて切替え制御部１５に送られる。
　切替え制御部１５は、表示する画面の特徴を示す視覚特性情報として、字幕や時計、チャネル表示、番組タイトルなどのＯＳＤ上に表示するＯＳＤ画像の位置情報を取得し、エラー情報に含まれるエラーの位置情報及びＯＳＤ画像の位置情報からＯＳＤ画像の表示位置以外の位置に存在するエラー数をカウントし、カウントしたエラー数が所定の閾値以上である場合に、記憶部１４に記憶された静止画像データを表示データとして出力し、静止画像への切替えを行う。図７に示すように、ＯＳＤ画像は、動画像データを表示する動画像プレーンとは異なるグラフィックプレーンに表示を行い、ＯＳＤ画像は動画像データ上に重ね合わせて表示される。そのため、ＯＳＤ画像の下にエラーが存在する場合には、ＯＳＤ画像によって、エラー部分が隠れて見えなくなり、また、ＯＳＤ画像が半透明の場合でも視聴者はＯＳＤ画像に注目するため、エラーに気づきにくい。したがって、動画像データに存在するエラーがＯＳＤ画像の下に位置する場合には、動画像を表示し、ＯＳＤ画像の下に位置しない場合には、エラー数に応じて、静止画像へと切替えるように構成する。
　次に上記のように構成された、この発明の実施の形態３に係る動画像表示装置１の切替え制御部１５による動画像と静止画像の切替え制御処理について説明する。
　図８は、この発明の実施の形態３に係る動画像表示装置１の切替え制御処理を示すフローチャートである。同図において、図２，５に示した、実施の形態１，２におけるフローチャートと同一または同様の処理には同一符号を付し、その説明を省略する。
　この発明の実施の形態３における切替え制御処理では、まず、切替え制御部１５は復号部１３から動画像データとエラー情報を取得し（ステップＳＴ２００）、エラーが存在するかを判断する（ステップＳＴ５００）。
　このステップＳＴ５００において、切替え制御部１５は復号部１３から取得した動画像データにエラーが存在すると判断すると、次いで、ＯＳＤ画像の位置情報を取得する（ステップＳＴ８００）。すなわち、切替え制御部１５は、位置情報保持部１８からＯＳＤ上に表示するＯＳＤ画像の位置情報を取得する。
　次いで、切替え制御部１５はＯＳＤ画像の表示位置以外にエラーが存在するかを判断する（ステップＳＴ８０１）。すなわち、切替え制御部１５は、ステップＳＴ２００において、復号部１３から取得した動画像データに存在するエラーが、ステップＳＴ８００において、位置情報保持部１８から取得したＯＳＤ画像の表示位置以外の位置に存在するかを判断する。
　このステップＳＴ８０１において、切替え制御部１５はＯＳＤ画像の表示位置以外の位置にエラーが存在すると判断すると、次いで、ＯＳＤ画像の表示位置以外に存在するエラー数をカウントする（ステップＳＴ８０２）。すなわち、切替え制御部１５は、ＯＳＤ画像の表示位置以外の位置に存在する１フレーム内のエラーについて、そのエラー数をカウントする。
　次いで、切替え制御部１５はエラー数が閾値以上であるかを判断する（ステップＳＴ８０３）。すなわち、切替え制御部１５は、ステップＳＴ８０２において、カウントしたＯＳＤ画像の表示位置以外の位置に存在するエラー数があらかじめ設定される閾値以上であるかを判断する。ここで、予め設定される閾値は、視聴者が気にならないようなエラー数の値を設定する。
　このステップＳＴ８０３において、切替え制御部１５はＯＳＤ上に表示するＯＳＤ画像の表示位置以外の位置に存在するエラー数が閾値以上であると判断すると、次いで、記憶部１４から静止画像データを取得し（ステップＳＴ２０５）、次いで、静止画像への切替えを行う（ステップＳＴ２０６）。その後、シーケンスは終了する。
　一方、切替え制御部１５は、ステップＳＴ５００において、動画像データにエラーが存在しないと判断した場合、または、ステップＳＴ８０１において、ＯＳＤ画像の表示位置以外の位置にエラーが存在しないと判断した場合、または、ステップＳＴ８０３において、ＯＳＤ画像の表示位置以外の位置に存在するエラー数が閾値以上ではないと判断した場合には、次いで、静止画像が表示されているかを判断する（ステップＳＴ２０７）。このステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていると判断すると、次いで、動画像への切替えを行う（ステップＳＴ２０８）。その後、シーケンスは終了する。一方、ステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていないと判断すると、そのまま動画像を表示する（ステップＳＴ２０９）。その後、シーケンスは終了する。
　以上のように、この発明の実施の形態３によれば、切替え制御部１５は、表示する画面の特徴を示す視覚特性情報として、位置情報保持部１８からＯＳＤ上に表示するＯＳＤ画像の位置情報を取得し、このＯＳＤ画像の表示される範囲外に存在するエラーに応じて、動画像と静止画像の切替えを行うように構成したので、エラー検出時に、ＯＳＤ上のＯＳＤ画像の表示位置の下に位置するエラーについては、ＯＳＤ画像によって、エラー部分が隠れてしまい視聴者は気づくことはなく、また半透明のＯＳＤ画像の場合にも、視聴者はＯＳＤ画像に注目するため、エラーに気づきにくいので、そのまま動画像を表示するようにし、ＯＳＤ画像の表示範囲外のエラーに応じて、動画像と静止画像の切替えを適切に変更することで、視聴者が画像の乱れを認知することを最小限に抑えることができる。
実施の形態４．
　図９は、この発明の実施の形態４に係る動画像表示装置１の概要を示すブロック図である。同図において、図１に示した、この発明の実施の形態１と同一または同様の構成要素には同一符号を付し、その説明を省略する。
　この発明の実施の形態４とこの発明の実施の形態１との相違点は、復号部１３から切替え制御部１５に画面の動き量は出力せず、表示する画面の特徴を示す視覚特性情報として、復号部１３から切替え制御部１５に画面の平坦領域情報を出力する点である。以下、この発明の実施の形態１との相違点を中心に説明する。
　復号部１３は、この発明の実施の形態１における復号部１３の符号化データを復号して動画像データを出力する処理及び復号した動画像データ内のエラーを検出しエラー情報を出力する処理に加えて、表示する画面の特徴を示す視覚特性情報として、平坦領域を抽出する。ここで、平坦領域とは、空や海のように色や明暗の大きな変化がない領域のことである。復号部１３は、復号したフレーム情報に基づいて、空間周波数を一定領域ごとに求め、求めた空間周波数が所定の閾値以下の領域を全て含むような集合を平坦領域として抽出する。
　この復号部１３により出力される動画像データ、エラー情報及び平坦領域情報は切替え制御部１５に送られる。
　また、復号部１３は、復号した動画像データに含まれるエラー数が所定の閾値以下である場合に、この復号した動画像データを静止画像データとして記憶部１４に送る。
　切替え制御部１５は、復号部１３により抽出された平坦領域情報を取得し、動画像データのエラー位置と比較することで、動画像データの平坦領域内にエラーが存在するかどうかを判断する。動画像データの平坦領域内にエラーが存在する場合には、復号部１３により復号された動画像データからエラーとその周辺の輝度の差を、エラーの位置の輝度とエラーに接する周辺の輝度の平均値との差として求め、この輝度の差が所定の閾値以上であるエラー数をカウントする。このカウントしたエラー数が所定の閾値以上である場合、記憶部１４に記憶された静止画像データを表示データとして出力し、静止画像への切替えを行う。
　また、切替え制御部１５は、動画像データの平坦領域内にエラーが存在する場合に、エラーとその周辺の色合いの差を、エラーの位置の色合いとエラーとに接する周辺の色合いの平均値との差として求め、求めた色合いの差が所定の閾値以上であるエラー数をカウントし、カウントしたエラー数に応じて静止画像への切替えを判断してもよい。さらに、輝度の差及び色合いの差を組み合わせて、カウントする平坦領域内のエラーを決定するようにしてもよい。
　次に上記のように構成された、この発明の実施の形態４に係る動画像表示装置１の切替え制御部１５による動画像と静止画像の切替え制御処理について説明する。
　図１０は、この発明の実施の形態４に係る動画像表示装置１の切替え制御処理を示すフローチャートである。同図において、図２，５に示した、実施の形態１，２におけるフローチャートと同一または同様の構成においては同一符号を付し、その説明を省略する。
　この発明の実施の形態４における切替え制御処理では、まず、切替え制御部１５は復号部１３から動画像データとエラー情報を取得し（ステップＳＴ２００）、エラーが存在するかを判断する（ステップＳＴ５００）。
　このステップＳＴ５００において、切替え制御部１５は復号部１３から取得した動画像データにエラーが存在すると判断すると、次いで、平坦領域情報を取得する（ステップＳＴ１０００）。すなわち、切替え制御部１５は、復号部１３により抽出された色や明暗の変化の少ない領域を示す平坦領域情報を取得する。
　次いで、切替え制御部１５は平坦領域内にエラーが存在するかを判断する（ステップＳＴ１００１）。すなわち、切替え制御部１５は、ステップＳＴ１０００において、復号部１３から取得した平坦領域内に、ステップＳＴ２００において、復号部１３から取得した動画像データに存在するエラーが位置するか否かを判断する。
　このステップＳＴ１００１において、切替え制御部１５は動画像データの平坦領域内にエラーが存在すると判断すると、次いで、エラーの輝度とエラーの周辺の輝度の差を求める（ステップＳＴ１００２）。すなわち、切替え制御部１５は、復号部１３から取得した動画像データに基づいて、エラーの位置の輝度とエラーの周辺の輝度の平均値を求め、輝度の差を求める。
　次いで、切替え制御部１５は、周辺との輝度の差が閾値以上であるエラー数をカウントする（ステップＳＴ１００３）。すなわち、切替え制御部１５は、動画像データの１フレーム内の平坦領域内に存在し、かつ、周辺との輝度の差が閾値以上であるエラー数をカウントする。
　次いで、切替え制御部１５はエラー数が閾値以上であるかを判断する（ステップＳＴ１００４）。すなわち、切替え制御部１５は、ステップＳＴ１００３において、カウントした動画像データの平坦領域内に存在する周辺との輝度の差が閾値以上であるエラー数が、予め設定された閾値以上であるかを判断する。ここで、予め設定される閾値は、視聴者が気にならないようなエラー数の値を設定する。
　このステップＳＴ１００４において、切替え制御部１５は動画像データの平坦領域内に存在する周辺との輝度の差が閾値以上であるエラー数が閾値以上であると判断すると、次いで、記憶部１４から静止画像データを取得し（ステップＳＴ２０５）、次いで、静止画像への切替えを行う（ステップＳＴ２０６）。その後、シーケンスは終了する。
　一方、切替え制御部１５は、ステップＳＴ５００において、動画像データにエラーが存在しないと判断した場合、または、ステップＳＴ１００１において、動画像データの平坦領域内にエラーが存在しないと判断した場合、または、ステップＳＴ１００４において、動画像データの平坦領域内に存在する周辺との輝度の差が閾値以上であるエラー数が閾値以上でないと判断した場合には、次いで、静止画像が表示されているかを判断する（ステップＳＴ２０７）。このステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていると判断すると、動画像への切替えを行う（ステップＳＴ２０８）。その後、シーケンスは終了する。一方、ステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていないと判断すると、そのまま動画像を表示する（ステップＳＴ２０９）。その後、シーケンスは終了する。
　なお、切替え制御部１５がカウントするエラーの決定方法として、周辺との輝度の差を用いた場合について説明したが、周辺との色合いの差または、輝度の差と色合いの差の組み合わせを用いてもよく、ステップＳＴ１００２及びステップＳＴ１００３において、輝度の差に替えて色合いの差または、輝度の差と色合いの差の組み合わせを用いて処理を行うことで、同様の切替え制御処理を行うことができる。
　以上のように、この発明の実施の形態４によれば、切替え制御部１５は、表示する画面の特徴を示す視覚特性情報として、復号部１３から画面の平坦領域情報を取得し、この平坦領域内に存在し、周辺との輝度や色合いの差が閾値以上であるエラーに応じて、動画像と静止画像の切替えを行うように構成したので、色や明暗の変化が少ない平坦な画面に、色や明暗の差があるエラーが存在する場合には、画面の乱れを認識しやすいという人間の視覚特性を利用し、平坦領域内に輝度や色合いの差が大きいエラーが存在する場合には、画面の乱れとして感じやすいため、静止画像を表示するようにし、平坦でない領域内のエラーや平坦な領域内であっても輝度や色合いの差が小さいエラーは、周辺との差を感じにくいため、画面の乱れとして気にならないので、そのまま動画像を表示するようにし、画面の平坦領域内に存在し、周辺との輝度や色合いの差が閾値以上であるエラーに応じて、動画像と静止画像の切替えを適切に変更することで、視聴者が画面の乱れを認知することを最小限に抑えることができる。
実施の形態５．
　図１１は、この発明の実施の形態５に係る動画像表示装置１の概要を示すブロック図である。同図において、図１に示した、この発明の実施の形態１と同一または同様の構成要素には同一符号を付し、その説明を省略する。
　この発明の実施の形態５とこの発明の実施の形態１との相違点は、復号部１３から切替え制御部１５に画面の動き量は出力せず、画面の重要度を抽出する重要度情報抽出部１９を付加し、表示する画面の特徴を示す情報として、重要度情報抽出部１９から切替え制御部１５に画面の重要度を出力する点である。以下、この発明の実施の形態１との相違点を中心に説明する。
　復号部１３は、この発明の実施の形態１における復号部１３の符号化データを復号して動画像データを出力する処理及び復号した動画像データのエラーを検出しエラー情報を出力する処理に加えて、符号化データを復号して音データを出力する。
　この復号部１３により出力される動画像データ及びエラー情報は切替え制御部１５に送られ、音データは重要度情報抽出部１９に送られる。
　重要度情報抽出部１９は、ＴＳデコード処理部１２により出力されたメタデータまたは復号部１３により出力された音データから、復号部１３により復号される動画像データが重要な場面であるか否かを判断し、その画面の重要度を抽出するものである。ここで、重要な場面の一例としてはスポーツの得点シーンがある。このような場合、映像の動きに注目しており、乱れの少ない静止画像を見るよりも、乱れがあっても映像の動きを見続けたいと考えられるため、画面の重要度を高く設定する。この重要度情報抽出部１９により抽出される重要度は、必要に応じて切替え制御部１５に送られる。
　この重要度情報抽出部１９において、画面の重要度を決定するために復号部１３により復号された音データを用いる場合、例えば、スポーツの重要な場面である得点シーンでは、観客の歓声が起こるという特徴がある。そのため、この音データを解析し、歓声のような特徴を検出した際には、その画面は重要であると判断し、画面の重要度を高くする。また、ドラマや映画では、大切なシーンにおいて音楽が大きくなるという特徴がある。この特徴から、音楽が流れるシーンを重要であると判断し、画面の重要度を高くする。
　また、重要度情報抽出部１９において、ＴＳデコード処理部１２により出力されたメタデータを取得した際に、このメタデータに動画像データの重要度が示されている場合には、それを画面の重要度として利用することも可能である。
　さらに、音データ、メタデータの複数データを取得可能であれば、それらを組み合わせて画面の重要度を設定してもよい。
　切替え制御部１５は、重要度情報抽出部１９により抽出された画面の重要度を取得し、復号部１３により出力されたエラー情報に基づいて、動画像データに含まれるエラー数をカウントし、カウントしたエラー数が所定の閾値以上であり、かつ画面の重要度が所定の閾値以下である場合、記憶部１４に記憶された静止画像データを表示データとして出力し、静止画像への切替えを行う。
　次に上記のように構成された、この発明の実施の形態５に係る動画像表示装置１の切替え制御部１５による動画像と静止画像の切替え制御処理について説明する。
　図１２は、この発明の実施の形態５に係る動画像表示装置１の切替え制御処理を示すフローチャートである。同図において、図２に示した、実施の形態１におけるフローチャートと同一または同様の構成においては同一符号を付し、その説明を省略する。
　この発明の実施の形態５における切替え制御処理では、まず、切替え制御部１５は復号部１３から動画像データとエラー情報を取得し（ステップＳＴ２００）、エラー数をカウントする(ステップＳＴ２０１)。次いで、切替え制御部１５はエラー数が閾値以上であるかを判断する(ステップＳＴ２０２)。
　このステップＳＴ２０２において、切替え制御部１５は動画像データに含まれるエラー数が閾値以上であると判断すると、次いで、画面の重要度を取得する（ステップＳＴ１２００）。すなわち、切替え制御部１５は、重要度情報抽出部１９により抽出された画面の重要度を取得する。
　次いで、切替え制御部１５は画面の重要度が閾値以下であるかを判断する（ステップＳＴ１２０１）。すなわち、切替え制御部１５は、ステップＳＴ１２００において、重要度情報抽出部１９から取得した画面の重要度が予め設定した閾値以下であるかを判断する。
　このステップＳＴ１２０１において、切替え制御部１５は画面の重要度が閾値以下であると判断すると、次いで、記憶部１４から静止画像データを取得し（ステップＳＴ２０５）、次いで、静止画像への切替えを行う（ステップＳＴ２０６）。その後、シーケンスは終了する。
　一方、切替え制御部１５は、ステップＳＴ２０２において、動画像データに含まれるエラーが閾値以上ではないと判断した場合、または、ステップＳＴ１２０１において、画面の重要度が閾値以下ではないと判断した場合には、次いで、静止画像が表示されているかを判断する（ステップＳＴ２０７）。このステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていると判断すると、動画像への切替えを行う（ステップＳＴ２０８）。その後、シーケンスは終了する。一方、ステップＳＴ２０７において、切替え制御部１５は静止画像が表示されていないと判断すると、そのまま動画像を表示する（ステップＳＴ２０９）。その後、シーケンスは終了する。
　以上のように、この発明の実施の形態５によれば、切替え制御部１５は、復号部１３から受け取ったエラー情報から、動画像データにエラーが含まれると判断した場合、重要度情報抽出部１９から、表示する画面の特徴を示す情報として画面の重要度を受け取り、その重要度に応じて静止画像への切替えを行うか否かを決定するように構成したので、エラー検出時に、検出した画面の重要度が設定した閾値よりも大きい場合、映像の動きに注目しており、動きを見続けたいため、多少映像の乱れがあっても気にならないので、静止画像への切替えを行わずに動画像データを表示するようにし、画面の重要度が閾値以下の場合は、映像の動きに注目していないため、画面の乱れが気になりやすいので、静止画像へ切替えるようにし、画面の重要度に応じて、動画像と静止画像の切替えを適切に変更することで、視聴者が画像の乱れを認知するのを最小限に抑えることができる。
　また、この発明の実施の形態５では、動画像データに存在するエラー数と比較される閾値は予め設定されるものとしたが、この閾値を画面の重要度に応じて設定するようにし、設定された閾値以上にエラーが存在する場合には静止画像への切替えを行い、閾値以下のエラー数であれば動画像を表示するように構成してもよい。このとき、画面の重要度が高いほど、閾値を大きく設定し、画面の重要度が低いほど、閾値を小さく設定する。また、画面の重要度に応じて閾値を設定する場合、図１２に示したステップＳＴ１２００及びステップＳＴ１２０１の処理は不要となる。
　この発明に係る動画像表示装置は、画面の動き量やエラー位置に応じて、動画像と静止画像の切替えを適切に変更することで、視聴者が画像の乱れを認知することを最小限に抑えることができ、電波状況の悪化などによりエラーが発生した場合に、動画像から静止画像への切替えを行う動画像表示装置等に用いるのに適している。

Claims (10)

  1. 　受信データから符号化データを抽出するデータ生成部と、
    　前記データ生成部により抽出された符号化データから動画像データを復号し、復号時のエラー情報を検出すると共に、表示する画面の特徴を示す視覚特性情報を検出する復号部と、
    　前記復号部により復号された動画像データを静止画像データとして記憶する記憶部と、
    　前記復号部により検出されたエラー情報及び視覚特性情報に応じて、前記復号部により復号された動画像データ又は前記記憶部に記憶された静止画像データを表示データとして出力する切替え制御部とを有する動画像表示装置。
  2. 　前記復号部は、視覚特性情報として、動画像データ及びその前後の動画像データに基づいて画面の動き量を検出し、
    　前記切替え制御部は、前記エラー情報からエラー数をカウントし、カウントしたエラー数が所定の閾値以上で、かつ、前記画面の動き量が所定の閾値以下である場合に、前記記憶部に記憶された静止画像データを表示データとして出力することを特徴とする請求項１記載の動画像表示装置。
  3. 　前記復号部は、視覚特性情報として、動画像データ及びその前後の動画像データに基づいて注目領域を抽出し、
    　前記切替え制御部は、前記エラー情報に含まれるエラーの位置情報から前記注目領域に存在するエラー数をカウントし、カウントしたエラー数が所定の閾値以上である場合に、前記記憶部に記憶された静止画像データを表示データとして出力することを特徴とする請求項１記載の動画像表示装置。
  4. 　受信データから符号化データを抽出するデータ生成部と、
    　前記データ生成部により抽出された符号化データから動画像データを復号し、復号時のエラー情報を検出する復号部と、
    　前記復号部により復号された動画像データを静止画像データとして記憶する記憶部と、
    　ＯＳＤ上に表示するＯＳＤ画像の位置情報を生成するＯＳＤ画面制御部と、
    　前記ＯＳＤ画面制御部により生成されたＯＳＤ画像の位置情報を保持する位置情報保持部と、
    　前記復号部により検出されたエラー情報及び前記位置情報保持部に保持されたＯＳＤ画像の位置情報に応じて、前記復号部により復号された動画像データ又は前記記憶部に記憶された静止画像データを表示データとして出力する切替え制御部とを有する動画像表示装置。
  5. 　前記切替え制御部は、前記エラー情報に含まれるエラーの位置情報及び前記ＯＳＤ画像の位置情報から前記ＯＳＤ画像の表示位置以外の位置に存在するエラー数をカウントし、カウントしたエラー数が所定の閾値以上である場合に、前記記憶部に記憶された静止画像データを表示データとして出力することを特徴とする請求項４記載の動画像表示装置。
  6. 　前記復号部は、視覚特性情報として、動画像データに基づいて平坦領域を抽出し、
    　前記切替え制御部は、前記エラー情報に含まれるエラーの位置情報から前記平坦領域に存在し、かつ、周辺との輝度の差が閾値以上であるエラー数をカウントし、カウントしたエラー数が所定の閾値以上である場合に、前記記憶部に記載された静止画像データを表示データとして出力することを特徴とする請求項１記載の動画像表示装置。
  7. 　前記復号部は、視覚特性情報として、動画像データに基づいて平坦領域を抽出し、
    　前記切替え制御部は、前記エラー情報に含まれるエラーの位置情報から前記平坦領域に存在し、かつ、周辺との色合いの差が閾値以上であるエラー数をカウントし、カウントしたエラー数が所定の閾値以上である場合に、前記記憶部に記載された静止画像データを表示データとして出力することを特徴とする請求項１記載の動画像表示装置。
  8. 　受信データから符号化データを抽出するデータ生成部と、
    　前記データ生成部により抽出された符号化データから動画像データを復号し、復号時のエラー情報を検出する復号部と、
    　前記復号部により復号された動画像データを静止画像データとして記憶する記憶部と、
    　前記復号部により復号された動画像データの画面の重要度を抽出する重要度情報抽出部と、
    　前記復号部により検出されたエラー情報及び前記重要度情報抽出部により抽出された画面の重要度に応じて、前記復号部により復号された動画像データ又は前記記憶部に記憶された静止画像データを表示データとして出力する切替え制御部とを有する動画像表示装置。
  9. 　前記復号部は、符号化データから音データを復号し、
    　前記重要度情報抽出部は、前記復号部により復号された音データに基づいて画面の重要度を抽出し、
    　前記切替え制御部は、前記エラー情報からエラー数をカウントし、カウントしたエラー数が所定の閾値以上で、かつ、前記画面の重要度が所定の閾値以下である場合に、前記記憶部に記憶された静止画像データを表示データとして出力することを特徴とする請求項８記載の動画像表示装置。
  10. 　前記データ生成部は、受信データからメタデータを抽出し、
    　前記重要度情報抽出部は、前記データ生成部により抽出されたメタデータに基づいて画面の重要度を抽出し、
    　前記切替え制御部は、前記エラー情報からエラー数をカウントし、カウントしたエラー数が所定の閾値以上で、かつ、前記画面の重要度が所定の閾値以下である場合に、前記記憶部に記憶された静止画像データを表示データとして出力することを特徴とする請求項８記載の動画像表示装置。
PCT/JP2009/003649 2009-01-29 2009-07-31 動画像表示装置 Ceased WO2010086918A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN2009801504510A CN102257807B (zh) 2009-01-29 2009-07-31 运动图像显示装置
JP2010548264A JP5230756B2 (ja) 2009-01-29 2009-07-31 動画像表示装置
US13/126,180 US20110199535A1 (en) 2009-01-29 2009-07-31 Moving image display
EP09839110.5A EP2383997A4 (en) 2009-01-29 2009-07-31 DEVICE FOR DISPLAYING DYNAMIC IMAGES

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009-018516 2009-01-29
JP2009018516 2009-01-29

Publications (1)

Publication Number Publication Date
WO2010086918A1 true WO2010086918A1 (ja) 2010-08-05

Family

ID=42395188

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/003649 Ceased WO2010086918A1 (ja) 2009-01-29 2009-07-31 動画像表示装置

Country Status (5)

Country Link
US (1) US20110199535A1 (ja)
EP (1) EP2383997A4 (ja)
JP (1) JP5230756B2 (ja)
CN (1) CN102257807B (ja)
WO (1) WO2010086918A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014136004A (ja) * 2013-01-16 2014-07-28 Universal Entertainment Corp 遊技機および遊技機の管理方法
JP2015157100A (ja) * 2015-04-28 2015-09-03 株式会社ユニバーサルエンターテインメント 遊技機

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9996501B1 (en) * 2012-06-28 2018-06-12 Amazon Technologies, Inc. Validating document content prior to format conversion based on a calculated threshold as a function of document size
JP6074750B2 (ja) * 2014-05-23 2017-02-08 パナソニックＩｐマネジメント株式会社 画像切替装置、画像切替システム、及び画像切替方法
US9544636B2 (en) 2014-07-07 2017-01-10 Google Inc. Method and system for editing event categories
US10140827B2 (en) * 2014-07-07 2018-11-27 Google Llc Method and system for processing motion event notifications
USD782495S1 (en) 2014-10-07 2017-03-28 Google Inc. Display screen or portion thereof with graphical user interface
US9361011B1 (en) 2015-06-14 2016-06-07 Google Inc. Methods and systems for presenting multiple live video feeds in a user interface
US10506237B1 (en) 2016-05-27 2019-12-10 Google Llc Methods and devices for dynamic adaptation of encoding bitrate for video streaming
US10380429B2 (en) 2016-07-11 2019-08-13 Google Llc Methods and systems for person detection in a video feed
US10957171B2 (en) 2016-07-11 2021-03-23 Google Llc Methods and systems for providing event alerts
US10410086B2 (en) 2017-05-30 2019-09-10 Google Llc Systems and methods of person recognition in video streams
US11783010B2 (en) 2017-05-30 2023-10-10 Google Llc Systems and methods of person recognition in video streams
US11134227B2 (en) 2017-09-20 2021-09-28 Google Llc Systems and methods of presenting appropriate actions for responding to a visitor to a smart home environment
US10664688B2 (en) 2017-09-20 2020-05-26 Google Llc Systems and methods of detecting and responding to a visitor to a smart home environment
US10880604B2 (en) * 2018-09-20 2020-12-29 International Business Machines Corporation Filter and prevent sharing of videos
US11893795B2 (en) 2019-12-09 2024-02-06 Google Llc Interacting with visitors of a connected home environment

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08140084A (ja) * 1994-11-07 1996-05-31 Fujitsu Ten Ltd 衛星放送用フリーズ回路
JP2002152743A (ja) 2000-11-10 2002-05-24 Sharp Corp 動画像復号装置
JP2006186787A (ja) 2004-12-28 2006-07-13 Fujitsu Ten Ltd デジタルデータ受信機
JP2006238149A (ja) * 2005-02-25 2006-09-07 Fujitsu Ten Ltd デジタルデータ受信機

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6798834B1 (en) * 1996-08-15 2004-09-28 Mitsubishi Denki Kabushiki Kaisha Image coding apparatus with segment classification and segmentation-type motion prediction circuit
JPH07283798A (ja) * 1994-04-08 1995-10-27 Matsushita Electric Ind Co Ltd 衛星放送移動体受信装置
US6128339A (en) * 1997-02-13 2000-10-03 Samsung Electronics Co., Ltd. Apparatus and method for masking video data errors
EP1018840A3 (en) * 1998-12-08 2005-12-21 Canon Kabushiki Kaisha Digital receiving apparatus and method
WO2006046476A1 (ja) * 2004-10-29 2006-05-04 Sharp Kabushiki Kaisha 動画像復号装置および動画像復号方法
US8204364B2 (en) * 2004-12-16 2012-06-19 Sharp Kabushiki Kaisha Moving picture image reproduction method and moving picture image reproduction apparatus
JP4734168B2 (ja) * 2006-05-09 2011-07-27 株式会社東芝 画像復号化装置及び画像復号化方法
JP2007336211A (ja) * 2006-06-14 2007-12-27 Mitsubishi Electric Corp 車載用放送受信装置
JP2008236329A (ja) * 2007-03-20 2008-10-02 Toshiba Corp 映像復号装置
US8565310B2 (en) * 2008-01-08 2013-10-22 Broadcom Corporation Hybrid memory compression scheme for decoder bandwidth reduction

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08140084A (ja) * 1994-11-07 1996-05-31 Fujitsu Ten Ltd 衛星放送用フリーズ回路
JP2002152743A (ja) 2000-11-10 2002-05-24 Sharp Corp 動画像復号装置
JP2006186787A (ja) 2004-12-28 2006-07-13 Fujitsu Ten Ltd デジタルデータ受信機
JP2006238149A (ja) * 2005-02-25 2006-09-07 Fujitsu Ten Ltd デジタルデータ受信機

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2383997A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014136004A (ja) * 2013-01-16 2014-07-28 Universal Entertainment Corp 遊技機および遊技機の管理方法
JP2015157100A (ja) * 2015-04-28 2015-09-03 株式会社ユニバーサルエンターテインメント 遊技機

Also Published As

Publication number Publication date
JP5230756B2 (ja) 2013-07-10
EP2383997A1 (en) 2011-11-02
US20110199535A1 (en) 2011-08-18
JPWO2010086918A1 (ja) 2012-07-26
CN102257807B (zh) 2013-12-25
EP2383997A4 (en) 2015-11-11
CN102257807A (zh) 2011-11-23

Similar Documents

Publication Publication Date Title
JP5230756B2 (ja) 動画像表示装置
US8265426B2 (en) Image processor and image processing method for increasing video resolution
US20120320265A1 (en) Methods and systems for improving low-resolution video
US20100201870A1 (en) System and method for frame interpolation for a compressed video bitstream
CN100380921C (zh) 图像显示装置
CN105993172A (zh) 克服用户损伤的媒体内容的操纵
JP3664251B2 (ja) 映像出力装置
JP4747917B2 (ja) デジタル放送受信装置
US20110243474A1 (en) Video image processing apparatus and video image processing method
JP2020508611A (ja) デジタルｔｖ画面の黒色境界領域を再使用する方法及び装置
JP4693546B2 (ja) デジタルノイズ低減装置及び方法及び映像信号処理装置
JP6045405B2 (ja) 映像処理装置、表示装置、テレビジョン受信機及び映像処理方法
JP4714039B2 (ja) 映像再生装置及び映像再生方法
US20080159388A1 (en) Method for generating reduced image of original image comprising blocks encoded by intra prediction and image apparatus thereof
JP4965980B2 (ja) 字幕検出装置
KR101042352B1 (ko) 멀티미디어 방송 시스템에서의 방송신호 수신장치 및 그 방법
KR101537613B1 (ko) 방송 수신 장치 및 채널 전환 표시 방법
JP2015056019A (ja) 表示装置および表示方法
US8284313B2 (en) Apparatus and method for determining noise
KR102835270B1 (ko) 디스플레이 장치 및 그의 동작 방법
KR100647954B1 (ko) 화질 개선부가 구비된 이동 단말기 및 이동 단말기표시장치 화질 개선 방법
JP2006180179A (ja) テレビジョンセット
JP2005197931A (ja) 静止画キャプチャ装置及びこれを備えたデジタル／アナログチューナ装置
JP4374048B2 (ja) 補間フレーム生成装置、補間フレーム生成方法及び放送受信装置
US20080079850A1 (en) Broadcast receiving apparatus for providing commerce broadcast without modifying broadcast picture and broadcast providing method thereof

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980150451.0

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09839110

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2010548264

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 13126180

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2009839110

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE