DE69433292T2

DE69433292T2 - Verfahren und Vorrichtung zur Bildsynthese

Info

Publication number: DE69433292T2
Application number: DE69433292T
Authority: DE
Inventors: Takashi Yagi; Kazuho Arita; Oikawa Shigeru; Ishibashi Yokohama-shi Satoshi
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 1993-09-01
Filing date: 1994-08-31
Publication date: 2004-08-26
Anticipated expiration: 2014-09-01
Also published as: US5825366A; SG73964A1; DE69433292D1; EP0642100A1; EP0642100B1

Description

Hintergrund der Erfindung
Gebiet der Erfindung
Die vorliegende Erfindung betrifft Verfahren und Vorrichtungen für die Synthese von Bildern, die an den Endgeräten von Kommunikationssystemen zu verwenden sind, insbesondere diejenigen Verfahren und Vorrichtungen, die verwendet werden, um mehrere Bilder von Schriften oder Handbewegungen auf einem Arbeitsplatz von mehreren Anwendern, die an entfernten Orten getrennt sind, durch Kommunikationsleitungen zu senden und zu empfangen. Die Bilder werden synthetisiert, wobei es unter Verwendung einer Anzeigevorrichtung möglich ist, dass ein Anwender auf die gewünschte Stelle in den Schriften auf ihren entsprechenden Arbeitsplätzen mit seinem Finger oder einem Stift zeigt und Wörter schreibt. Eine derartige Vorrichtung würde es möglich machen, Gruppenarbeit, wie z. B. Büroarbeit, Konstruktionsarbeit oder Software-Entwicklung, auf den einzelnen Arbeitsplätzen der entsprechenden Anwender auszuführen.
In Beziehung stehende Technologie
Bis jetzt hat es ein Videokommunikations-Endgerät gegeben, das durch Kommunikationsleitungen Videobilder von Handbewegungen auf den Arbeitsplätzen mehrerer Anwender, die an getrennten Orten- stehen, senden und empfangen kann. Das Endgerät bietet einen gemeinsam benutzten Zeichenraum, in dem das Videobild jeder Person durchscheinend synthetisiert wird, sodass es möglich ist, hindurch zu sehen. Angezeigt auf einem Monitor ist es möglich, dass viele Menschen gleichzeitig sowohl Anweisungen für den gewünschten Ort auf dem Videobild unter Verwendung eines Fingers oder eines Stifts geben als auch Wörter schreiben (siehe die offen gelegte Veröffentlichung der japanischen Patentanmeldung Nr. 4-119.087).
24 zeigt einen Blockschaltplan der Struktur eines Videokommunikationssystems, das diese Art des Videokommunikations-Endgerätes verwendet. In 24 können zwei Videokommunikations-Endgeräte 1a und 1b durch eine Kommunikationsleitung 2 in zwei Richtungen kommunizieren. Die Videokommunikations-Endgeräte 1a und 1b bestehen jedes aus den Videobild-Eingabevorrichtungen 3a bzw. 3b, den Videobild-Synthesevorrichtungen 4a bzw. 4b, den Anzeigevorrich tungen 5a bzw. 5b und den Videobild-Kommunikationsvorrichtungen 6a bzw. 6b. Die Videobild-Eingabevorrichtungen 3a und 3b umfassen Videokameras, die das Bild des Arbeitsplatzes jeder Person aufnehmen und z. B. die in 25 gezeigten Videobilder 7a und 7b ausgeben. Die Videobild-Synthesevorrichtung 4a führt eine durchscheinende Synthese, sodass durch die Bilder hindurch gesehen werden kann, des direkt von der Videobild-Eingabevorrichtung 3a empfangenen Videobildes 7a und des Videobildes 7b, das durch die Videobild-Kommunikationsvorrichtung 6a und die Kommunikationsleitung 2 von der Videobild-Kommunikationsvorrichtung 6b empfangen wird, die wiederum das Bild von der Videobild-Eingabevorrichtung 3b empfangen hat, aus. In dieser Weise empfängt die Anzeigevorrichtung 5a das Videobild 8, wie es in 25 zu sehen ist. Ähnlich führt die Videobild-Synthesevorrichtung 4b eine durchscheinende Synthese des direkt von der Videobild-Eingabevorrichtung 3b empfangenen Videobildes 7b und des Videobildes 7a, das durch die Videobild-Kommunikationsvorrichtung 6b und die Kommunikationsleitung 2 von der Videobild-Kommunikationsvorrichtung 6a empfangen wird, die wiederum das Bild von der Videobild-Eingabevorrichtung 3a empfangen hat, aus. In dieser Weise empfängt die Anzeigevorrichtung 5b das Videobild 8, wie es in 25 zu sehen ist.
Als Nächstes wird das Bildsyntheseverfahren erklärt, das durch die Bildsynthesevorrichtungen 4a und 4b des oben erwähnten Videokommunikationssystems verwendet wird (das von hier an als das ältere Bildsyntheseverfahren 1 bezeichnet wird). Hinsichtlich des älteren Bildsyntheseverfahrens 1 wird angenommen, dass ein synthetisiertes Bild P durch das Synthetisieren von zwei Bildern P1 und P2, von denen jedes (X × Y) Bildelemente besitzt (X und Y sind natürliche Zahlen), mit beliebigen Syntheseverhältnissen erzeugt wird. Es wird angenommen, dass die Bildelemente, die bei den Koordinaten (x, y) (1 ≤ x ≤ X, 1 ≤ y ≤ Y, x und y sind natürliche Zahlen) in jedem Bild P1, P2 und P liegen, als p_1xy, p_x2y bzw. p_xy bezeichnet werden. Falls das Syntheseverhältnis zwischen dem Bild P1 und P2 auf w₁ : w₂ (w₁ + w₂ = 1, w₁ > 0, w₂ > 0) gesetzt ist, wird die Bildsynthese unter Verwendung der Gleichung (1) an den Bildelementen ausgeführt, die sich bei (x, y) jedes Bildes befinden. pxy = w1p1xy + w2p2xy (1)
Das ältere Bildsyntheseverfahren 1 wird unter Verwendung des Ablaufplans in 26 als eine Referenz erklärt. Zuerst wird im Schritt SA1 das Register y zum Verändern der y-Koordinaten auf einen Anfangswert "1 " gesetzt; ähnlich wird im Schritt SA2 das Register x zum Verändern der x-Koordinaten auf einen Anfangswert "1" gesetzt. Als Nächstes geht im Schritt SA3 nach dem Ausführen der Bildsynthese unter Verwendung der Gleichung (1) für die gesetzten x- und y-Koordinaten die Prozedur zum Schritt SA4 weiter, in dem "1" zum Wert des Registers x addiert wird. Im Schritt SA5 wird bestimmt, ob der Wert des Registers x größer als der Maximalwert X ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SA3 zurückkehrt. Dann wird die Prozedur in den Schritten SA3 und SA4 wiederholt, bis der Wert des Registers x größer als der Maximalwert X wird. Wenn der Wert des Registers x größer als das Maximum X wird, wird das Ergebnis des Schrittes SA5 "JA", wobei die Prozedur zum Schritt SA6 weitergeht. Im Schritt SA7 wird bestimmt, ob der Wert des Registers y größer als der Maximalwert Y ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SA2 zurückkehrt. Dann wird die Prozedur in den Schritten SA2–SA6 wiederholt, bis der Wert des Registers y größer als der Maximalwert Y wird. Wenn der Wert des Registers y größer als das Maximum Y wird, wird das Ergebnis des Schrittes SA7 "JA", wobei die Prozedur endet.
In 27 ist das Ergebnis in dem Fall, wenn das ältere Bildsyntheseverfahren 1 verwendet wird, um ein durchscheinend synthetisiertes Bild zu erzeugen, symbolisch gezeigt. In 27 wird, wenn das Syntheseverhältnis der Bilder 9a und 9b 0,5 : 0,5 beträgt, dann, wie im Bild 10 gezeigt ist, die Synthese eines schwarzen Bildelements und eines weißen Bildelements (weißes Bildelement = 1, schwarzes Bildelement = 0) ein graues (0,5) Bildelement.
Infolgedessen fällt, wenn zwei Videobilder der Arbeitsplätze unter Verwendung des älteren Bildsyntheseverfahren 1 synthetisiert werden, wie in 25 zu sehen ist, der Kontrast der Zeichnungen auf beiden Seiten, wobei es oft ein Problem gab, das Dokument und die Zeichnungen deutlich zu sehen. Außerdem sind, wie in 24 gezeigt ist, die zwei Bildkommunikations-Endgeräte 1a und 1b durch die Kommunikationsleitung 2 verbunden, wobei jedes zwei Bilder synthetisiert, wenn aber die Anzahl der zu synthetisierenden Bilder, zurückzuführen auf die Ergänzung von weiteren Videokommunikations-Endgeräten, zunimmt, nimmt der Kontrast ab; wobei es deshalb hinsichtlich des oben erwähnten älteren Bildsyntheseverfahrens 1 schwierig war, ein Videokommunikationssystem in die Praxis umzusetzen, das mehrere Videobilder synthetisieren konnte, indem mehrere getrennte Orte durch Kommunikationsleitungen verbunden wurden.
Außerdem fällt hinsichtlich des oben erwähnten älteren Bildsyntheseverfahrens 1, wenn ein Dokument mittels eines Videobildes gemeinsam benutzt wird, wenn für die Kommunikationsleitung 2 z. B. eine digitale Leitung mit niedrigem Volumen verwendet wird, wie z. B. N-ISDN, dann aufgrund der Komprimierung oder Dekomprimierung des Videobildes die Qualität scharf ab, wobei kleine Wörter oft unleserlich werden, wenn es mit Geschäftsdokumenten verwendet wird.
Um die Probleme im oben erwähnten älteren Bildsyntheseverfahren 1 zu lösen, gibt es ein weiteres Bildsyntheseverfahren (das als das ältere Bildsyntheseverfahren 2 bezeichnet wird), das die folgende Technologie zum älteren Bildsyntheseverfahren 1 hinzufügt. Dieses ältere Bildsyntheseverfahren 2 besitzt die Technologie, die eine Vorrichtung hinzufügt, die das Dokument erhält, indem sie es als Standbilder mit hoher Genauigkeit sendet und dann diese Standbilder mit hoher Genauigkeit mit den Videobildern von jedem Videokommunikations-Endgerät durchscheinend synthetisiert (siehe die offen gelegte Veröffentlichung der japanischen Patentanmeldung Nr. 6-153.192).
28 zeigt einen Blockschaltplan eines strukturellen Beispiels eines Videokommunikationssystems, das das ältere Bildsyntheseverfahren 2 verwendet. In 28 sind die zwei Videokommunikations-Endgeräte 9a und 9b durch eine Kommunikationsleitung 10 verbunden, wobei sie in beiden Richtungen kommunizieren können. Die Videokommunikations-Endgeräte 9a und 9b bestehen aus den Videobild-Eingabevorrichtungen 11a bzw. 11b, den Standbildspeichern 12a bzw. 12b, den Bildsynthesevorrichtungen 13a bzw. 13b, den Anzeigevorrichtungen 14a bzw. 14b und den Video-/Standbild-Kommunikationsvorrichtungen 15a bzw. 15b. Die Videobild-Eingabevorrichtungen 11a und 11b umfassen Kameras mit hoher Auflösung, die ein Dokument sehr genau erfassen können.
Als Nächstes wird das ältere Bildsyntheseverfahren 2 unter Bezugnahme auf 28 erklärt. Zuerst wird, um das Dokument in beiden Videokommunikationsvorrichtungen 9a und 9b zu verwenden, im Videokommunikations-Endgerät 9a das Dokument, das sich auf einem Arbeitsplatz befindet, durch die Videobild-Eingabevorrichtung 11a erfasst, wobei dann ein einzelnes Vollbild des erfassten Bildes im Standbildspeicher 12a als ein Standbild gespeichert wird. Als Nächstes sendet die Video-/Standbild-Kommunikationsvorrichtung 15a das Standbild, das im Standbildspeicher 12a gespeichert worden war, durch die Kommunikationsleitung 10 zum Videokommunikations-Endgerät 9b. Das Videokommunikations-Endgerät 9b speichert das Standbild, das durch die Video-/Standbild-Kommunikationsvorrichtung 15b vom Videokommunikations-Endgerät 9a empfangenen worden war, im Standbildspeicher 12b.
Als Nächstes wird im Videokommunikations-Endgerät 9a der Arbeitsplatz durch die Videobild-Eingabevorrichtung 11a erfasst, wobei das erfasste Videobild durch die Kommunikationsleitung 10 durch die Video-/Standbild-Kommunikationsvorrichtung 15a zum Videokommunikations-Endgerät 9b gesendet wird. Inzwischen werden das Standbild, das im Standbildspeicher 12a gehalten worden war, das Videobild, das durch die Videobild-Eingabevorrichtung 11a erfasst worden war, und das Videobild vom Videokommunikations-Endgerät 9b, das durch die Video-/Standbild-Kommunikationsvorrichtung 15a erhalten worden war, durch die Bildsynthesevorrichtung 13a durchscheinend kombiniert, sodass jedes Bild gesehen werden kann, und auf der Anzeigevorrichtung 14a angezeigt.
Ähnlich wird im Videokommunikations-Endgerät 9b der Arbeitsplatz durch die Videobild-Eingabevorrichtung 11b erfasst, wobei das erfasste Videobild durch die Kommunikationsleitung 10 durch die Video-/Standbild-Kommunikationsvorrichtung 15b zum Videokommunikations-Endgerät 9a gesendet wird. Inzwischen werden das Standbild, das im Standbildspeicher 12b gehalten worden war, das Videobild, das durch die Videobild-Eingabevorrichtung 11b erfasst worden war, und das Videobild von Videokommunikations-Endgerät 9a, das durch die Video-/Standbild-Kommunikationsvorrichtung 15b erhalten worden war, durch die Bildsynthesevorrichtung 13b durchscheinend kombiniert, sodass jedes Bild gesehen werden kann, und auf der Anzeigevorrichtung 14 angezeigt.
In den oben erwähnten Videokommunikations-Endgeräten 9a und 9b ist es möglich, einen gemeinsam benutzten Arbeitsraum zu erzeugen, in dem beide Videokommunikationsvorrichtungen 9a und 9b gleichzeitig Kommentare hinsichtlich des Standbildes 17 eintragen können, wenn, wie in 29 gezeigt ist, das (durch die Videobild-Eingabevorrichtung 11a erfasste) Videobild 16a, das durch das Erfassen des eigenen Arbeitsplatzes aufgenommen worden ist, das (durch die Videobild-Eingabevorrichtung 11b erfasste) Videobild 16b, das durch das Erfassen des Arbeitsplatzes einer anderen Person aufgenommen worden ist, und das Standbild 17, das im Standbildspeicher 12a gehalten worden war, durchscheinend synthetisiert werden, sodass jedes Bild sichtbar ist, wie im Bild 18 gezeigt ist.
Im oben erwähnten älteren Bildsyntheseverfahren 2 wird durch das Senden des Dokumentes als Standbilder separat von den Videobildern und dem Herstellen des Dokumentenbildes mit hoher Genauigkeit die Notwendigkeit fallen gelassen, direkt auf das Papier zu schreiben, wobei es möglich ist, dass beide Seiten gleichzeitig in das Dokumentenbild schreiben.
Weil jedoch im oben erwähnten älteren Bildsyntheseverfahren 2 das Standbild mit den Videobildern durchscheinend kombiniert wird, fällt der Kontrast des Standbildes, wie im synthetisierten Bild 18 in 29 gezeigt ist, wobei das Problem verbleibt, das Dokument nicht lesen zu können.
EP-0 335 036 beschreibt eine Bildzusammensetzungsvorrichtung, die beschaffen ist, um ein zusammengesetztes Bild zu erzeugen, in dem ein Wert von jedem der Bildelemente sowohl durch einen Maximalwert oder Minimalwert der Helligkeit eines Videosignals als auch als ein entsprechendes anderes Signal zum Zeitpunkt des Maximal- oder Minimalwertes dargestellt wird. Ein zusammengesetztes Bild wird gebildet, in dem ein Wert von jedem der Bildelemente durch einen Zählwert der Synchronisierungssignale oder eine extern angelegte Taktung, eine extern angelegte Position oder einen extern angelegten Winkel dargestellt wird, die bzw. der ein externes Eingangssignal zu einem Zeitpunkt anzeigen, zu dem das Videosignal den Maximalwert oder den Minimalwert für jedes Bildelement erreicht.
Zusammenfassung der Erfindung
Es ist die Aufgabe dieser Erfindung, Verfahren und Vorrichtungen für die Bildsynthese zu bieten, die die visuellen Probleme beseitigen können, die durch den Abfall im Kontrast verursacht werden, der sich ergibt, wenn mehrere Videobilder und Standbilder durchscheinend synthetisiert werden, und die es möglich machen, dass ein Videokommunikations-Endgerät einen gemeinsam benutzten Arbeitsraum bietet, der mehrere Orte verbindet.
Deshalb vergleicht diese Erfindung die Luminanzen I_p1xy–I_pNxy jedes Bildelements p_1xy–p_Nxy, das sich an denselben Koordinaten (x, y) von N (N ist eine natürliche Zahl größer als 1) Bildern P₁–P_N befindet, und bestimmt, ob alle Luminanzen I_p1xy–I_pNxy größer als ihre Schwellenwerte T₁–T_N sind. Wenn alle diese Luminanzen größer sind, dann werden die entsprechenden Bildelemente p_1xy–p_Nxy jedes Bildes P₁–P_N mit ihren vorgegebenen Syntheseverhältnissen synthetisiert, wobei das Ergebnis der Synthese als die synthetisierten Bildelemente p_xy an den relevanten Koordinaten (x, y) des synthetisierten Bildes übernommen wird. Ansonsten werden von den entsprechenden Bildelementen p_1xy–p_Nxy der Bilder P₁–P_N nur die Bildelemente, die eine Luminanz I_p1xy–I_pNxy besitzen, die kleiner als die Schwellenwerte T₁–T_N sind, mit den beliebigen Syntheseverhältnissen synthetisiert, wobei die Ergebnisse der Synthese für jede Koordinate (x, y) im synthetisierten Bild als das synthetisierte Bildelement p_xy übernommen werden. Die Prozedur wird für jeden Bereich ausgeführt, der synthetisiert werden muss.
Außerdem ist die Erfindung ein Bildsyntheseverfahren, das N (N ist eine natürliche Zahl größer als 1) Videobilder V₁–V_N und M (M ist eine natürliche Zahl) Standbilder S₁–S_M synthetisiert. Wenn M gleich "1" ist, dann wird das relevante Standbild S₁ als das synthetisierte Standbild S übernommen, während, wenn M größer als "1" ist, dann die entsprechende Luminanz I_s1xy–I_sMxy derjenigen Bildelemente S_1xy–S_Nxy, die bei denselben Koordinaten (x, y) der M Standbilder liegen, mit der entsprechenden Schwellenluminanz T_s1–T_sM verglichen wird, die für jedes vorhergehende Standbild S₁–S_M vorgegeben worden ist, um festzustellen, ob alle Luminanzen I_s1xy–I_sMxy größer als ihre entsprechenden Schwellenwerte T_s1–T_sM sind. Wenn alle diese Luminanzen größer sind, dann werden die entsprechenden Bildelemente S_1xy–S_Mxy der vorausgehenden Standbilder S₁–S_M mit den vorgegebenen Syntheseverhältnissen synthetisiert, wobei das Ergebnis der Synthese als das synthetisierte Standbild-Bildelement s_xy an den relevanten Koordinaten (x, y) des synthetisierten Standbildes S übernommen wird. Ansonsten werden von den entsprechenden Bildelementen s_1xy–s_Mxy des vorausgehenden Standbildes S₁–S_M nur diejenigen mit Luminanzen I_s1xy–I_sMxy, die kleiner als die Schwellenwerte T₁–T_M oder gleich den Schwellenwerten T₁–T_M sind, mit ihren entsprechenden vorgegebenen Syntheseverhältnissen synthetisiert, wobei das Ergebnis der Synthese als das synthetisierte Standbild-Bildelement s_xy an den relevanten Koordinaten (x, y) des synthetisierten Standbildes S übernommen wird. Diese Prozedur wird für alle Bereiche wiederholt, die synthetisiert werden müssen, um das synthetisierte Standbild S zu erzeugen. Dann wird die entsprechende Luminanz I_v1xy–I_vNxy derjenigen Bildelemente v_1xy–v_Nxy, die bei denselben Koordinaten (x, y) der N Videobilder liegen, mit der entsprechenden Schwellenluminanz T_v1–T_sN verglichen, die für jedes vorausgehend erwähnte Videobild V₁–V_N vorgegeben worden sind, um festzustellen, ob alle Luminanzen (I_v1xy–I_vNxy größer als ihre entsprechenden Schwellenwerte T_v1–T_vN sind. Wenn alle diese Luminanzen größer sind, dann wird das synthetisierte Standbild-Bildelement s_xy, das sich an den relevanten Koordinaten (x, y) des vorausgehenden erwähnten synthetisierten Standbildes S befindet, als das synthetisierte Bildelement p_xy übernommen, das sich an den relevanten Koordinaten (x, y) des synthetisierten Bildes P befindet. Ansonsten werden dann von den entsprechenden Bildelementen v_1xy–v_Nxy der vorausgehend erwähnten Videobilder V₁–V_N nur diejenigen Bildelemente mit Luminanzen I_v1xy–I_vNxy, die kleiner als ihre Schwellenwerte T₁–T_M oder gleich ihren Schwellenwerten T₁–T_N sind, mit ihren beliebigen Syntheseverhältnissen synthetisiert, wobei das Ergebnis der Synthese als das synthetisierte Bildelement p_xy übernommen wird, das sich an den relevanten Koordinaten (x, y) im synthetisierten Bild P befindet. Diese Prozedur wird für alle Bereiche wiederholt, die synthetisiert werden müssen.
Außerdem ist die Erfindung ein Bildsyntheseverfahren, das N (N ist eine natürliche Zahl größer als 1) Videobilder V₁–V_N und M (M ist eine natürliche Zahl) Standbilder S₁–S_M synthetisiert. Wenn M gleich "1" ist, dann wird das relevante Standbild S₁ als das synthetisierte Standbild S übernommen, während, wenn M größer als "1" ist, dann die entsprechenden Luminanzen I_s1xy–I_sMxy derjenigen Bildelemente S_1xy–S_Mxy, die bei denselben Koordinaten (x, y) der M Standbilder liegen, verglichen werden, wobei das Bildelement mit der kleinsten Luminanz als das synthetisierte Standbild-Bildelement s_xy übernommen wird, das sich an den relevanten Koordinaten (x, y) des synthetisierten Standbildes S befindet. Diese Prozedur wird über alle Bereiche wiederholt, die synthetisiert werden müssen, wobei das Ergebnis das synthetisierte Standbild S ist. Dann wird die entsprechende Luminanz I_v1xy–I_vNxy derjenigen Bildelemente v_1xy–v_Nxy, die bei denselben Koordinaten (x, y) der N Videobilder V₁–V_N liegen, mit der entsprechenden Schwellenluminanz T_v1–T_vN verglichen, die für jedes vorausgehend erwähnte Videobild V₁–V_N vorgegeben worden ist, um festzustellen, ob alle Luminanzen I_v1xy–I_vNxy größer als ihre entsprechenden Schwellenwerte T_v1–T_vN sind. Wenn sie größer sind, dann wird das synthetisierte Standbild-Bildelement s_xy, das sich an den relevanten Koordinaten (x, y) im vorausgehend erwähnten synthetisierten Standbild S befindet, als das synthetisierte Bildelement p_xy übernommen, das sich an den relevanten Koordinaten (x, y) des synthetisierten Bildes P befindet. Ansonsten wird von den entsprechenden Bildelementen v_1xy–v_Nxy der vorausgehend erwähnten Videobilder V₁–V_N das Bildelement mit der niedrigsten Luminanz aus denjenigen Bildelementen mit Luminanzen I_v1xy–I_vNxy, die kleiner als ihre Schwellenwerte T_v1–T_vN oder gleich ihren Schwellenwerten T_v1–T_vN sind, als das synthetisierte Bildelement p_xy übernommen, das sich an den relevanten Koordinaten (x, y) im synthetisierten Bild P befindet. Diese Prozedur wird über alle Bereiche wiederholt, die synthetisiert werden müssen.
Außerdem ist die Erfindung ein Bildsyntheseverfahren, das N (N ist eine natürliche Zahl größer als 1) Videobilder V₁–V_N und M (M ist eine natürliche Zahl) Standbilder S₁–S_M synthetisiert. Wenn M gleich "1" ist, dann wird das relevante Standbild S₁ als das synthetisierte Standbild S übernommen, während, wenn M größer als "1" ist, dann die entsprechenden Luminanzen I_s1xy–I_sMxy derjenigen Bildelemente S_1xy–S_Mxy, die bei denselben Koordinaten (x, y) der M Standbilder liegen, verglichen werden, wobei das Bildelement mit der kleinsten Luminanz als das synthetisierte Standbild-Bildelement s_xy übernommen wird, das sich bei den relevanten Koordinaten (x, y) des synthetisierten Standbildes S befindet. Diese Prozedur wird über alle Bereiche wiederholt, die synthetisiert werden müssen, wobei das Ergebnis das synthetisierte Standbild S ist. Dann wird die entsprechende Luminanz I_v1xy–I_vNxy derjenigen Bildelemente v_1xy–v_Nxy, die bei denselben Koordinaten (x, y) der N Videobilder V₁–V_N liegen, verglichen, wobei das Bildelement mit der niedrigsten Luminanz ausgewählt wird. Wenn die Luminanz des Bildelements größer als der vorgegebene Schwellenwert ist, wird das synthetisierte Standbild-Bildelement s_xy, das bei den relevanten Koordinaten (x, y) des vorausgehenden erwähnten synthetisierten Standbildes S liegt, als das synthetisierte Bildelement p_xy übernommen, das bei den relevanten Koordinaten (x, y) des synthetisierten Bildes P liegt. Ansonsten wird dann das vorausgehend erwähnte Bildelement mit der niedrigsten Luminanz als das synthetisierte Bildelement p_xy übernommen, das bei den relevanten Koordinaten (x, y) des synthetisierten Bildes P liegt. Diese Prozedur wird für alle Bereiche wiederholt, die synthetisiert werden müssen.
Außerdem ist die Erfindung eine Vorrichtung zum Synthetisieren eines Bildes aus einer Mehrzahl von N Eingangsbildern P₁–P_N, die umfasst:
eine Vergleichseinrichtung zum Vergleichen der Luminanz I_p1xy–I_pNxy jedes Bildelements P_1xy–P_Nxy, das sich jeweils an denselben Koordinaten x, y jedes Eingangsbildes P₁–P_N befindet, mit einem Schwellenwert T₁–T_N, der jeweils für jedes Eingangsbild gegeben ist;
eine Synthetisierungseinrichtung zum Bestimmen der Luminanz eines synthetisierten Bildelements p_xy an der Koordinate x, y eines synthetisierten Bildes durch Synthetisieren der Bildelemente p_1xy–p_Nxy mit einem vorgegebenen Syntheseverhältnis, das für jedes der Eingangsbilder P₁–P_N gegeben ist, falls die Lumi nanz I_p1xy–I_pNxy aller Bildelemente p_1xy–p_Nxy größer als der entsprechende Schwellenwert T₁–T_N ist, oder Bestimmen der Luminanz des synthetisierten Bildelements p_xy an der Koordinate x, y durch Synthetisieren lediglich jener Bildelemente von den Bildelementen p_1xy–p_Nxy, deren Luminanz kleiner oder gleich dem entsprechenden Schwellenwert T₁–T_N ist, falls die obenbeschriebene Bedingung nicht erfüllt ist; und
eine Einrichtung zum Ausführen der obigen Prozedur für jeden Bildbereich, der synthetisiert werden soll.
Außerdem ist die vorliegende Erfindung eine Vorrichtung zum Synthetisieren eines Bildes aus N Videobildern und M Standbildern, wobei N eine natürliche Zahl größer als 1 ist und M eine natürliche Zahl ist, die umfasst:
eine Einrichtung zum Übernehmen des einzigen Standbildes S₁ als ein synthetisiertes Standbild S, falls M gleich 1 ist;
eine erste Vergleichseinrichtung zum Vergleichen der Luminanz I_s1xy–I_sMxy jedes Bildelements S_1xy–S_Mxy, das sich jeweils an denselben Koordinaten x, y der M Standbilder S₁–S_M befindet, mit einem vorgegebenen Schwellenwert T_s1–T_sM, der jeweils für jedes Standbild gegeben ist, falls M größer als 1 ist;
eine erste Synthetisierungseinrichtung zum Bestimmen eines synthetisierten Standbildelements s_xy an der Koordinate x, y eines synthetisierten Standbildes S;
eine Einrichtung zum Ausführen der obigen Prozedur für jeden Bildbereich, der synthetisiert werden soll;
eine zweite Vergleichseinrichtung zum Vergleichen der Luminanz I_v1xy–I_vNxy jedes Bildelements v_1xy–v_Nxy, das sich jeweils an denselben Koordinaten x, y der N Videobilder V₁–V_N befindet, mit einem vorgegebenen Schwellenwert T_v1–T_vN, der jeweils für jedes Videobild gegeben ist;
eine zweite Synthetisierungseinrichtung zum Übernehmen des synthetisierten Standbildelements s_xy an der Koordinate x, y des synthetisierten Standbildes S als ein synthetisiertes Bildelement p_xy an der Koordinate x, y eines synthetisierten Bildes P, falls die Luminanz I_v1xy–I_vNxy aller Bildelemente v_1xy–v_Nxy größer als der entsprechende Schwellenwert T_v1–T_vN ist, oder Bestimmen der Luminanz des synthetisierten Bildelements p_xy an der Koordinate x, y des synthetisierten Bildes P unter jenen Bildelementen v_1xy–v_Nxy, deren Luminanz kleiner oder gleich dem entsprechenden Schwellenwert T_v1–T_vN ist, falls die obenbeschriebene Bedingung nicht erfüllt ist; und
eine Einrichtung zum Ausführen der obigen Prozedur für jeden zu synthetisierenden Bildbereich.
Außerdem ist die vorliegende Erfindung eine Vorrichtung, bei der
die erste Vergleichseinrichtung erste Informationen ausgibt, falls die Luminanz I_s1xy–I_sMxy jeweils größer als der entsprechende Schwellenwert T_s1–T_sM ist, oder zweite Informationen bezüglich der Luminanzsignale ausgibt, die kleiner oder gleich dem entsprechenden Schwellenwert T_s1–T_sM sind, falls die obenbeschriebene Bedingung nicht erfüllt ist;
wobei die erste Synthetisierungseinrichtung das synthetisierte Standbild aus den Standbildern S₁–S_M mit einem vorgegebenen Syntheseverhältnis für jedes der Standbilder S₁–S_M synthetisiert, falls die ersten Informationen eingegeben werden, oder das synthetisierte Standbild aus den entsprechenden Bildern zu den zweiten Informationen mit beliebigem Verhältnis synthetisiert, falls die zweiten Informationen eingegeben werden;
wobei die zweite Vergleichseinrichtung dritte Informationen ausgibt, die angeben, dass die entsprechende Bedingung erfüllt ist, falls die Luminanz I_v1xy– I_vNxy jeweils größer als die entsprechende Schwellenluminanz T_v1–T_vN ist, oder vierte Informationen bezüglich der Luminanzsignale, die kleiner oder gleich der entsprechenden Schwellenluminanz T_v1–T_vN sind, ausgibt, falls die obenbeschriebene Bedingung nicht erfüllt ist; und
die zweite Synthetisierungseinrichtung das synthetisierte Standbild als ein synthetisiertes Bild ausgibt, falls die dritten Informationen eingegeben werden, und ein Bild ausgibt, das aus jenem der Bilder V₁–V_N mit beliebigem Verhältnis synthetisiert ist, das den vierten Informationen entsprechende Luminanzsignale besitzt, falls die obenbeschriebene Bedingung nicht erfüllt ist.
Bei der Verwendung der vorliegenden Erfindung vergrößert sich die Klarheit von Text und Zeichnungen in gemeinsam benutzten Arbeitsräumen; insbesondere kann, wenn das Dokument als ein Standbild verwendet wird, der Abfall im Kontrast beseitigt werden. Außerdem gibt es insbesondere in dem Fall, wenn mehrere Videobilder synthetisiert werden, weil eine ähnliche Zunahme im Kontrast möglich ist, den Vorteil, dass ein an mehreren Orten gemeinsam benutzter Arbeitsraum erzeugt werden kann, indem mehrere Punkte verbunden werden und mehrere Arbeitsplatz-Bilder synthetisiert werden. Es gibt außerdem den Vorteil, dass ein gemeinsam benutzter Arbeitsraum möglich ist, in dem es nicht notwendig ist, den Text direkt in das Standbild zu schreiben.
Kurzbeschreibung der Zeichnung
1 ist ein Ablaufplan, der das Bildsyntheseverfahren der Ausführungsform 1 der vorliegenden Erfindung zeigt.
2 ist ein Ablaufplan, um die Prozedur in dem Fall zu zeigen, in dem zwei Bilder P₁ und P₂ unter Verwendung der Ausführungsform 1 der vorliegenden Erfindung synthetisiert werden.
3 ist eine graphische Darstellung, die die Art zeigt, in der zwei Bilder P₁ und P₂ unter Verwendung der Ausführungsform 1 der vorliegenden Erfindung synthetisiert werden.
4 ist ein Ablaufplan, um das Bildsyntheseverfahren der Ausführungsform 2 der vorliegenden Erfindung zu erklären.
5A ist ein Ablaufplan, um das Bildsyntheseverfahren der Ausführungsform 3 der vorliegenden Findung zu erklären.
5B ist ein Ablaufplan, um das Bildsyntheseverfahren der Ausführungsform 3 der vorliegenden Findung zu erklären.
5C ist ein Ablaufplan, um das Bildsyntheseverfahren der Ausführungsform 3 der vorliegenden Findung zu erklären.
5D ist ein Ablaufplan, um das Bildsyntheseverfahren der Ausführungsform 3 der vorliegenden Findung zu erklären.
5E ist ein Ablaufplan, um das Bildsyntheseverfahren der Ausführungsform 3 der vorliegenden Findung zu erklären.
6 ist ein Ablaufplan, der die Prozedur in dem Fall zeigt, in dem zwei Videobilder V₁ und V₂ und ein einzelnes Standbild S unter Verwendung der Ausführungsform 3 der vorliegenden Erfindung synthetisiert werden.
7A ist ein Ablaufplan, der die Prozedur in dem Fall zeigt, in dem N Videobilder V₁–V_N und ein einzelnes Standbild S unter Verwendung der Ausführungsform 3 der vorliegenden Erfindung synthetisiert werden.
7B ist ein Ablaufplan, der die Prozedur in dem Fall zeigt, in dem N Videobilder V₁–V_N und ein einzelnes Standbild S unter Verwendung der Ausführungsform 3 der vorliegenden Erfindung synthetisiert werden.
7C ist ein Ablaufplan, der die Prozedur in dem Fall zeigt, in dem N Videobilder V₁–V_N und ein einzelnes Standbild S unter Verwendung der Ausführungsform 3 der vorliegenden Erfindung synthetisiert werden.
7D ist ein Ablaufplan, der die Prozedur in dem Fall zeigt, in dem N Videobilder V₁–V_N und ein einzelnes Standbild S unter Verwendung der Ausführungsform 3 der vorliegenden Erfindung synthetisiert werden.
8A ist ein Ablaufplan, um das Bildsyntheseverfahren der Ausführungsform 4 der vorliegenden Erfindung zu erklären.
8B ist ein Ablaufplan, um das Bildsyntheseverfahren der Ausführungsform 4 der vorliegenden Erfindung zu erklären.
9 ist ein Ablaufplan, um das Bildsyntheseverfahren der Ausführungsform 5 der vorliegenden Erfindung zu erklären.
10 ist ein Blockschaltplan, um die Bildsynthesevorrichtung der Ausführungsform 6 der vorliegenden Erfindung zu erklären.
11 ist ein Blockschaltplan, um die Bildsynthesevorrichtung der Ausführungsform 7 der vorliegenden Erfindung zu erklären.
12 ist ein Blockschaltplan, der ein strukturelles Beispiel des Bildkommunikationssystems zeigt, das von der in der Ausführungsform 7 der vorliegenden Erfindung beschriebenen Bildsynthesevorrichtung Gebrauch macht.
13 ist eine graphische Darstellung, um die Synthese der Arbeitsplatz-Bilder jedes Bildkommunikations-Endgerätes 41a und 41b unter Verwendung des in 12 gezeigten Bildkommunikationssystems zu erklären.
14 ist ein Blockschaltplan, der die Struktur der in der Ausführungsform 8 der vorliegenden Erfindung beschriebenen Bildsynthesevorrichtung zeigt.
15 ist ein Blockschaltplan, der die Struktur der in der Ausführungsform 8 der vorliegenden Erfindung beschriebenen Bildsynthesevorrichtung zeigt, die zwei Bilder P₁ und P₂ synthetisiert.
16 ist ein Blockschaltplan, der ein strukturelles Beispiel eines Bildkommunikationssystems zeigt, das von der in 15 gezeigten Bildsynthesevorrichtung Gebrauch macht.
17 ist eine graphische Darstellung, um die Synthese der Arbeitsplatz-Bilder jedes Bildkommunikations-Endgerätes 62a und 62b unter Verwendung des in der graphischen Darstellung 16 gezeigten Bildkommunikationssystems zu erklären.
18 ist ein Blockschaltplan, der die Struktur der in der Ausführungsform 9 der vorliegenden Erfindung beschriebenen Bildsynthesevorrichtung zeigt.
19 ist ein Blockschaltplan, der die Struktur der in der Ausführungsform 10 der vorliegenden Erfindung beschriebenen Bildsynthesevorrichtung zeigt.
20 ist ein Blockschaltplan, der ein strukturelles Beispiel des Bildkommunikationssystems zeigt, das von der in der Ausführungsform 10 der vorliegenden Erfindung beschriebenen Bildsynthesevorrichtung Gebrauch macht.
21 ist eine graphische Darstellung, um die Synthese der Arbeitsplatz-Bilder jedes Bildkommunikations-Endgerätes 101a und 101b unter Verwendung des in der graphischen Darstellung 20 gezeigten Bildkommunikationssystems zu erklären.
22 ist ein Blockschaltplan, der die Struktur der in der Ausführungsform 11 der vorliegenden Erfindung beschriebenen Bildsynthesevorrichtung zeigt.
23 ist ein Blockschaltplan, der die Struktur der in der Ausführungsform 12 der vorliegenden Erfindung beschriebenen Bildsynthesevorrichtung zeigt.
24 ist ein Blockschaltplan, der ein strukturelles Beispiel des Bildkommunika tionssystems zeigt, das das ältere Bildsyntheseverfahren 1 verwendet.
25 ist eine graphische Darstellung, um das ältere Bildsyntheseverfahren 1 zu erklären.
26 ist Ablaufplan, um das ältere Bildsyntheseverfahren 1 zu erklären.
27 ist eine graphische Darstellung, die symbolisch zeigt, wie ein durchscheinend synthetisiertes Bild durch das ältere Bildsyntheseverfahren 1 erzeugt wird.
28 ist ein Blockschaltplan, der ein strukturelles Beispiel eines Bildkommunikationssystems zeigt, das das ältere Bildsyntheseverfahren 2 verwendet.
29 ist eine graphische Darstellung, um das ältere Bildsyntheseverfahren 2 zu erklären.
Ausführliche Beschreibung der Erfindung
Das Folgende ist eine Erklärung der Ausführungsformen der Erfindung unter Verwendung der Figuren als Führer.
Die Ausführungsform 1
Zuerst wird eine Erklärung der ersten Ausführungsform der Erfindung gegeben. Hinsichtlich der Ausführungsform 1 werden N (N ist eine natürliche Zahl größer als 1) Bilder P₁–P_N, die aus (X × Y) Bildelementen (X und Y sind natürliche Zahlen) bestehen, in einem Verhältnis W1 : W2 : ... : W_N–1: W_N (mit der Bedingung, dass W₁ + w₂ + ... + W_N–1 + W_N = 1; W₁, W₂, ... + W_N–1, W_N > 0) gilt, gemischt, wobei ein synthetisiertes Bild gebildet wird. In diesem Fall wird das Bildelement, das jeder Koordinate (x, y) (1 ≤ x ≤ X, 1 ≤ y ≤ Y, wobei x und y natürliche Zahlen sind) in jedem Bild P_n (1 ≤ n ≤ N, n ist eine natürliche Zahl) entspricht, als P_nxy bezeichnet, wobei jedem derartigen Bildelement p_nxy eine Luminanz I_pnxy (0 ≤ I_pnxy ≤ 1, wobei 0 = schwarz, 1 = weiß gilt) gegeben ist. Außerdem wird für jedes Bild P_n die Schwellenluminanz T_n (0 ≤ T_n ≤ 1) für jedes Bildelement gesetzt.
Es nächstes wird das Bildsyntheseverfahren der ersten Ausführungsform der Erfindung unter Bezugnahme auf den in 1 gezeigten Ablaufplan erklärt. Zuerst wird im Schritt SB1 das Register für die y-Koordinaten auf "1" als einen Anfangswert gesetzt, gleichermaßen wird im Schritt SB2 das Register für die x-Koordinaten auf "1" gesetzt. Als Nächstes wird im Schritt SB3 der Anfangswert der Variable n, die die Reihenfolge der Bilder P anzeigt, auf "1" gesetzt, der Wert der Variable c, die die Anzahl der Bildelemente darstellt, die eine Luminanz besitzen, die größer als der oder gleich dem Schwellenwert T_n ist, wird auf "0" gesetzt und der Wert von w, das die Summe der Syntheseverhältnisse der Bildelemente ist, die eine Luminanz besitzen, die größer als der oder gleich dem Schwellenwert T_n ist, wird auf "0" gesetzt, wobei dann die Prozedur zum Schritt SB4 weitergeht.
Im Schritt SB4 wird bestimmt, ob die Luminanz I_pnxy des Bildelements p_nxy, das sich an den Koordinaten (x, y) des relevanten Bildes P_n befindet, größer als der oder gleich dem Schwellenwert T_n ist. Wenn die Antwort "JA" lautet, dann geht die Prozedur zum Schritt SB5 weiter.
Im Schritt SB5 geht, nachdem zur Variable c "1" addiert worden ist, dann die Prozedur zum Schritt SB6 weiter, wo das Syntheseverhältnis des relevanten Bildelements p_nxy zur Summe der Syntheseverhältnissen w addiert wird, wobei die Prozedur zum Schritt SB7 weitergeht. Falls außerdem das Ergebnis des Schrittes SB4 "NEIN" lautet, d. h., falls die Luminanz I_pnxy des Bildelements p_nxy kleiner als der Schwellenwert T_n ist, geht die Prozedur ebenfalls zum Schritt SB7.
Im Schritt SB7 wird zur Variable n "1" addiert, wobei im Schritt SB8 bestimmt wird, ob die Variable n größer als die Anzahl der Bilder N ist. Wenn die Antwort "NEIN" lautet, dann kehrt die Prozedur zum Schritt SB4 zurück. Dann werden die Schritte SB4–SB7 unter Verwendung jedes Bildelements p_nxy wiederholt, das den Koordinaten (x, y) in allen Bildern entspricht. Folglich werden für die Koordinaten (x, y) in jedem Bild P_n die Anzahl c der Bildelemente p_nxy, die eine Luminanz I_pnxy besitzen, die größer als der oder gleich dem Schwellenwert T_n ist, und die Summe der Syntheseverhältnisse w berechnet. Dann ist die Prozedur vom Schritt SB4 bis SB7, die jedes Bildelement p_nxy betrachtet, das bei den Koordinaten (x, y) jedes Bildes liegt, abgeschlossen. Der Wert der Variable n wird größer als N, das Ergebnis des Schrittes SB8 wird "JA" und die Prozedur geht zum Schritt SB9 weiter.
Im Schritt SB9 wird der Anfangswert der Variable n auf "1" gesetzt, während der Anfangswert von p, das den synthetisierten Wert der N Bildelemente p_nxy anzeigt, die sich an den Koordinaten (x, y) der N Bilder befinden, auf "0" gesetzt wird.
Im Schritt SB10 wird bestimmt, ob die Variable c gleich "0" oder gleich N ist, d. h., ob die Luminanzen aller N Bildelemente, die sich an den Koordinaten (x, y) der N Bilder befinden, kleiner als der Schwellenwert T_n (c = 0) sind, oder ob sie sonst größer als der oder gleich dem Schwellenwert T_n (c = N) sind. Wenn das Ergebnis "JA" lautet, dann geht die Prozedur zum Schritt SB11 weiter.
Im Schritt SB11 wird p unter Verwendung der Gleichung (2) konstruiert, wobei die Prozedur zum Schritt SB12 weitergeht. p = p + wnpnxy (2)
Im Schritt SB12 wird zur Variable n "1" addiert, während im Schritt SB13 bestimmt wird, ob die Variable n größer als die Anzahl N der Bilder ist. Wenn die Antwort "NEIN" lautet, dann kehrt die Prozedur zum Schritt SB11 zurück. Dann werden die Prozeduren von SB11 und SB12 mit jedem Bildelement p_nxy wiederholt, das sich an jeder Koordinate (x, y) aller Bilder befindet. Folglich werden alle Bildelemente p_nxy, die jeder Koordinate (x, y) in jedem Bild mit einem Verhältnis w_n entsprechen, kombiniert. Dann schließt jedes Bildelement p_nxy, das den Koordinaten (x, y) in allen Bildern entspricht, die Prozedur in den Schritten SB11 und SB12 ab, wobei, wenn der Wert der Variable n größer als N wird, das Ergebnis des Schrittes SB13 "JA" wird, wobei die Prozedur zum Schritt SB19 weitergeht.
Wenn andererseits das Ergebnis des Schrittes SB10 "NEIN" lautet, d. h., falls die Variable c weder gleich "0" noch gleich N ist, dann geht die Prozedur zum Schritt SB14 weiter. Im Schritt SB14 wird der Mittelwert W (= w/c) des Syntheseverhältnisses in Bezug auf die Bildelemente berechnet, die eine Luminanz besitzen, die größer als der oder gleich dem Schwellenwert T_n ist, wobei im Schritt SB15 bestimmt wird, ob die Luminanz I_pnxy jedes Bildelements p_nxy, das sich an den Koordinaten (x, y) des relevanten Bildes P_n befindet, kleiner als der Schwellenwert T_n ist. Falls die Antwort "JA" lautet, geht die Prozedur zum Schritt SB16 weiter.
Im Schritt SB16 wird p unter Verwendung der Gleichung (3) erzeugt, wobei die Prozedur zum Schritt SB17 weitergeht. p = p + (W + wn)pnxy (3)
Selbstverständlich geht die Prozedur außerdem zum Schritt SB17 weiter, falls das Ergebnis des Schrittes SB15 "NEIN" lautet, was bedeutet, dass die Luminanz I_pnxy des Bildelements p_nxy nicht kleiner als der Schwellenwert T_n ist.
Im Schritt SB17 wird zur Variable n "1" addiert, während im Schritt SB18 bestimmt wird, ob die Variable n größer als die Anzahl N der Bilder ist. Falls die Antwort "NEIN" lautet, kehrt die Prozedur zum Schritt SB15 zurück. Dann wird die Prozedur der Schritte SB15–SB17 mit jedem Bildelement p_nxy wiederholt, das jeder Koordinate (x, y) im Bild entspricht. Folglich ist die Prozedur vom Schritt SB15 bis zum Schritt SB17 für jedes Bildelement p_nxy abgeschlossen, das jeder Koordinate (x, y) im Bild entspricht. Falls der Wert der Variable n größer als N wird, wird das Ergebnis des Schrittes SB18 "JA", wobei die Prozedur zum Schritt SB19 weitergeht.
Im Schritt SB19 wird das Bildelement p_xy, das den Koordinaten (x, y) des synthetisierten Bildes P entspricht, gleich p gesetzt, wobei die Prozedur dann zum Schritt SB20 weitergeht. Im Schritt 20 wird zum Wert des Registers x "1" addiert. Im Schritt SB21 wird bestimmt, ob der Wert des Registers x größer als sein Maximalwert X ist, und falls die Antwort "NEIN" lautet, kehrt die Prozedur zum Schritt SB3 zurück. Dann wird die Prozedur der Schritte SB3–SB20 wiederholt, bis der Wert des Registers x größer als sein Maximalwert X wird. Wenn der Wert des Registers x größer als der Maximalwert wird und die Bestimmung des Schrittes SB21 "JA" wird, dann wird zum Schritt SB22 weitergegangen. Im Schritt SB22 wird zum Wert des Registers y "1" addiert. Im Schritt SB23 wird bestimmt, ob der Wert des Registers y größer als der Maximalwert Y ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SB2 zurückkehrt. Dann wird die Prozedur der Schritte SB2–SB22 wiederholt, bis der Wert des Registers y größer als der Maximalwert Y wird. Wenn der Wert des Registers y größer als der Maximalwert Y wird und das Ergebnis des Schrittes SB23 "JA" wird, dann endet die Prozedur.
In der oben erwähnten Ausführungsform 1 wurde, wenn Bildelemente synthetisiert werden, ein Beispiel verwendet, in dem die Syntheseverhältnisse der nicht synthetisierten Bildelemente gemittelt und verteilt worden (die Prozedur im Schritt SB16), aber unter Verwendung der Gleichung (4) ist es möglich, das Syntheseverhältnis der nicht synthetisierten Bildelemente proportional zum Syntheseverhältnis der synthetisierten Bildelemente zu verteilen.
Als Nächstes wird hinsichtlich der oben erwähnten Ausführungsform 1, falls N = 2 gilt, d. h., in dem Fall, in dem es zwei Bilder P₁ und P₂ gibt, die zu synthetisieren sind, die Prozedur mit Hilfe des Ablaufplans erklärt, der in 2 gegeben ist. Zuerst wird im Schritt SC1 das Register zum Verändern der y-Koordinaten auf einen Anfangswert "1" gesetzt, während im Schritt SC2 der Anfangswert des Registers zum Verändern der x-Koordinate ebenfalls auf "1" gesetzt wird. Als Nächstes wird im Schritt SC3 bestimmt, ob die Luminanz I_p1xy des Bildelements p_1xy, das sich an den Koordinaten (x, y) im Bild P₁ befindet, größer als der oder gleich dem Schwellenwert T₁ ist und ob die Luminanz I_p2xy des Bildelements p_2xy, das sich an den Koordinaten (x, y) des Bildes P₂ befindet, kleiner als der Schwellenwert T₂ ist. Wenn das Ergebnis "JA" lautet, dann geht die Prozedur zum Schritt SC4 weiter.
Im Schritt SC4 wird das synthetisierte Bildelement p_xy, das den Koordinaten (x, y) im synthetisierten Bild P entspricht, gleich dem Bildelement p_2xy des Bildes P₂ gesetzt, wobei dann die Prozedur zum Schritt SC8 weitergeht.
Wenn das Ergebnis des Schrittes SC3 "NEIN" lautet, d. h., wenn die Luminanz I_p1xy des Bildelements p_1xy kleiner als der Schwellenwert T₁ ist oder wenn die Luminanz I_p2xy des Bildelements p_2xy größer als der oder gleich dem Schwellenwert T₂ ist, dann geht die Prozedur zum Schritt SC5 weiter.
Im Schritt SC5 wird bestimmt, ob die Luminanz I_p1xy des Bildelements p_1xy kleiner als der Schwellenwert T₁ ist und ob die Luminanz I_p2xy des Bildelements p_2xy größer als der oder gleich dem Schwellenwert T₂ ist. Wenn das Ergebnis "JA" lautet, dann geht die Prozedur zum Schritt SC6 weiter. Im Schritt SC6 wird das synthetisierte Bildelement p_xy gleich dem Bildelement p_1xy gesetzt, wobei die Prozedur zum Schritt SC8 weitergeht.
Wenn andererseits das Ergebnis im Schritt SC5 "NEIN" lautet, d. h., wenn die Luminanz I_p1xy des Bildelements p_1xy größer als der oder gleich dem Schwellenwert T₁ ist oder die Luminanz I_p2xy des Bildelements p_2xy kleiner als der Schwellenwert T₂ ist, dann geht die Prozedur zum Schritt SC7 weiter. Im Schritt SC7 wird das synthetisierte Bildelement p_xy unter Verwendung der Gleichung (5) kon struiert, wobei die Prozedur dann zum Schritt SC8 weitergeht. pxy = w1p1xy + w2p2xy (5)
Im Schritt SC8 wird zum Wert des Registers x "1" addiert. Im Schritt SC9 wird bestimmt, ob der Wert des Registers x größer als der Maximalwert X ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SC3 zurückkehrt. Dann wird die Prozedur in den Schritten SC3–SC8 wiederholt, bis der Wert des Registers größer als der Maximalwert X ist. Wenn der Wert des Registers x größer als das Maximum X wird und das Ergebnis des Schrittes SC9 "JA" wird, dann geht die Prozedur zum Schritt SC10 weiter.
Im Schritt SC10 wird zum Wert des Registers y "1" addiert. Im Schritt SC11 wird bestimmt, ob der Wert des Registers y größer als der Maximalwert Y ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SC2 zurückkehrt. Dann wird die Prozedur in den Schritten SC2–SC10 wiederholt, bis der Wert des Registers größer als der Maximalwert Y ist. Wenn der Wert des Registers y größer als das Maximum Y wird und das Ergebnis des Schrittes SC11 "JA" wird, dann endet die Prozedur.
3 zeigt symbolisch, wie ein synthetisiertes Bild P aus zwei Bildern P₁ und P₂ unter Verwendung des oben in der Ausführungsform 1 beschriebenen Bildsyntheseverfahrens konstruiert wird. In 3 kann ein synthetisiertes Bild mit deutlichem Kontrast erhalten werden, wenn das Bild 20a und das Bild 20b mit einem Syntheseverhältnis von 0,5 : 0,5 synthetisiert werden, wobei dem Ablaufplan in 2 gefolgt wird. In dieser Ausführungsform, wie im Gegensatz zu 27 klar ist, werden die Bildelemente, die durch das Synthetisieren weißer Bildelemente mit schwarzen Bildelementen hergestellt werden, nicht grau, wobei sie schwarze Bildelemente werden, wobei die Verringerung des Kontrasts vermieden werden kann.
Das oben in der Ausführungsform 1 erwähnte Bildsyntheseverfahren kann als ein Programm geschrieben sein, in einer Speichervorrichtung, wie z. B. einem ROM, gespeichert sein und durch eine CPU ausgeführt werden, es ist aber außerdem möglich, es in Hardware zu bauen.
Die Ausführungsform 2 (sie wird nicht als Teil der Erfindung betrachtet)
Als Nächstes wird die zweite Ausführungsform erklärt. Hinsichtlich der Ausführungsform 2 wird, wenn die N (N ist eine natürliche Zahl größer als 1) Bilder P₁ bis P_N, von denen jedes aus (X × Y) Bildelementen besteht (X und Y sind beides natürliche Zahlen), synthetisiert werden, das synthetisierten Bild P konstruiert, indem das Bildelement mit der niedrigsten Luminanz unter denjenigen Bildelementen, die bei denselben Koordinaten liegen, der Bilder P₁ bis P_N übernommen wird, um das synthetisierte Bildelement zu sein. In diesem Fall wird das Bildelement, das bei den Koordinaten (x, y) (1 ≤ x ≤ X, 1 ≤ y ≤ Y, x und y sind natürliche Zahlen) in jedem Bild P_n (1 ≤ nx ≤ N, n ist eine natürliche Zahl) liegt, als das Bildelement p_nxy bezeichnet, während die Luminanz des Bildelements p_nxy als I_pnxy (0 ≤ I_pnxy ≤ 1, wobei 0 = schwarz, 1 = weiß gilt) bezeichnet wird.
Als Nächstes wird das Bildsyntheseverfahren der zweiten Ausführungsform unter Verwendung des Ablaufplans in 4 als eine Referenz erklärt. Zuerst wird im Schritt SD1 der Anfangswert des Registers y, das verwendet wird, um die y-Koordinaten zu verändern, auf "1" gesetzt, während im Schritt SD2 der Anfangswert des Registers x, das die x-Koordinaten verändert, auf "1" gesetzt wird. Als Nächstes wird im Schritt SD3 der Anfangswert der Variable n, die die Reihenfolge der Bilder anzeigt, auf "2" gesetzt, der Anfangswert der niedrigsten Luminanz i wird gleich der Luminanz I_p1xy des Bildelements p_1xy gesetzt und der Anfangswert von p, das den Wert des synthetisierten Bildelements anzeigt, wird gleich dem Bildelement p_1xy gesetzt, wobei dann die Prozedur zum Schritt SD4 weitergeht.
Im Schritt SD4 wird bestimmt, ob die Luminanz I_pnxy des relevanten Bildelements p_nxy kleiner als die Luminanz i ist. Wenn das Ergebnis "JA" lautet, dann geht die Prozedur zum Schritt SD5 weiter. Im Schritt SD5 geht, nachdem die Luminanz i gleich der Luminanz I_pnxy gesetzt worden ist, die Prozedur zum Schritt SD6. Im Schritt SD6 wird p gleich dem Bildelement p_nxy gesetzt, wobei die Prozedur zum Schritt SD7 weitergeht.
Im Schritt SD7 wird zur Variable n "1" addiert, wobei im Schritt SD8 bestimmt wird, ob die Variable n größer als die Anzahl der Bilder N ist; wenn das Ergebnis "NEIN" lautet, dann geht die Prozedur zurück zum Schritt SD4. Dann wird die Prozedur in den Schritten SD4–SD7 mit jedem Bildelement p_nxy, das sich an den Koordinaten (x, y) für alle Bilder befindet, wiederholt. Dann wird für jedes Bildelement p_nxy, das sich an den Koordinaten (x, y) für alle Bilder befindet, die obige Prozedur von den Schritten SD4 bis SD7 abgeschlossen, der Wert der Variable n wird größer als N, das Ergebnis des Schrittes SD8 wird "JA" und die Prozedur geht zum Schritt SD9 weiter.
Im Schritt SD9 wird das synthetisierte Bildelement p_xy, das sich an den Koordinaten (x, y) im synthetisierten Bild P befindet, gleich p gesetzt, wobei dann die Prozedur zum Schritt SD10 weitergeht. Im Schritt SD10 wird zum Wert des Registers x "1" addiert. Im Schritt SD11 wird bestimmt, ob der Wert des Registers x größer als der Maximalwert X wird, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SD3 zurückkehrt. Dann wird die Prozedur vom Schritt SD3 bis zum Schritt SD10 wiederholt, bis der Wert des Registers x größer als der Maximalwert X wird. Wenn das Register x größer als das Maximum X wird und das Ergebnis im Schritt SD11 "JA" wird, dann geht die Prozedur zum Schritt SD12 weiter. Im Schritt SD12 wird zum Wert des Registers y "1" addiert. Im Schritt SD13 wird bestimmt, ob der Wert des Registers y größer als der Maximalwert Y ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SD2 zurückkehrt. Dann wird die Prozedur in den Schritten SD2–SD12 wiederholt, bis das Register y größer als das Maximum Y wird. Wenn der Wert des Registers y größer als das Maximum Y wird, wird das Ergebnis im Schritt SD13 "JA", wobei die Prozedur endet.
Selbstverständlich kann das oben in der Ausführungsform 2 erwähnte Bildsyntheseverfahren als ein Programm geschrieben sein, in einer Speichervorrichtung, wie z. B. einem ROM, gespeichert sein und durch eine CPU ausgeführt werden, es ist aber außerdem möglich, es in Hardware zu bauen.
Die Ausführungsform 3
Als Nächstes wird die dritte Ausführungsform der Erfindung erklärt. In der Ausführungsform 3 wird das synthetisierte Bild P durch das Synthetisieren von N (N ist eine natürliche Zahl größer als 1) Videobildern V₁ bis V_N und M (M ist eine natürliche Zahl) Standbildern S₁ bis S_M, von denen jedes aus (X × Y) (X und Y sind natürliche Zahlen) Bildelementen besteht, mit beliebigen Syntheseverhältnissen konstruiert.
Zuerst wird ein synthetisiertes Standbild konstruiert, indem M Standbilder S₁ bis S_M, die jedes aus (X × Y) (X und Y sind natürliche Zahlen) Bildelementen bestehen, mit ihren entsprechenden Syntheseverhältnissen von w_s1 : w_s2: ... ws_(M–1) : w_sM (mit den Bedingungen, dass w_s1 + w_s2 + ... + w_s(M–1) + w_sM = 1; w_s1+ w_s2, ..., w_s(M–1), w_sM ≥ 0 gilt) synthetisiert werden. In diesem Fall werden die Bildelemente, die sich an den Koordinaten (x, y) (1 ≤ x ≤ X, 1 ≤ y ≤ Y, x und y sind natürliche Zahlen) in jedem Standbild S_m (11 ≤ n ≤ M, m ist eine natürliche Zahl) und im synthetisierten Standbild S befinden, als s_mxy bzw. s_xy bezeichnet, während die Luminanz des Bildelements s_mxy als I_smxy (01 ≤ I_smxy ≤ 1; wobei 0 = schwarz, 1 = weiß gilt) bezeichnet wird. Außerdem wird für jedes Standbild S_m ein Schwellenwert T_sm (01 ≤ T_sm ≤ 1) für die Bildelement-Luminanz gesetzt.
Als Nächstes wird ein synthetisiertes Videobild konstruiert, indem N Videobilder V₁ bis V_N, von denen jedes aus (X × Y) Bildelementen besteht, mit ihren entsprechenden Syntheseverhältnissen w_v1 : w_v2 : ... : w_v(N-1) : w_vN (mit den Bedingungen, dass w_v1 + w_v2 + ... + w_v(N–1) + w_vN = 1; w_v1, w_v2,..., w_v(N–1), w_vN ≥ 0 gilt) synthetisiert werden. In diesem Fall werden die Bildelemente, die sich an den Koordinaten (x, y) in jedem Videobild V_n (11 ≤ n ≤ N, n ist eine natürliche Zahl) befinden, als vnxy bezeichnet, während die Luminanz des Bildelements vnxy als I_vnxy (01 ≤ I_vnxy ≤ 1; wobei 0 = schwarz, 1 = weiß gilt) bezeichnet wird. Außerdem wird für jedes Videobild V_n ein Schwellenwert T_vn (01 ≤ T_vn ≤ 1) für die Bildelement-Luminanz gesetzt.
Als Nächstes wird das in der dritten Ausführungsform dieser Erfindung verwendete Bildsyntheseverfahren unter Verwendung der Ablaufpläne in den 5A bis 5E als Referenzen erklärt. Zuerst wird im Schritt SE1 bestimmt, ob M gleich "1" ist, d. h., ob es nur ein Standbild gibt. Wenn das Ergebnis "NEIN" lautet, dann geht die Prozedur zum Schritt SE2 weiter. Im Schritt SE2 wird der Anfangswert des Registers y, das die y-Koordinaten verändert, auf "1" gesetzt, während im Schritt SE3 der Anfangswert des Registers x, das die x-Koordinaten verändert, auf "1" gesetzt wird. Als Nächstes wird im Schritt SE4 der Anfangswert der Variable m, die die Reihenfolge der Standbilder anzeigt, auf "1" gesetzt, der Anfangswert der Variable c, die die Anzahl der Bildelemente mit einer Luminanz darstellt, die größer als der oder gleich dem Schwellenwert T_sm ist, wird auf "0" gesetzt, der Anfangswert der Summe w der Syntheseverhältnisse der Bildelemente, die eine Luminanz besitzen, die größer als der oder gleich dem Schwellenwert T_sm ist, wird auf "0" gesetzt und dann geht die Prozedur zum Schritt SE5 weiter.
Im Schritt SE5 wird bestimmt, ob die Luminanz I_smxy des Bildelements s_mxy, das sich an den Koordinaten (x, y) im relevanten Standbild S_m befindet, größer als der oder gleich dem Schwellenwert T_sm ist. Wenn das Ergebnis "JA" lautet, dann geht die Prozedur zum Schritt SE6 weiter.
Im Schritt SE6 wird zur Variable c "1" addiert. Im Schritt SE7 wird das Syntheseverhältnis w_sm des relevanten Bildelements s_mxy zum Gesamtsyntheseverhältnis w addiert, wobei dann die Prozedur zum Schritt SE8 weitergeht. Wenn das Ergebnis des Schrittes SE5 "NEIN" lautet, d. h., wenn die Luminanz I_smxy des Bildelements s_mxy kleiner als der Schwellenwert T_sm ist, dann geht die Prozedur ebenso zum Schritt SE8 weiter.
Schritt SE8 wird zur Variable m "1" addiert, während im Schritt SE9 bestimmt wird, ob die Variable m größer als die Anzahl M der Bilder ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SE5 zurückkehrt. Dann wird die Prozedur in den Schritten SE5–SE8 für jedes Bildelement s_mxy, das sich an den Koordinaten (x, y) in jedem Standbild befindet, wiederholt. Das heißt, für die Koordinaten (x, y) in jedem Standbild S_m werden die Anzahl c der Bildelemente s_mxy, die eine Luminanz I_smxy besitzen, die größer als der oder gleich dem Schwellenwert T_sm ist, und die Summe w ihrer Syntheseverhältnisse berechnet. Dann endet für jedes Bildelement s_mxy, das sich an den Koordinaten (x, y) für jedes Standbild befindet, die oben in den Schritten SE5–SE8 angegebene Prozedur, der Wert der Variable m wird größer als M, das Ergebnis im Schritt SE9 wird "JA" und die Prozedur geht zum Schritt SE10 weiter.
Im Schritt SE10 wird der Anfangswert der Variable m auf "1" gesetzt, während der Anfangswert von s, die den Wert der Synthese der M Bildelemente s_mxy, die sich an den Koordinaten (x, y) in den M Standbildern befinden, anzeigt, auf "0" gesetzt wird. Im Schritt SE11 wird bestimmt, ob die Variable c gleich "0" ist oder ob sie gleich M ist; d. h., ob die Luminanzen der M Bildelemente, die sich an den Koordinaten (x, y) der M Standbilder befinden, kleiner als der Schwellenwert T_sm sind (c = 0) oder ob sie sonst größer als der oder gleich dem Schwellenwert T_sm sind (c = M). Wenn die Antwort "JA" lautet, dann geht die Prozedur zum Schritt SE12 weiter. Im Schritt SE12 wird unter Verwendung der Gleichung (6) s erzeugt, wobei dann die Prozedur zum Schritt SE13 weitergeht. S = S + wsmsmxy (6)
Im Schritt SE13 wird zur Variable m "1" addiert, während im Schritt SE14 bestimmt wird, ob die Variable m größer als die Anzahl M der Standbilder ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SE12 zurückkehrt. Dann wird die Prozedur in den Schritten SE12 und SE13 für jedes Bildelement s_mxy, das sich an den Koordinaten (x, y) für jedes Standbild befindet, wiederholt. Das heißt, alle Bildelemente s_mxy, die sich an den Koordinaten (x, y) in jedem Standbild befinden, werden mit ihren entsprechenden Verhältnissen w_sm synthetisiert. Dann endet die oben in den Schritten SE12 und SE13 angegebene Prozedur für jedes Bildelement s_mxy, das sich an den Koordinaten (x, y) für jedes Standbild befindet, der Wert der Variable m wird größer als M, das Ergebnis des Schrittes SE14 wird "JA" und die Prozedur geht zum Schritt SE20 weiter.
Wenn andererseits das Ergebnis des Schrittes SE11 "NEIN" lautet, d. h., wenn die Variable c weder "0" noch M ist, dann geht die Prozedur zum Schritt SE15 weiter. Im Schritt SE15 wird der Mittelwert W (= w/c) des Syntheseverhältnisses in Bezug auf die Bildelemente berechnet, die Luminanzen besitzen, die größer als der oder gleich dem Schwellenwert T_sm sind, wobei im Schritt SE16 bestimmt wird, ob die Luminanz I_smxy jedes Bildelements s_mxy, das sich an den Koordinaten (x, y) im relevanten Standbild S_m befindet, kleiner als der Schwellenwert T_sm ist. Wenn die Antwort "JA" lautet, dann geht die Prozedur zum Schritt SE17 weiter.
Im Schritt SE17 wird s unter Verwendung der Gleichung (7) erzeugt, wobei dann die Prozedur zum Schritt SE18 weitergeht. s = s + (W + wsm)smxy (7)
Selbstverständlich geht die Prozedur ebenso zum Schritt SE18 weiter, falls das Ergebnis des Schrittes SE16 "NEIN" lautet, d. h., in dem Fall, dass die Luminanz I_smxy des Bildelements s_mxy größer als der oder gleich dem Schwellenwert T_sm ist.
Im Schritt SE18 wird zur Variable m "1" addiert, während im Schritt SE19 bestimmt wird, ob die Variable m größer als die Anzahl M der Standbilder ist. Wenn das Ergebnis "NEIN" lautet, dann kehrt die Prozedur zum Schritt SE16 zurück. Dann wird die Prozedur in den Schritten SE16–SE18 für jedes Bildelement s_mxy wiederholt, das bei den Koordinaten (x, y) jedes Standbildes liegt. Dann ist die oben angegebene Prozedur in den Schritten SE16–SE18 für jedes Bildelement s_mxy abgeschlossen, das bei den Koordinaten (x, y) jedes Standbildes liegt, der Wert der Variable m wird größer als M, das Ergebnis des Schrittes SE19 wird "JA" und die Prozedur geht zum Schritt SE20 weiter.
Im Schritt SE20 wird das Bildelement s_xy, das sich an den Koordinaten (x, y) im synthetisierten Bild S befindet, gleich dem s gesetzt, wobei dann die Prozedur zum Schritt SE21 weitergeht. Im Schritt SE21 wird zum Wert des Registers x "1" addiert. Im Schritt SE22 wird bestimmt, ob der Wert des Registers x größer als der Maximalwert X ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SE4 zurückkehrt. Dann wird die Prozedur in den Schritten SE4–SE21 wiederholt, bis der Wert des Registers x größer als der Maximalwert X wird. Falls der Wert des Registers x größer als der Maximalwert X wird, wird das Ergebnis des Schrittes SE22 "JA", wobei die Prozedur zum Schritt SE23 weitergeht. Im Schritt SE23 wird zum Wert des Registers y "1" addiert. Im Schritt SE24 wird bestimmt, ob der Wert des Registers y größer als der Maximalwert Y ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SE3 zurückkehrt. Dann wird die Prozedur in den Schritten SE3–SE23 wiederholt, bis der Wert des Registers y größer als Y wird. Wenn der Wert des Registers y größer als der Maximalwert Y wird, wird das Ergebnis des Schrittes SE24 "JA", wobei die Prozedur zum Schritt SE26 in 5B weitergeht.
Im Schritt SE26 wird der Anfangswert des Registers y auf "1" gesetzt, während im Schritt SE27 der Anfangswert des Registers x auf "1" gesetzt wird. Dann wird im Schritt SE28 der Anfangswert der Variable n, die die Reihenfolge der Videobilder anzeigt, auf "1" gesetzt, der Anfangswert der Variable c, die die Anzahl der Bildelemente mit einer Luminanz darstellt, die größer als der oder gleich dem Schwellenwert T_vn ist, wird auf "0" gesetzt und der Anfangswert der Summe w der Syntheseverhältnisse der Bildelemente mit einer Luminanz über dem Schwellenwert T_vn wird auf "0" gesetzt, wobei dann die Prozedur zum Schritt SE29 weitergeht.
Im Schritt SE29 wird bestimmt, ob die Luminanz I_vnxy des Bildelements v_nxy, das bei den Koordinaten (x, y) im relevanten Videobild V_n liegt, größer als der oder gleich dem Schwellenwert T_vn ist. Wenn das Ergebnis "JA" lautet, dann geht die Prozedur zum Schritt SE30 weiter.
Im Schritt SE30 wird zur Variable c "1" addiert. Im Schritt SE31 wird das Synthe severhältnis w_vn des relevanten Bildelements v_nxy zur Summe der Syntheseverhältnisse addiert, wobei dann die Prozedur zum Schritt SE32 weitergeht. Wenn das Ergebnis im Schritt SE29 "NEIN" lautet, d. h., wenn die Luminanz I_vnxy des Bildelements v_nxy kleiner als der Schwellenwert T_vn ist, dann geht die Prozedur ebenso zum Schritt SE32.
Im Schritt SE32 wird zur Variable n "1" addiert, während im Schritt SE33 bestimmt wird, ob die Variable n größer als die Anzahl N der Bilder ist; wenn das Ergebnis "NEIN" lautet, dann kehrt die Prozedur zum Schritt SE29 zurück. Dann wird die Prozedur in den Schritten SE29–SE32 für jedes Bildelement v_nxy wiederholt, das bei den Koordinaten (x, y) in jedem Videobild liegt. Folglich werden für die Koordinaten (x, y) in jedem Videobild V_n die Anzahl c der Bildelemente v_nxy mit einer Luminanz I_vnxy, die größer als der oder gleich dem Schwellenwert T_vn ist, und die Summe w ihrer entsprechenden Syntheseverhältnisse berechnet. Dann ist die oben für die Schritte SE29–SE32 angegebene Prozedur für jedes Bildelement v_nxy abgeschlossen, das sich an den Koordinaten (x, y) in jedem Videobild befindet, der Wert der Variable n wird größer als N, das Ergebnis im Schritt SE33 wird "JA" und die Prozedur geht zum Schritt SE34 weiter.
Im Schritt SE34 wird der Anfangswert der Variable n auf "1" gesetzt, während der Anfangswert von v, das den Wert der Synthese der N Bildelemente v_nxy, die bei den Koordinaten (x, y) für die N Videobilder liegen, anzeigt, auf "0" gesetzt wird. Im Schritt SE35 wird bestimmt, ob die Variable c gleich "0", gleich N oder weder gleich "0" noch gleich N ist, d. h., ob die Luminanz aller N Bildelemente, die sich an den Koordinaten (x, y) für die N Videobilder befinden, kleiner als der Schwellenwert T_vn (c = 0), größer als der oder gleich dem Schwellenwert T_vn (c = N) oder keines von beiden ist. Hinsichtlich des Schrittes SE35 geht, wenn gezeigt wird, dass die Variable c gleich "0" ist, dann die Prozedur zum Schritt SE36 weiter. Im Schritt SE36 wird das Unterprogramm 1, wie in 5C gezeigt ist, ausgeführt. Hinsichtlich 5C wird im Schritt SE301 v unter Verwendung der Gleichung (8) erzeugt, wobei dann die Prozedur zum Schritt SE302 weitergeht. v = v + wvnvnxy (8)
Im Schritt SE302 wird zur Variable n "1" addiert, wobei dann im Schritt SE303 bestimmt wird, ob die Variable n größer als die Anzahl N der Videobilder ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SE301 zu rückkehrt. Dann wird die Prozedur in den Schritten SE301 und SE302 für jedes Bildelement v_nxy, das sich an den Koordinaten (x, y) für jedes Videobild befindet, wiederholt. Das heißt, die Bildelemente v_nxy, die sich an den Koordinaten (x, y) in jedem Videobild befinden, werden mit ihren entsprechenden Verhältnissen w_vn synthetisiert. Dann ist die oben in den Schritten SE301 und SE302 angegebene Prozedur für jedes Bildelement v_nxy, das sich an den Koordinaten (x, y) in jedem Videobild befindet, abgeschlossen, der Wert n der Variable wird größer als N, das Ergebnis des Schrittes SE303 wird "JA" und die Prozedur geht zum Schritt SE39 in 5B weiter.
Hinsichtlich des Schrittes SE35 in 5B geht, wenn bestimmt wird, dass die Variable c gleich N ist, dann die Prozedur andererseits zum Schritt SE37 weiter. Im Schritt SE37 wird das Unterprogramm 2, wie es in 5D angegeben ist, ausgeführt. Hinsichtlich 5D geht, nachdem v gleich dem Bildelement s_xy des synthetisierten Standbildes S ist, die Prozedur zum Schritt SE39 in 5B weiter.
Hinsichtlich des Schrittes SE35 in 5B geht, wenn bestimmt wird, dass die Variable c weder "0" noch N ist, dann die Prozedur zum Schritt SE38 weiter. Im Schritt SE38 wird das in 5E angegebene Unterprogramm 3 ausgeführt. Hinsichtlich 5E wird im Schritt SE321 der Mittelwert W (= w/c) der Syntheseverhältnisse in Bezug auf die Bildelemente berechnet, die eine Luminanz besitzen, die größer als der oder gleich dem Schwellenwert T_nv ist, wobei dann im Schritt SE322 bestimmt wird, ob die Luminanz I_vnxy des Bildelements v_nxy, das sich an den Koordinaten (x, y) des relevanten Videobildes V_n befindet, kleiner als der Schwellenwert T_vn ist. Wenn die Antwort "JA" lautet, dann geht die Prozedur zum Schritt SE323 weiter.
Im Schritt SE323 wird v unter Verwendung der Gleichung (9) erzeugt, wobei dann die Prozedur zum Schritt SE324 weitergeht. v = v + (W + wvn)vnxy (9)
Selbstverständlich geht, wenn das Ergebnis im Schritt SE322 "NEIN" lautet, d. h., wenn die Luminanz I_vnxy des Bildelements v_nxy größer als der oder gleich dem Schwellenwert T_vn ist, dann die Prozedur zum Schritt SE324 weiter.
Im Schritt SE324 wird zur Variable n "1" addiert, wobei dann im Schritt SE325 bestimmt wird, ob die Variable n größer als die Anzahl N der Videobilder ist. Wenn das Ergebnis "NEIN" lautet, dann kehrt die Prozedur zum Schritt SE 322 zurück. Dann wird die Prozedur in den Schritten SE322–SE324 für jedes Bildelement v_nxy wiederholt, das bei den Koordinaten (x, y) jedes Videobildes liegt. Dann ist die oben angegebene Prozedur in den Schritten SE322–SE324 für jedes Bildelement v_nxy abgeschlossen, das bei den Koordinaten (x, y) jedes Videobildes liegt, der Wert der Variable N wird größer als N, das Ergebnis im Schritt SE325 wird "JA" und die Prozedur geht zum Schritt SE39 weiter.
Im Schritt SE39 wird das synthetisierte Bildelement v_xy, das bei den Koordinaten (x, y) des synthetisierten Bildes V liegt, gleich v gesetzt, wobei dann die Prozedur zum Schritt SE40 weitergeht. Im Schritt SE40 wird zum Wert des Registers x "1" addiert. Im Schritt SE41 wird bestimmt, ob der Wert des Registers x größer als der Maximalwert X ist, wobei, wenn die Antwort "NEIN" lautet, dann die Prozedur zum Schritt SE28 zurückkehrt. Dann wird die Prozedur in den Schritten SE28–SE40 wiederholt, bis der Registerwert x größer als der Maximalwert X wird. Falls der Registerwert x größer als der Maximalwert X wird, wird das Ergebnis im Schritt SE41 "JA", wobei die Prozedur zum Schritt SE42 weitergeht. Im Schritt SE42 wird zum Registerwert y "1" addiert. Im Schritt SE43 wird bestimmt, ob der Registerwert y größer als das Maximum Y ist, wobei, wenn die Antwort "NEIN" lautet, dann die Prozedur zum Schritt SE27 zurückkehrt. Dann wird die Prozedur in den Schritten SE27–SE42 wiederholt, bis der Registerwert y größer als das Maximum Y wird. Wenn der Registerwert y größer als der Maximalwert Y wird, wird das Ergebnis im Schritt SE43 "JA", wobei die Prozedur endet.
In der oben erwähnten Ausführungsform 3 wurde ein Beispiel angegeben (die Prozedur in 5A, Schritt SE17), in dem, wenn die Bildelemente der Standbilder synthetisiert werden, die Syntheseverhältnisse der nicht synthetisierten Bildelemente gemittelt und verteilt wurden. Hinsichtlich der Prozedur im Schritt SE17 ist es jedoch unter Verwendung der Gleichung (10) möglich, die Syntheseverhältnisse der nicht synthetisierten Bildelemente proportional zu den Syntheseverhältnissen der synthetisierten Bildelemente zu verteilen.
Als Nächstes wird in der oben erwähnten Ausführungsform 3 die Prozedur in dem Fall erklärt, in dem N = 2 und M = 1 gilt, d. h., falls die Erzeugung eines synthetisierten Bildes V gewünscht wird, was ausgeführt wird, indem zwei Videobilder V₁ und V₂ und ein Standbild S kombiniert werden, indem dem Ablaufplan in 6 gefolgt wird. Zuerst wird im Schritt SF1 der Anfangswert des Registers zum Verändern der y-Koordinaten auf "1" gesetzt, wobei gleichermaßen im Schritt SF2 der Anfangswert des Registers x zum Verändern der x-Koordinaten ebenfalls auf "1 " gesetzt wird. Als Nächstes wird im Schritt SF3 bestimmt, ob die Luminanz I_v1xy des Bildelements v_1xy, das bei den Koordinaten (x, y) des Videobildes V₁ liegt, größer als der oder gleich dem Schwellenwert T₁ ist und ob die Luminanz I_v2xy des Bildelements v_2xy kleiner als der Schwellenwert T₂ ist. Wenn das Ergebnis "JA" lautet, dann geht die Prozedur zum Schritt SF4 weiter.
Im Schritt SF4 wird das synthetisierte Bildelement v_xy, das bei den Koordinaten (x, y) des synthetisierten Bildes V_xy liegt, gleich dem Bildelement v_2xy des Bildes V2 gesetzt, wobei dann die Prozedur zum Schritt SF5 weitergeht.
Im Schritt SF5 wird bestimmt, ob die Luminanz I_v1xy des Bildelements v_1xy kleiner als der Schwellenwert T₁ ist und ob die Luminanz I_v2xy des Bildelements v_2xy größer als der oder gleich dem Schwellenwert T₂ ist. Wenn das Ergebnis "JA" lautet, dann geht die Prozedur zum Schritt SF6 weiter. Im Schritt SF6 wird das synthetisierte Bildelement v_xy gleich dem Bildelement v_1xy gesetzt, wobei die Prozedur zum Schritt SF10 weitergeht.
Wenn andererseits das Ergebnis im Schritt SF5 "NEIN" lautet, d. h., wenn die Luminanz I_v1xy des Bildelements v_1xy größer als der oder gleich dem Schwellenwert T₁ ist oder die Luminanz I_v2xy des Bildelements v_2xy kleiner als der Schwellenwert T₂ ist, dann geht die Prozedur zum Schritt SF7 weiter.
Im Schritt SF7 wird bestimmt, ob die Luminanz I_v1xy des Bildelements v_1xy größer als der oder gleich dem Schwellenwert T₁ ist und ob die Luminanz I_v2xy des Bildelements v_2xy größer als der oder gleich dem Schwellenwert T₂ ist. Wenn das Ergebnis "JA" lautet, dann geht die Prozedur zum Schritt SF8 weiter. Im Schritt SF8 wird das synthetisierte Bildelement v_xy gleich dem Bildelement s_xy gesetzt, wobei dann die Prozedur zum Schritt SF10 weitergeht.
Wenn andererseits das Ergebnis im Schritt SF7 "NEIN" lautet, d. h., wenn die Luminanz I_v1xy des Bildelements v_1xy kleiner als der Schwellenwert T₁ ist oder die Luminanz I_v2xy des Bildelements v_2xy kleiner als der Schwellenwert T₂ ist, dann geht die Prozedur zum Schritt SF9 weiter. Im Schritt SF9 wird das synthetisierte Bildelement v_xy unter Verwendung der Gleichung (11) erzeugt, wobei dann die Prozedur zum Schritt SF10 weitergeht. vxy = w1v1xy + w2v2xy (11)
Im Schritt SF10 wird zum Wert des Registers x "1" addiert. Im Schritt SF11 wird bestimmt, ob der Wert des Registers x größer als der Maximalwert X ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SF3 zurückkehrt. Dann wird die Prozedur in den Schritten SF3–SF10 wiederholt, bis der Wert des Registers x größer als der Maximalwert X wird. Wenn der Wert des Registers x größer als das Maximum X wird, dann wird das Ergebnis des Schrittes SF11 "JA", wobei die Prozedur zum Schritt SF12 weitergeht.
Im Schritt SF12 wird zum Wert des Registers y "1" addiert. Im Schritt SF13 wird bestimmt, ob der Wert des Registers y größer als der Maximalwert Y ist, wobei, wenn das Ergebnis "NEIN" lautet, dann die Prozedur zum Schritt SF2 zurückkehrt. Dann wird die Prozedur in den Schritten SF2–SF12 wiederholt, bis der Wert des Registers y größer als der Maximalwert Y wird. Wenn der Wert des Registers y größer als das Maximum Y wird, dann wird das Ergebnis des Schrittes SF13 "JA", wobei die Prozedur endet.
Als Nächstes wird in der oben erwähnten Ausführungsform 3 die Prozedur in dem Fall, dass M = 1 gilt, erklärt, d. h., falls ein synthetisiertes Bild V zu erzeugen ist, indem N Videobilder V₁–V_N und ein einzelnes Standbild S synthetisiert werden. Die N Videobilder V₁–V_N werden mit ihren entsprechenden Syntheseverhältnissen w₁ : w₂: ... : w_(N–1) : w_N (mit den Bedingungen w₁ + w₂ + ... + w_(N–1) + w_N = 1; w₁, w₂, ..., w_(N–1), w_N ≥ 0) kombiniert. In diesem Fall wird das Bildelement, das den Koordinaten (x, y) in jedem Videobild V_n (1 ≤ n ≤ N, n ist eine natürliche Zahl) entspricht, als v_nxy bezeichnet, wobei die Luminanz des Bildelements v_nxy als I_vnxy (0 ≤ I_vnxy ≤ 1; wobei 0 = schwarz, 1 = weiß gilt) bezeichnet wird. Außerdem wird der Schwellenwert T_n (0 ≤ T_n ≤ 1) für die Luminanzen der Bildelemente jedes Videobildes V_n gesetzt.
Die 7A–7D stellen einen Ablaufplan dar, der die Prozedur für den Fall zeigt, in dem ein synthetisiertes Bild konstruiert wird, indem N Videobilder V₁–V_N und ein einzelnes Standbild S synthetisiert werden. In den 7A–7D sind den Prozeduren, die denjenigen in den 5A–5E entsprechen, die gleichen Symbole gegeben. Die Prozeduren im Ablaufplan in den 7A–7D sind, wenn nicht M Standbilder S₁–S_M synthetisiert werden, zu denjenigen im Ablaufplan in den 5A–5E völlig gleich, wobei deshalb die Erklärung weggelassen ist.
Das oben in der Ausführungsform 3 beschriebene Bildsyntheseverfahren kann als ein Programm geschrieben sein, in einer Speichervorrichtung, wie z. B. einem ROM, gespeichert sein und durch eine CPU ausgeführt werden, es ist aber außerdem möglich, es in Hardware zu bauen.
Die Ausführungsform 4
Im Folgenden wird die Ausführungsform 4 der vorliegenden Erfindung erklärt. In der Ausführungsform 4 wird das synthetisierte Bild P konstruiert, indem N (N ist eine natürliche Zahl größer als 1) Videobilder V₁–V_N und M (M ist eine natürliche Zahl) Standbilder S₁–S_M, von denen jedes aus (X × Y) (X und Y sind natürliche Zahlen) Bildelementen besteht, synthetisiert werden.
Zuerst wird ein synthetisiertes Standbild S konstruiert, indem ein Bildelement mit der niedrigsten Luminanz unter denjenigen Bildelementen ausgewählt wird, die bei denselben Koordinaten der Standbilder S₁–S_M liegen.
Als Nächstes wird ein synthetisiertes Bild P konstruiert, indem die Videobilder V₁–V_N und das synthetisierte Standbild S synthetisiert werden. In dem Fall, in dem alle Luminanzen der Bildelemente, die bei denselben Koordinaten der Videobilder V₁–V_N liegen, größer als der vorgegebene Schwellenwert sind, wird das Bildelement, das bei derselben Koordinate des Standbildes S liegt, als ein synthetisiertes Standbild-Bildelement des synthetisierten Bildes P ausgewählt. Im anderen Fall wird das Bildelement mit der niedrigsten Luminanz unter denjenigen Bildelementen, die bei denselben Koordinaten der Videobilder V₁–V_N liegen, als ein synthetisiertes Bildelement ausgewählt.
In diesem Fall werden die Bildelemente, die bei den Koordinaten (x, y) (1 ≤ x ≤ X, 1 ≤ y ≤ Y, wobei x und y natürliche Zahlen sind) jedes Standbildes S_m (1 ≤ n ≤ M; m ist eine natürliche Zahl) und des synthetisierten Standbildes S liegen, als das Bildelement s_mxy bzw. s_xy bezeichnet. Die Luminanz des Bildelements s_mxy wird durch I_smxy (0 ≤ I_smxy ≤ 1; wobei 0 = schwarz und 1 = weiß gilt) dargestellt. Außerdem wird das Bildelement, das bei den Koordinaten (x, y) jedes Videobildes V_n (1 ≤ n ≤ N; n ist eine natürliche Zahl) liegt, als V_nxy bezeichnet, wobei die Luminanz dieses Bildelements durch I_vnxy (0 ≤ I_vnxy ≤ 1; wobei 0 = schwarz und 1 = weiß gilt) dargestellt wird. Außerdem wird ein Luminanz-Schwellenwert T_vn (01 ≤ T_vn ≤ 1) für jedes Videobild V_n gesetzt.
Im Folgenden wird der Bildsyntheseprozess gemäß der Ausführungsform 4 der vorliegenden Erfindung unter Bezugnahme auf den Ablaufplan in den 8A und 8B erklärt. Anfangs wird im Schritt SG1 eine Entscheidung getroffen, ob M gleich "1" ist, mit anderen Worten, ob nur ein Standbild vorhanden ist. In dem Fall, wenn das Ergebnis dieser Entscheidung "NEIN" lautet, geht der Prozess zum Schritt SG2. Im Schritt SG2 wird der Anfangswert des Registers y zum Ändern der y-Koordinaten auf "1" gesetzt. Im Schritt SG3 wird der Anfangswert des Registers x zum Ändern der x-Koordinaten ähnlich auf "1" gesetzt. Anschließend wird im Schritt SG4 der Anfangswert der Variable m, die die Reihenfolge der Standbilder anzeigt, auf "2" gesetzt, der Anfangswert der niedrigsten Luminanz i wird gleich der Luminanz I_s1xy des Bildelements s_1xy gesetzt und der Anfangswert von s, das den Wert des synthetisierten Bildelements anzeigt, wird gleich dem Bildelement s_1xy gesetzt, wobei dann die Prozedur zum Schritt SG5 weitergeht.
Im Schritt SG5 wird eine Entscheidung getroffen, ob die Luminanz I_smxy des Bildelements s_mxy kleiner als die Luminanz i ist. In dem Fall, in dem das Ergebnis dieser Entscheidung "JA" lautet, geht der Prozess zum Schritt SG6. Im Schritt SG6 wird die Luminanz i gleich der Luminanz I_smxy gesetzt, wobei der Prozess dann zum Schritt SG7 geht. Im Schritt SG7 geht, nachdem s gleich dem Bildelement s_mxy gesetzt worden ist, der Prozess zum Schritt SG8.
Im Schritt SG8 wird zur Variable m "1" addiert; im Schritt SG9 wird eine Entscheidung getroffen, ob die Variable m größer als die Anzahl M der Standbilder ist. In dem Fall, wenn das Ergebnis dieser Entscheidung "NEIN" lautet, kehrt der Prozess zum Schritt SG5 zurück. Die in den Schritten SG5–SG8 beschriebene Prozedur wird dann in Bezug auf die Bildelemente s_mxy, die sich bei an Koordinaten (x, y) aller Standbilder befinden, wiederholt. Nachdem die Prozedur der Schritte SG5–SG8 an den Bildelementen s_mxy, die sich an den Koordinaten (x, y) aller Standbilder befinden, abgeschlossen worden ist und der Wert der Variable m größer als M ist, wird das Entscheidungsergebnis des Schrittes SG9 "JA", wobei dadurch erlaubt wird, dass der Prozess zum Schritt SG10 weitergeht.
Im Schritt SG10 wird das Bildelement s_xy, das sich an den Koordinaten (x, y) des synthetisierten Bildes S befindet, gleich s gesetzt, wobei dann der Prozess zum Schritt SG11 geht. Im Schritt SG11 wird zum Wert des Registers x "1" addiert. Im Schritt SG12 wird eine Entscheidung getroffen, ob der Wert des Registers x größer als der Maximalwert X ist. In dem Fall, wenn das Ergebnis dieser Entscheidung "NEIN" lautet, kehrt der Prozess zum Schritt SG4 zurück. Die Prozedur der Schritte SG4–SG11 wird dann wiederholt, bis der Wert des Registers x größer als der Maximalwert X wird. Wenn der Wert des Registers x größer als der Maximalwert X wird, wird das Ergebnis der Entscheidung im Schritt SG12 "JA", wobei der Prozess zum Schritt SG13 geht. Im Schritt SG13 wird zum Wert des Registers y "1" addiert. Im Schritt SG14 wird eine Entscheidung getroffen, ob der Wert des Registers y größer als der Maximalwert Y ist. In dem Fall, wenn das Ergebnis dieser Entscheidung "NEIN" lautet, kehrt der Prozess zum Schritt SG3 zurück. Die Prozedur der Schritte SG3–SG13 wird dann wiederholt, bis der Wert des Registers y größer als der Maximalwert Y wird. Wenn der Wert des Registers y größer als der Maximalwert Y wird, wird das Ergebnis der Entscheidung im Schritt SG14 "JA", wobei der Prozess zum Schritt SG16 geht. Außerdem ist, wenn das Entscheidungsergebnis des Schrittes SG1 "JA" lautet, mit anderen Worten, M "1" ist, nur ein Standbild vorhanden, wobei folglich der Prozess zum Schritt SG15 springt. Im Schritt SG15 bewegt sich, nachdem des Standbild S₁ als das synthetisierte Standbild S bestimmt worden ist, der Prozess zum Schritt SG16.
In den Schritten SG16 und SG17 wird "x" und "y" der Anfangswert "1" gegeben.
Im Schritt SG18 wird eine Entscheidung getroffen, ob alle Luminanzen I_v1xy–I_vNxy der Bildelemente v_1xy–v_Nxy jedes Videobildes V₁–V_N größer als die entsprechenden Schwellenwerte T_v1–T_vN sind. In dem Fall, wenn dieses Entscheidungsergebnis lautet "JA", geht der Prozess zum Schritt SG25. Im Schritt SG25 endet der Prozess, nachdem das synthetisierte Bildelement v_xy gleich dem Bildelement s_xy des synthetisierten Standbildes S gesetzt worden ist.
Wenn andererseits das Entscheidungsergebnis des Schrittes SG18 "NEIN" lautet, geht der Prozess zum Schritt SG19. Im Schritt SG19 wird der Anfangswert der Variable n gleich "1" gesetzt, wobei der Anfangswert der niedrigsten Luminanz i ähnlich gleich "1" gesetzt wird. Nach diesem geht der Prozess zum Schritt SG20.
Im Schritt SG20 wird eine Entscheidung getroffen, ob die Luminanz I_vnxy kleiner als der oder gleich dem Schwellenwert T_vn ist und ob die Luminanz I_vnxy kleiner als die Luminanz i ist. In dem Fall, wenn das Ergebnis dieser Entscheidung "JA" lautet, geht der Prozess zum Schritt SG21. Im Schritt SG21 wird die Luminanz i gleich der Luminanz I_vmxy gesetzt, wobei der Prozess zum Schritt SG22 geht. Im Schritt SG22 wird ein Bildelement v_xy gleich dem synthetisierten Bildelement v_nxy gesetzt, wobei dann der Prozess zum Schritt SG23 geht.
Im Schritt SG23 wird zur Variable n "1" addiert. Anschließend wird im Schritt SG24 eine Entscheidung getroffen, ob die Variable n größer als die Anzahl N der Videobilder ist. In dem Fall, in dem das Ergebnis dieser Entscheidung "NEIN" lautet, kehrt der Prozess zum Schritt SG20 zurück. Die Prozedur der Schritte SG20–SG23 wird dann für jedes Bildelement v_nxy wiederholt, das sich an den Koordinaten (x, y) jedes Videobildes befindet. Wenn die Prozedur der Schritte SG20–SG23 in Bezug auf jedes Bildelement v_nxy, das sich an den Koordinaten (x, y) jedes Videobildes befindet, abgeschlossen worden ist, wird der Wert der Variable n größer als N, das Entscheidungsergebnis des Schrittes SG24 wird "JA" und der Prozess endet.
Im Schritt SG26 wird zum Wert im Register "x" "1" addiert. Im Schritt 27 wird eine Beurteilung getroffen, ob der Wert "x" größer als der Maximalwert "X" ist. Wenn die Beurteilung "NEIN" lautet, kehrt die Prozedur zum Schritt SG18 zurück. Dann werden die Prozeduren SG18–SG26 wiederholt, bis der Wert "x" größer als der Wert "X" wird. Wenn der Wert "x" größer als der Wert "X" wird und die Beurteilung "JA" lautet, geht die Prozedur zum Schritt SG28 weiter. Im Schritt SG28 wird zum Wert des Registers "y" "1" addiert. Im Schritt SG29 wird eine Beurteilung getroffen, ob der Wert "y" größer als der Maximalwert "Y" ist. Wenn die Beurteilung "NEIN" lautet, kehrt die Prozedur zum Schritt SG17 zurück. Dann werden die Prozeduren SG17–SG28 wiederholt, bis der Wert "y" größer als der Wert "Y" wird. Die Prozedur wird beendet, wenn der Wert "y" größer als der Wert "Y" wird und die Beurteilung "JA" lautet.
Außerdem kann der Bildsyntheseprozess gemäß der oben erwähnten Ausführungsform 4 durch das Aufzeichnen eines Programms in einer Speichervorrichtung, wie z. B. einem ROM und dergleichen, und dann durch das Ausführen dieses Programms unter Verwendung einer CPU erreicht werden. Außerdem kann der gleiche Prozess ebenso mittels Hardware ausgeführt werden.
Die Ausführungsform 5
Im Folgenden wird die Ausführungsform 5 der vorliegenden Erfindung erklärt. In der Ausführung von 5 der vorliegenden Erfindung wird das synthetisierte Bild P konstruiert, indem N (N ist eine natürliche Zahl größer als 1) Videobilder V₁–V_N und M (M ist eine natürliche Zahl) Standbilder S₁–S_M, von denen jedes aus (X × Y) (X und Y sind natürliche Zahlen) Bildelementen besteht, synthetisiert werden.
Zuerst wird ein synthetisiertes Standbild S konstruiert, indem ein Bildelement mit der niedrigsten Luminanz unter denjenigen Bildelementen ausgewählt wird, die bei denselben Koordinaten der Standbilder S₁–S_N liegen.
Als Nächstes wird das Bildelement, das die niedrigste Luminanz unter denjenigen Bildelementen besitzt, die bei denselben Koordinaten der Videobilder V₁–V_N liegen, ausgewählt. In dem Fall, in dem die Luminanz größer als ein vorgegebener Schwellenwert ist, wird das Bildelement, das bei denselben Koordinaten des Standbildes S liegt, als ein Bildelement ausgewählt, das derselben Koordinate des synthetisierten Bildes entspricht. Im anderen Fall wird das oben erwähnten Bildelement, das die niedrigste Luminanz besitzt, als ein Bildelement ausgewählt, das derselben Koordinate des synthetisierten Bildes entspricht.
In diesem Fall werden die Bildelemente, die bei den Koordinaten (x, y) (1 ≤ x ≤ X, 1 ≤ y ≤ Y, wobei x und y natürliche Zahlen sind) jedes Standbildes S_m (1 ≤ n ≤ M; m ist eine natürliche Zahl) und des synthetisierten Standbildes S liegen, als das Bildelement s_mxy bzw. s_xy bezeichnet. Die Luminanz des Bildelements s_mxy wird durch I_smxy (0 ≤ I_smxy ≤ 1, wobei 0 = schwarz und 1 = weiß gilt) dargestellt. Außerdem wird das Bildelement, das bei den Koordinaten (x, y) jedes Videobildes V_n (1 ≤ n ≤ N; n ist eine natürliche Zahl) liegt, als v_nxy bezeichnet, während die Luminanz dieses Bildelements durch I_vnxy (0 ≤ I_vnxy ≤ 1, wobei 0 = schwarz und 1 = weiß gilt) dargestellt wird. Außerdem wird für jedes Videobild ein Luminanz-Schwellenwert T_v (01 ≤ T_v ≤ 1) gesetzt.
Im Folgenden wird der Bildsyntheseprozess gemäß der Ausführungsform 5 der vorliegenden Erfindung unter Bezugnahme auf den Ablaufplan in 9 erklärt. In dieser Figur sind die Prozeduren, die denjenigen entsprechen, die in 8 beschrieben sind, durch das gleiche Zeichen (Bezugszeichen) bezeichnet, wobei ihre Erklärungen weggelassen sind. Mit anderen Worten, in dem Fall, wenn nur ein Standbild S₁ vorhanden ist, wird dieses Bild als das synthetisierte Standbild S bezeichnet; in dem Fall, wenn mehrere Standbilder vorhanden sind, wird das Bildelement mit der niedrigsten Luminanz unter den Bildelementen aller Standbilder S₁–S_M, die sich bei denselben Koordinaten befinden, als das synthetisierte Bildelement s_xy bezeichnet, das derselben Koordinate des synthetisierten Standbildes S entspricht. Dieser Prozess ist zu demjenigen völlig gleich, der in der oben erwähnten Ausführungsform 4 beschrieben worden ist.
Im Schritt SG16 wird der Anfangswert des Registers y zum Ändern der y-Koordinate ähnlich auf "1" gesetzt. Im Schritt SG17 wird der Anfangswert des Registers x zum Ändern der x-Koordinaten ähnlich auf "1" gesetzt. Anschließend wird im Schritt SG30 der Anfangswert der Variable n, die die Reihenfolge der Videobilder anzeigt, gleich "2" gesetzt, der Anfangswert der minimalen Luminanz i wird gleich der Luminanz I_v1xy des Bildelements v_1xy gesetzt und der Anfangswert von v, das das Bildelement darstellt, das die niedrigste Luminanz besitzt, die der Koordinate (x, y) entspricht, wird gleich dem Bildelement v_1xy gesetzt. Nach diesen Handlungen geht der Prozess zum Schritt SG31.
Im Schritt SG31 wird eine Entscheidung getroffen, ob die Luminanz Ivnxy des Bildelements v_nxy kleiner als die Luminanz i ist. In dem Fall, wenn das Ergebnis dieser Entscheidung "JA" lautet, geht der Prozess zum Schritt SG32. Im Schritt SG32 wird die Luminanz i gleich der Luminanz I_vnxy gesetzt, wobei der Prozess dann zum Schritt SG33 geht. Im Schritt SG33 geht, nachdem v gleich dem Bildelement v_nxy gesetzt worden ist, der Prozess zum Schritt SG34.
Im Schritt SG34 wird zur Variable n "1" addiert; im Schritt SG35 wird eine Entscheidung getroffen, ob die Variable n größer als die Anzahl N der Videobilder ist. In dem Fall, wenn das Ergebnis dieser Entscheidung "NEIN" lautet, kehrt der Prozess zum Schritt SG31 zurück. Die in den Schritten SG31–SG34 beschriebene Prozedur wird dann in Bezug auf die Bildelemente v_nxy, die sich an den Koordinaten (x, y) aller Videobilder befinden, wiederholt. Nachdem die Prozedur der Schritte SG31–SG34 an den Bildelementen v_nxy, die sich an den Koordinaten (x, y) aller Videobilder befinden, abgeschlossen worden ist und der Wert der Variable n größer als N ist, wird das Entscheidungsergebnis des Schrittes SG35 "JA", wobei dadurch erlaubt wird, dass der Prozess zum Schritt SG36 weitergeht.
Im Schritt SG36 wird eine Entscheidung getroffen, ob die Luminanz i größer als der vorgegebene Schwellenwert T_v ist. In dem Fall, in dem das Ergebnis dieser Entscheidung "NEIN" lautet, geht der Prozess zum Schritt SG37. Im Schritt SG37 wird das Bildelement v_xy, das sich an den Koordinaten (x, y) des synthetisierten Bildes V befindet, gleich v gesetzt, wobei der Prozess dann zum Schritt SG26 springt.
Andererseits geht in dem Fall, wenn das Entscheidungsergebnis des Schrittes SG36 "JA" lautet, mit anderen Worten, wenn die Luminanz i größer als der Schwellenwert T_v ist, der Prozess zum Schritt SG38. Im Schritt SG38 wird das synthetisierte Bildelement v_xy gleich dem Bildelement s_xy des synthetisierten Standbildes S gesetzt, wobei dann der Prozess zum Schritt SG26 geht.
Im Schritt SG26 wird zum Wert des Registers x "1" addiert. Im Schritt SG27 wird eine Entscheidung getroffen, ob der Wert des Registers x größer als der Maximalwert X ist. In dem Fall, wenn das Ergebnis dieser Entscheidung "NEIN" lautet, kehrt der Prozess zum Schritt SG30 zurück. Die Prozedur der Schritte SG30–SG26 wird dann wiederholt, ist der Wert des Registers x größer als der Maximalwert X wird. Wenn der Wert des Registers x größer als der Maximalwert X wird, wird das Ergebnis der Entscheidung im Schritt SG27 "JA", wobei der Prozess zum Schritt SG28 geht. Im Schritt SG28 wird zum Wert des Registers y "1" addiert. Im Schritt SG29 wird eine Entscheidung getroffen, ob der Wert des Registers y größer als der Maximalwert Y ist. In dem Fall, wenn das Ergebnis dieser Entscheidung "NEIN" lautet, kehrt der Prozess zum Schritt SG29 zurück. Die Prozedur der Schritte SG17–SG28 wird dann wiederholt, bis der Wert des Registers y größer als der Maximalwert Y wird. Wenn der Wert des Registers y größer als der Maximalwert Y wird, wird das Ergebnis der Entscheidung im Schritt SG29 "JA", was wiederum erlaubt, dass der Prozess endet.
Außerdem kann der Bildsyntheseprozess gemäß der oben erwähnten Ausführungsform 5 durch das Aufzeichnen eines Programms in einer Speichervorrichtung, wie z. B. einem ROM und dergleichen, und dann durch das Ausführen dieses Programms unter Verwendung einer CPU erreicht werden. Außerdem kann der gleiche Prozess ebenso mittels Hardware ausgeführt werden.
Die Ausführungsform 6
Im Folgenden wird die Ausführungsform 6 der vorliegenden Erfindung erklärt. 10 ist ein Blockschaltplan, der die Struktur einer Bildsynthetisierungsvorrichtung gemäß der Ausführungsform 6 zeigt. In 10 ist die Bildsynthetisierungsvorrichtung aus einer Anzahl N (N ist eine natürliche Zahl größer als 1) Eingabeanschlüsse 21₁ –21_N , einer Anzahl N Luminanzsignal-Trenneinrichtungen 22₁ –22_N , einer Anzahl N Eingabeanschlüsse 23₁ –23_N , einer Vergleichs-Berechnungseinheit 24, einem Bildschalter 25, einer Verhältnis-Einstelleinrichtung 26, einem Addieren 27 und einem Ausgabeanschluss 28 gebildet.
Eine Anzahl N von Bildern P₁–P_N wird jeweils von den Eingabeanschlüssen 21₁ –21_N eingegeben und zu den entsprechenden Luminanzsignal-Trenneinrichtungen 22₁ –22_N geliefert. Jede Luminanzsignal-Trenneinrichtung 22₁ –22_N liefert dann jeweils ein eingegebenes Bild P₁–P_N zum Bildschalter 25. Außerdem trennen die oben erwähnten Luminanzsignal-Trenneinrichtungen 22₁ –22_N die Luminanzsignale I_P1–I_PN von den Bildern P₁–P_N und liefern sie zur Vergleichs-Berechnungseinheit 24. Eine Anzahl N von Schwellenwert-Signalen S_T1–S_TN wird jeweils von den Eingabeanschlüssen 23₁ –23_N eingegeben und zur Vergleichs-Berechnungseinheit 24 geliefert. Die Schwellenwert-Signale S_T1–S_TN entsprechen den vorausgehend für jedes Bild P₁–P_N gesetzten Schwellenwerten T₁–T_N der Luminanzen der Bildelemente. Die Vergleichs-Berechnungseinheit 24 vergleicht jedes Luminanzsignal I_P1–I_PN mit dem entsprechenden Schwellenwert-Signal S_T1–S_TN und liefert dann natürliche Zahlen k, die allen Luminanzsignalen I_pk entsprechen, die kleiner als das oder gleich dem entsprechenden Schwellenwert-Signal S_Tk (1 ≤ k ≤ N) sind, an den Bildschalter 25. In dem Fall, wenn alle Luminanzsignale I_P1–I_PN der N Videobilder P₁–P_N größer als die entsprechenden Schwellenwert-Signale S_T1–S_TN sind, werden diese Informationen dem Bildschalter 25 gemeldet. In dem Fall, wenn derartige Informationen gemeldet werden, d. h., Informationen, dass alle Luminanzsignale I_P1–I_PN größer als das Schwellenwert-Signal S_T1–S_TN sind, liefert der Bildschalter 25 alle Videobilder P₁–P_N zur Verhältnis-Einstelleinrichtung 26; in allen anderen Fällen liefert der Bildschalter 25 alle Videobilder P_k, die den gelieferten natürlichen Zahlen k entsprechen, an die Verhältnis-Einstelleinrichtung 26. Die Verhältnis-Einstelleinrichtung 26 verteilt die vorgegebenen Syntheseverhältnisse der nicht eingegebenen visuellen Bilder über diejenigen der eingegebenen visuellen Bilder neu. Die eingegebenen Videobilder P_k werden mit einer Summe aus dem vorgegebenen Syntheseverhältnis und dem neu verteilten Syntheseverhältnis multipliziert. Die resultierenden Videobilder P_k' werden zum Addierer 27 ausgegeben. Die Videobilder P_k' werden durch den Addierer 27 addiert, wobei die Summe durch den Ausgabeanschluss 28 als ein synthetisiertes Bild P ausgegeben wird.
Die Ausführungsform 7
Im Folgenden wird die Ausführungsform 7 der vorliegenden Erfindung erklärt. 11 ist ein Blockschaltplan, der eine Struktur einer Bildsynthetisierungsvorrichtung gemäß der Ausführungsform 7 zeigt. In 11 ist die Bildsynthetisierungsvorrichtung durch die Eingabeanschlüsse 29₁ , 29₂ , 30₁ und 30₂ ; den Teilwiderstand 31; den Operationsverstärker 32; die Komparatoren 33₁ und 33₂ ; die Schmitt-Trigger 34₁ und 34₂ ; die Verzögerungsleitungen 35₁ –35₃ ; den Analogschalter 36 und den Ausgabeanschluss 37 gebildet. Die Bildsignale S_P1, S_P2 der Bilder P₁, P₂ werden jeweils von den Eingabeanschlüssen 29₁ , 29₂ eingegeben und zu einem Eingabeanschluss der entsprechenden Komparatoren 33₁ , 33₂ geliefert. Andererseits werden die zwei Schwellenwert-Signale S_T1, S_T2 von den Eingabeanschlüssen 30₁ bzw. 30₂ eingegeben und dann zu den anderen Anschlüssen der Komparatoren 33₁ bzw. 33₂ geliefert. Die Schwellenwert-Signale S_T1, S_T2 entsprechen den vorausgehend für die Bilder P₁, P₂ bestimmten Luminanz-Schwellenwerten T₁, T₂. Die Komparatoren 33₁ , 33₂ vergleichen jeweils die Luminanzsignale von jedem Bildsignal S_P1, S_P2 mit den entsprechenden Schwellenwert-Signalen S_T1, S_T2. In dem Fall, wenn jedes Luminanzsignal größer als sein entsprechendes Schwellenwert-Signal S_T1, S_T2 ist, wird ein Vergleichssignal mit dem Pegel "N" ausgegeben, während in dem Fall, wenn die oben erwähnten Signale kleiner als ihre oder gleich ihren Schwellenwert-Signalen sind, ein Vergleichssignal mit dem Pegel "L" ausgegeben wird. Jedes Vergleichssignal wird anschließend mittels der Schmitt-Trigger 34₁ , 34₂ in eine Signalform geformt und dann zu den Steueranschlüssen C0, C1 des Analogschalters 36 geliefert.
Die Bildsignale S_P1, S_P2 werden über die Verzögerungsleitungen 35₁ , 35₂ , von denen jede eine vorgegebene Verzögerung besitzt, zu den Eingabeanschlüssen I₁, I₂ des Analogschalters 36 geliefert, wobei ein halb jedes Signals jeweils mittels des Teilwiderstands 31 summiert wird. Diese Signale werden dann mittels eines Operationsverstärkers 32 mit einem Verstärkungsverhältnis 1 einer "Pufferung" unterzogen und dann über die Verzögerungsleitung 35₃ , die außerdem eine vorgegebene Verzögerung besitzt, zum Eingabeanschluss I3 des Analogschalters 36 geliefert.
Der Analogschalter 36 setzt dann in dem Fall, wenn sich jedes der vom Steueranschluss C0, C1 eingegebenen Vergleichssignale auf dem Pegel "H" befindet, jeweils die Werte der Steuerdaten DC0 bzw. DC1 auf "1", oder er setzt in dem Fall, wenn jedes Signal einen Pegel "L" anzeigt, die Werte der Steuerdaten DC0 bzw. DC1 auf "0". In dem Fall, wenn die Werte der Steuerdaten DC0, DC1 "00" anzeigen, wird das vom Eingangsanschluss I0 eingegebene Ausgabesignal der Verzögerungsleitung 35₃ ausgewählt; in dem Fall, wenn die oben erwähnten Werte "01" anzeigen, wird das vom Eingabeanschluss I1 eingegebene Ausgabesignal der Verzögerungsleitung 35₁ ausgewählt; in dem Fall, wenn die oben erwähnten Werte "10" anzeigen, wird das vom Eingabeanschluss I2 eingegebene Ausgabesignal der Verzögerungsleitung 35₂ ausgewählt; und in dem Fall, wenn die oben erwähnten Werte "11" anzeigen, wird das vom Eingabeanschluss I3 eingegebene Ausgabesignal der Verzögerungsleitung 35₃ ausgewählt. Das ausgewählte Ausgabesignal wird dann vom Ausgabeanschluss 37 als das synthetisierte Bildsignal S_p ausgegeben.
Außerdem sind die Verzögerungsleitungen 35₁ –35₃ für den Zweck vorgesehen, um den Eingabezeitunterschied zwischen dem analogen Signal und dem in den Analogschalter 36 eingegebenen oben erwähnten Vergleichssignal einzustellen. In dem Fall, wenn ein synthetisiertes Bildsignal SP in hoher Qualität nicht speziell notwendig ist, können diese Strukturen jedoch weggelassen werden.
12 zeigt ein strukturelles Beispiel eines Bildkommunikationssystems, in dem die Bildsynthetisierungsvorrichtung gemäß der oben erwähnten Ausführungsform 7 verwendet wird. In 12 sind zwei Bildkommunikations-Endgeräteinheiten 41a, 41b über die Kommunikationsschaltung 42 in einer Weise verbunden, dass eine interaktive Kommunikation möglich ist (bidirektionale Kommunikation). Die Bildkommunikations-Endgeräteinheiten 41a, 41b umfassen die Bildeingabeeinheiten 43a bzw. 43b; die Bildsynthetisierungseinheiten 44a bzw. 44b; und die Anzeigeeinheiten 45a bzw. 45b. Die Bildeingabeeinheiten 43a bzw. 43b umfassen eine Videokamera oder dergleichen, die den Arbeitsplatz jedes Anwenders erfasst und z. B. die Bilder 46a, 46b ausgibt, wie in 13 gezeigt ist. Die Bildsynthetisierungsvorrichtung 44a führt die Synthese so aus, dass das direkt von der Bildeingabevorrichtung 43a gelieferte Bild 46a und das über die Kommunikationsschaltung 42 von der Bildeingabevorrichtung 43b gelieferte Bild 46b transparent und erkennbar erscheinen. Die Bildsynthetisierungsvorrichtung 44a liefert dann das in 13 gezeigte Bild 47 zur Anzeigevorrichtung 45a. Die Bildsynthetisierungsvorrichtung 44b führt eine ähnliche Synthese aus, sodass das direkt von der Bildeingabevorrichtung 43b gelieferte Bild 46b und das über die Kommunikationsschaltung 42 von der Bildeingabevorrichtung 43a gelieferte Bild 46a transparent und erkennbar erscheinen, wobei sie dann das Bild 47, das in 13 gezeigt ist, zur Anzeigevorrichtung 45b liefert. Gemäß der vorliegenden Ausführungsform kann die Verringerung des Kontrastes verhindert werden, wobei die synthetisierten Bilder deutlich zu sehen sind.
Die Ausführungsform 8 (sie wird nicht als Teil der Erfindung betrachtet)
Im Folgenden wird die Ausführungsform 8 der vorliegenden Erfindung erklärt. 14 ist ein Blockschaltplan, der die Struktur einer Bildsynthetisierungsvorrichtung gemäß der Ausführungsform 8 zeigt. In 14 umfasst die oben erwähnte Bildsynthetisierungsvorrichtung eine Anzahl N (N ist eine natürliche Zahl größer als 1) Eingabeanschlüsse 51₁ –51_N , eine Anzahl N Luminanzsignal-Trenneinrichtungen 52₁ –52_N , eine Vergleichs-Berechnungseinheit 53, einen Bildschalter 54 und einen Ausgabeanschluss 55.
Eine Anzahl N von Bildern P₁–P_N wird jeweils von den Eingabeanschlüssen 51₁ –51_N eingegeben und zur entsprechenden Luminanzsignal-Trenneinrichtung 52₁ –52_N geliefert. Jede Luminanzsignal-Trenneinrichtung 52₁ –52_N liefert dann ein eingegebenes Bild P₁–P_N zum Bildschalter 54, wobei sie gleichzeitig das Luminanzsignal I_P1–I_PN vom Bild P₁–P_N trennt und dieses Luminanzsignal zur Vergleichs-Berechnungseinheit 53 liefert. Die Vergleichs-Berechnungseinheit 53 vergleicht die Pegel aller Luminanzsignale I_P1–I_PN und meldet das Luminanzsignal, das den niedrigsten Pegel besitzt, zum Bildschalter 54. Der Bildschalter 54 gibt dann das Bild, das das gemeldete Luminanzsignal besitzt, als das Ausgabebild P vom Ausgabeanschluss 55 aus.
In der Ausführungsform 8 ist der Fall, wenn N = 2 gilt, mit anderen Worten, der Fall, wenn zwei Bilder P₁ und P₂ mittels der Bildsynthetisierungsvorrichtung synthetisiert werden, in 15 gezeigt. In 15 umfasst die Bildsynthetisierungsvorrichtung die Eingabeanschlüsse 56₁ , 56₂ ; einen Komparator 57; einen Schmitt-Trigger 58; die Verzögerungsleitungen 59₁ , 59₂ ; einen Analogschalter 60; und einen Ausgabeanschluss 61.
Die Bildsignale S_P1, S_P2 der zwei Bilder P₁, P₂ werden jeweils von den Eingabeanschlüssen 56₁ , 56₂ eingegeben und dann zum entsprechenden Eingabeanschluss des Komparators 57 geliefert. Der Komparator 57 vergleicht die Luminanzsignale der Bildsignale S_P1, S_P2 und gibt ein Vergleichssignal mit dem Pegel "N" in dem Fall, wenn das Luminanzsignal des Bildsignals S_P1 größer als das Luminanzsignal des Bildsignals S_P2 ist, oder ein Vergleichssignal mit dem Pegel "L" in dem Fall, wenn die andere Situation auftritt, aus. Das Vergleichssignal wird dann mittels des Schmitt-Triggers 58 in eine Signalform geformt und zum Steueranschluss C des Analogschalters 60 geschickt.
Die Bildsignale werden über die Verzögerungsleitungen 59₁ , 59₂ , die jede eine vorgegebene Verzögerung besitzen, jeweils zu den Eingabeanschlüssen I0, I1 des Analogschalters 60 geliefert. In dem Fall, wenn ein Vergleichssignal mit "L"-Pegel vom Steueranschluss C eingegeben wird, wählt der Analogschalter 60 das vom Eingangsanschluss I0 eingegebene Ausgabesignal aus; in dem Fall, wenn ein Vergleichssignal mit "H"-Pegel eingegeben wird, wählt der Analogschalter 60 das vom Eingabeanschluss I1 eingegebene Ausgabesignal aus. Das ausgewählte Ausgabesignal wird dann vom Ausgabeanschluss 61 als ein Ausgabebildsignal SP ausgegeben.
Außerdem sind die Verzögerungsleitungen 59₁ , 59₂ für den Zweck vorgesehen, um den Eingabezeitunterschied zwischen dem analogen Signal und dem vom Analogschalter 60 eingegebenen oben erwähnten Vergleichssignal einzustellen. In dem Fall, wenn ein synthetisiertes Bildsignal S_p in hoher Qualität nicht speziell notwendig ist, können diese Strukturen jedoch weggelassen werden.
16 zeigt ein strukturelles Beispiel eines Bildkommunikationssystems, in dem die in 15 gezeigte Bildsynthetisierungsvorrichtung verwendet wird. In 16 sind zwei Bildkommunikations-Endgeräteinheiten 62a, 62b über die Kommunikationsschaltung 63 in einer Weise verbunden, dass eine interaktive Kommunikation möglich ist (bidirektionale Kommunikation). Die Bildkommunikations-Endgeräteinheiten 62a, 62b umfassen die Bildeingabeeinheiten 64a bzw. 64b; die Bildsynthetisierungseinheiten 65a bzw. 65b; und die Anzeigeeinheiten 66a bzw. 66b. Die Bildeingabeeinheiten 64a bzw. 64b umfassen eine Videokamera oder dergleichen, die den Arbeitsplatz jedes Anwenders erfasst und z. B. die Bilder 67a, 67b ausgibt, wie in 17 gezeigt ist. Die Bildsynthetisierungsvorrichtung 65a führt die Synthese so aus, dass das direkt von der Bildeingabevorrichtung 64a gelieferte Bild 67a und das über die Kommunikationsschaltung 63 von der Bildeingabevorrichtung 64b gelieferte Bild 67b transparent und erkennbar erscheinen. Die Bildsynthetisierungsvorrichtung 65a liefert dann das in 17 gezeigte Bild 68 zur Anzeigevorrichtung 66a. Die Bildsynthetisierungsvorrichtung 65b führt eine ähnliche Synthese aus, sodass das direkt von der Bildeingabevorrichtung 64b gelieferte Bild 67b und das über die Kommunikationsschaltung 63 von der Bildeingabevorrichtung 64a gelieferte Bild 67a transparent und erkennbar erscheinen, wobei sie dann das Bild 68, das in 17 gezeigt ist, zur Anzeigevorrichtung 66b liefert. Gemäß der vorliegenden Ausführungsform kann die Verringerung des Kontrastes verhindert werden, wobei die synthetisierten Bilder deutlich zu sehen sind.
Die Ausführungsform 9
Im Folgenden wird die Ausführungsform 9 der vorliegenden Erfindung erklärt. 18 ist ein Blockschaltplan, der die Struktur einer Bildsynthetisierungsvorrichtung gemäß der Ausführungsform 9 zeigt. In 18 umfasst die oben erwähnte Bildsynthetisierungsvorrichtung eine Anzahl M (M ist eine natürliche Zahl) Eingabeanschlüsse 71₁ –71_M und 72₁ –72_M , eine Anzahl N Eingabeanschlüsse 73₁–73_N und 74₁ –74_N ; eine Anzahl M Luminanzsignal-Trenneinrichtungen 75₁ –75_M , eine Anzahl N Luminanzsignal-Trenneinrichtungen 76₁ –76_N ; die Vergleichs-Berechnungseinheiten 77 und 78, die Bildschalter 79 und 80, die Verhältnis-Einstelleinrichtungen 81 und 82, die Addieren 83 und 84; und einen Ausgabeanschluss 85.
Eine Anzahl M von Standbildern S₁–S_M wird jeweils von den Eingabeanschlüssen 71₁ –71_M eingegeben und zu den entsprechenden Luminanzsignal-Trenneinrichtungen 75₁ –75_M geliefert. Jede Luminanzsignal-Trenneinrichtung 75₁ –75_M liefert dann ein eingegebenes Standbild S₁–S_M zum Bildschalter 79, wobei sie gleichzeitig das Luminanzsignal I_S1–I_SM vom entsprechenden Standbild S₁–S_M trennt und dieses Luminanzsignal zur Vergleichs-Berechnungseinheit 77 liefert. Eine Anzahl M von Schwellenwert-Signalen S_TS1–S_TSM wird jeweils von den Eingabeanschlüssen 72₁ –72_M eingegeben und zur Vergleichs-Berechnungseinheit 77 geliefert. Die Schwellenwert-Signale S_TS1–S_TSM entsprechen den vorausgehend für jedes Standbild S₁–S_M gesetzten Luminanzen-Schwellenwerten T_S1–T_SM. Die Vergleichs-Berechnungseinheit 77 vergleicht jedes Luminanzsignal I_S1–I_SM mit dem entsprechenden Schwellenwert-Signal S_TS1–S_TSM und liefert dann natürliche Zahlen k, die allen Luminanzsignalen I_Sk entsprechen, die kleiner als das oder gleich dem entsprechenden Schwellenwert-Signal S_TSk (1 ≤ ≤ M) sind, an den Bildschalter 79. In dem Fall, wenn alle Luminanzsignale I_S1–I_SM der M Standbilder S₁–S_M größer als die entsprechenden Schwellenwert-Signale S_TS1–S_TSM sind, werden diese Informationen dem Bildschalter 79 gemeldet. In dem Fall, wenn derartige Informationen gemeldet werden, d. h., Informationen, dass alle Luminanzsignale I_S1–I_SM größer als die Schwellenwert-Signale S_TS1–S_TSM sind, liefert der Bildschalter 79 alle Standbilder S₁–S_M zur Verhältnis-Einstelleinrichtung 81; in allen anderen Fällen liefert der Bildschalter 79 alle Standbilder S_k, die den gelieferten natürlichen Zahlen k entsprechen, zur Verhältnis-Einstelleinrichtung 81.
Die Verhältnis-Einstelleinrichtung 81 verteilt die vorgegebenen Syntheseverhältnisse des nicht eingegebenen visuellen Bildes über diejenigen der eingegebenen visuellen Bilder neu. Die eingegebenen visuellen Bilder S_k werden mit einer Summe aus dem vorgegebenen Syntheseverhältnis und dem neu verteilten Syntheseverhältnis multipliziert. Die Produkte S'_k werden zum Addierer 83 geliefert. Der Addierer 83 addiert die Standbilder S'_k, wobei die Summe als ein synthetisiertes Standbild zum visuellen Schalter 80 geliefert wird.
Eine Anzahl N von Videobildern V₁–V_N wird jeweils von den Eingabeanschlüssen 73₁ –73_N eingegeben und zu den entsprechenden Luminanzsignal-Trenneinrichtungen 76₁ –76_N geliefert. Jede Luminanzsignal-Trenneinrichtung 76₁ –76_N liefert dann ein eingegebenes Videobild V₁–V_N zum Bildschalter 88, wobei sie gleichzeitig das Luminanzsignal I_V1–I_VN von dem entsprechenden Videobild V₁–V_N trennt und dieses Luminanzsignal zur Vergleichs-Berechnungseinheit 78 liefert. Eine Anzahl N von Schwellenwert-Signalen S_TV1–S_TVN wird jeweils von den Eingabeanschlüssen 74₁ –74_N eingegeben und zur Vergleichs-Berechnungseinheit 78 geliefert. Die Schwellenwert-Signale S_TV1–S_TVN entsprechen den vorausgehend für jedes Videobild V₁–V_N gesetzten Luminanzen-Schwellenwerten T_V1–T_VN der Bildelemente. Die Vergleichs-Berechnungseinheit 78 vergleicht jedes Luminanzsignal I_V1–I_VN mit dem entsprechenden Schwellenwert-Signal S_TV1–S_TVN und liefert dann natürliche Zahlen k, die allen Luminanzsignalen I_Vk entsprechen, die kleiner als das oder gleich dem entsprechenden Schwellenwert-Signal S_TVk (1 ≤ k ≤ N) sind, an den Bildschalter 80. In dem Fall, wenn alle Luminanzsignale I_V1–I_VN der N Videobilder V₁–V_N größer als die entsprechenden Schwellenwert-Signale S_TV1–S_TVN sind, werden diese Informationen dem Bildschalter 80 gemeldet. In dem Fall, wenn derartige Informationen gemeldet werden, liefert der Bild schalter 80 das eingegebene synthetisierte Standbild S zum Addierer 84; in allen anderen Fällen liefert der Bildschalter 80 alle Videobilder V_k, die den gelieferten natürlichen Zahlen k entsprechen, zur Verhältnis-Einstelleinrichtung 82.
Die Verhältnis-Einstelleinrichtung 82 verteilt die vorgegebenen Syntheseverhältnisse der nicht eingegebenen visuellen Bilder über diejenigen der eingegebenen visuellen Bilder neu. Die eingegebenen Videobilder V_k werden mit der Summe der obigen Operation multipliziert, wobei das resultierende Videobild V'_k zum Addieren 84 ausgegeben wird. Der Addierer 84 gibt das synthetisierte Standbild S aus, wenn ein synthetisiertes Standbild eingegeben wird. Ansonsten werden die Videobilder V'_k durch den Addierer 84 addiert, wobei die Summe durch den Anschluss 85 als ein synthetisiertes Bild P ausgegeben wird.
Die Ausführungsform 10
Im Folgenden wird die Ausführungsform 10 der vorliegenden Erfindung erklärt. 19 ist ein Blockschaltplan, der eine Struktur einer Bildsynthetisierungsvorrichtung gemäß der Ausführungsform 10 zeigt. In 19 ist die Bildsynthetisierungsvorrichtung durch die Eingabeanschlüsse 91, 92₁ , 92₂ , 93₁ und 93₂ ; den Teilwiderstand 94; den Operationsverstärker 95; die Komparatoren 96₁ und 96₂ ; die Schmitt-Trigger 97₁ und 97₂ ; die Verzögerungsleitungen 98₁ –98₄ ; den Analogschalter 99 und den Ausgabeanschluss 100 gebildet.
Ein Bildsignal S_S des Standbildes S wird vom Eingabeanschluss 91 eingegeben und über die Verzögerungsleitung 98₁ , die eine vorgegebene Verzögerung besitzt, zum Eingabeanschluss I0 des Analogschalters 99 geliefert. Außerdem werden die zwei Bildsignale S_V1, S_V2 der Videobilder V₁, V₂ jeweils von den Eingabeanschlüssen 92₁ , 92₂ eingegeben und zu einem Eingabeanschluss der entsprechenden Komparatoren 961 bzw. 962 geliefert. Andererseits werden die zwei Schwellenwert-Signale S_T1, S_T2 von den Eingabeanschlüssen 93₁ bzw. 93₂ eingegeben und dann zu den anderen Anschlüssen der Komparatoren 96₁ bzw. 96₂ geliefert. Die Schwellenwert-Signale S_T1, S_T2 entsprechen den vorausgehend für die Videobilder V₁, V₂ bestimmten Luminanz-Schwellenwerten T₁, T₂. Die Komparatoren 96₁ , 96₂ vergleichen jeweils die Luminanzsignale jedes Bildsignals S_V1, S_V2 mit den entsprechenden Schwellenwert-Signalen S_T2, S_T2. In dem Fall, wenn jedes Luminanzsignal größer als sein jeweiliges entsprechendes Schwellenwert-Signal S_T1, S_T2 ist, wird ein Vergleichssignal mit dem Pegel "N" ausgege ben, während in dem Fall, wenn diese oben erwähnten Signale kleiner als ihre oder gleich ihren Schwellenwert-Signalen sind, ein Vergleichssignal mit dem Pegel "L" ausgegeben wird. Jedes Vergleichssignal wird anschließend mittels der Schmitt-Trigger 97₁ , 97₂ in eine Signalform geformt und dann zu den Steueranschlüssen C0, C1 des Analogschalters 99 geliefert.
Die Bildsignale S_V1, S_V2 werden über die Verzögerungsleitungen 98₁ , 98₂ , die jede eine vorgegebene Verzögerung besitzen, zu den Eingabeanschlüssen I1, I2 des Analogschalters 99 geliefert, wobei ein halb jedes Signals jeweils mittels des Teilwiderstands 94 summiert wird. Das resultierende Signal wird dann mittels des Operationsverstärkers 95 mit einem Verstärkungsverhältnis 1 einer "Pufferung" unterzogen und dann über die Verzögerungsleitung 98₄ , die außerdem eine vorgegebene Verzögerung besitzt, zum Eingabeanschluss I3 des Analogschalters 99 geliefert.
Der Analogschalter 99 setzt dann in dem Fall, wenn jedes der vom Steueranschluss C0, C1 eingegebenen Vergleichssignale sich auf dem Pegel "N" befindet, jeweils die Werte der Steuerdaten DC0, DC1 auf "1 ", oder er setzt in dem Fall, wenn jedes Signal einen Pegel "L" anzeigt, jeweils die Werte der Steuerdaten DC0, DC1 auf "0". In dem Fall, wenn die Werte der Steuerdaten DC0, DC1 "11" anzeigen, wird das vom Eingangsanschluss I0 eingegebene Ausgabesignal der Verzögerungsleitung 98₁ ausgewählt; in dem Fall, wenn die oben erwähnten Werte "01" anzeigen, wird das vom Eingabeanschluss I1 eingegebene Ausgabesignal der Verzögerungsleitung 98₂ ausgewählt; in dem Fall, wenn die oben erwähnten Werte "10" anzeigen, wird das vom Eingabeanschluss I2 eingegebene Ausgabesignal der Verzögerungsleitung 98₃ ausgewählt; und in dem Fall, wenn die oben erwähnten Werte "00" anzeigen, wird das vom Eingabeanschluss I3 eingegebene Ausgabesignal der Verzögerungsleitung 98₄ ausgewählt. Das ausgewählte Signal wird dann vom Ausgabeanschluss 100 als das synthetisierte Bildsignal S_V ausgegeben.
Außerdem sind die Verzögerungsleitungen 98₁ –98₄ für den Zweck vorgesehen, um den Eingabezeitunterschied zwischen dem vom Analogschalter 99 eingegebenen analogen Signal und dem oben erwähnten Vergleichssignal einzustellen. In dem Fall, wenn ein synthetisiertes Bildsignal S_V in hoher Qualität nicht speziell notwendig ist, können diese Strukturen jedoch weggelassen werden.
Außerdem ist in dem Fall, wenn zwei Standbilder vorgesehen sind, d. h., wie in der Anzahl der vorgesehenen Videobilder, eine Schaltung ähnlich zur Schaltung bezüglich der Bildsignale S_V1, S_V2 der Videobilder V₁, V₂ in 19 vorgesehen, wobei die Luminanzsignale jedes Standbildes mittels eines Komparators jeweils mit den vorausgehend gesetzten Schwellenwert-Signalen verglichen werden. Die Synthese wird dann mit einem vorgegebenen Syntheseverhältnis unter Verwendung eines Teilwiderstands oder dergleichen ausgeführt, wobei die Bildsignale S_V1, S_V2 der Videobilder V₁, V₂ zusammen mit den Bildsignalen der Standbilder in einen Analogschalter eingegeben werden, der erweitert worden ist, um zwei weitere Eingabeanschlüsse und zwei weitere Steueranschlüsse zu enthalten. Basierend auf dem vom Steueranschluss eingegebenen Vergleichssignal ist es in dem Fall, wenn ein Bildsignal eines Standbildes ausgewählt wird und wenn die Luminanzsignale der zwei Standbilder entweder größer oder kleiner als ein Schwellenwert-Signal sind, das auf dem Vergleichssignal von jedem Komparator bezüglich des Standbildes basiert, möglich, das Bildsignal des synthetisierten Standbildes auszuwählen. In allen anderen Fällen ist es entsprechend derselben Struktur möglich, das Bildsignal eines Standbildes auszuwählen, das ein Luminanzsignal besitzt, das kleiner als das oder gleich dem Schwellenwert-Signal ist.
20 zeigt ein strukturelles Beispiel eines Bildkommunikationssystems, in dem die Bildsynthetisierungsvorrichtung gemäß der oben erwähnten Ausführungsform 10 verwendet wird. In 20 sind zwei Bildkommunikations-Endgeräteinheiten 101a, 101b über die Kommunikationsleitung 102 in einer Weise verbunden, dass eine interaktive Kommunikation möglich ist (bidirektionale Kommunikation). Die Bildkommunikations-Endgeräteinheiten 101a, 101b umfassen die Videobild-Eingabevorrichtungen 103a bzw. 103b; die Standbildspeicher 104a bzw. 104b; die Bildsynthetisierungsvorrichtungen 105a bzw. 105b; und die Anzeigevorrichtungen 106a bzw. 106b. Die Videobild-Eingabevorrichtungen 103a bzw. 103b umfassen eine Kamera mit hoher Auflösung, die den Dokumententext und der gleichen mit feinen Einzelheiten erfassen kann.
Im Folgenden werden die Handlungen, wenn eine gemeinsam benutzte Zeichnung (ein gemeinsam benutztes Bild) durch die gemeinsame Verwendung des in die Bildkommunikations-Endgeräteeinheit 101a eingegebenen Standbildes konstruiert wird, erklärt. Anfangs wird in der Bildkommunikations-Endgeräteeinheit 101a, um ein Dokument mittels der Bildkommunikations-Endgeräteeinheiten 101a, 101b gemeinsam zu verwenden, das auf einer Laderampe bereitgestellte Dokument unter Verwendung der Videobild-Eingabevorrichtung 103a erfasst. Ein Vollbild des Videobildes wird dann im Standbildspeicher 104a als ein Standbild (z. B. das Bild 108 in 21) erhalten. Anschließend überträgt die Bildkommunikationsvorrichtung 107a das im Standbildspeicher 104a erhaltene Standbild über die Kommunikationsleitung 102. Die Bildkommunikations-Endgeräteeinheit 101b speichert das Standbild von der Bildkommunikations-Endgeräteeinheit 101a im Standbildspeicher 104b.
Anschließend wird in der Bildkommunikations-Endgeräteeinheit 101a das durch das Erfassen eines Arbeitsplatzes unter Verwendung der Videobild-Eingabevorrichtung 103a erhaltene Videobild (z. B. das Bild 109 nach 21) über die Kommunikationsleitung 102 mittels der Bildkommunikationsvorrichtung 107a zur Bildkommunikations-Endgeräteeinheit 101b übertragen. Außerdem führt die Bildsynthetisierungsvorrichtung 105a die Synthese so aus, dass das im Standbildspeicher 104a erhaltene Bild (siehe das Bild 108 nach 21); das resultierende Videobild (z. B. das Bild 109a nach 21) von der Videobild-Eingabevorrichtung 103a; und das über die Bildkommunikationsvorrichtung 107a gelieferte Videobild (z. B. das Bild 109b nach 21) von der Bildkommunikations-Endgeräteeinheit 101b transparent und erkennbar erscheinen. Ein Bild 110, wie in 21 gezeigt ist, wird dann durch die Anzeigevorrichtung 106a geliefert.
In der gleichen Weise wird in der Bildkommunikations-Endgeräteeinheit 101b das durch Erfassen eines Arbeitsplatzes unter Verwendung der Videobild-Eingabevorrichtung 103b erhaltene Videobild über die Kommunikationsleitung 102 mittels der Bildkommunikationsvorrichtung 107b zur Bildkommunikations-Endgeräteeinheit 101a übertragen. Außerdem führt die Bildsynthetisierungsvorrichtung 105b die Synthese so aus, dass das im Standbildspeicher 104b erhaltene Bild; das resultierende Videobild von der Videobild-Eingabevorrichtung 103b; und das über die Bildkommunikationsvorrichtung 107b gelieferte Videobild von der Bildkommunikations-Endgeräteeinheit 101a transparent und erkennbar erscheinen. Das resultierende Bild wird dann zur Anzeigevorrichtung 106b geliefert.
Wie im oben erwähnten erklärt worden ist, ist es möglich, ein Dokumentenbild oder dergleichen als ein Standbild mit hoher Genauigkeit gemeinsam zu verwenden, indem das obige Bildkommunikationssystem betrieben wird. Außerdem ist es ebenfalls möglich, dass sich mehrere Anwender gleichzeitig zusammenschließen und sowohl auf dieses Standbild zeigen als auch unter Verwendung eines Stiftes Anmerkungen machen.
Gemäß der oben erwähnten Ausführungsform 10 kann, wenn die Videobilder 109a, 109b und das Standbild 108 synthetisiert werden, zurückzuführen auf die Änderung des Syntheseprozesses entsprechend der Luminanz jedes Bildelements, die Verringerung des Kontrastes verhindert werden, wobei die synthetisierten Bilder deutlich betrachtet werden können.
Die Ausführungsform 11
Im Folgenden wird die Ausführungsform 11 der vorliegenden Erfindung erklärt. 22 ist ein Blockschaltplan, der die Struktur einer Bildsynthetisierungsvorrichtung gemäß der Ausführungsform 11 zeigt. In 22 umfasst die oben erwähnte Bildsynthetisierungsvorrichtung eine Anzahl M (M ist eine natürliche Zahl) Eingabeanschlüsse 111₁ –111_M , eine Anzahl N Eingabeanschlüsse 112₁ –112_N und 113₁ –113_N (N ist eine natürliche Zahl größer als 1); eine Anzahl M Luminanzsignal-Trenneinrichtungen 114₁ –114_M ; eine Anzahl N Luminanzsignal-Trenneinrichtungen 115₁ –115_N ; die Vergleichs-Berechnungseinheiten 116 und 117, die Bildschalter 118 und 119; und einen Ausgabeanschluss 120.
Eine Anzahl M von Standbildern S₁–S_M wird jeweils von den Eingabeanschlüssen 111₁ –111_M eingegeben und zur entsprechenden Luminanzsignal-Trenneinrichtung 114₁ –114_M geliefert. Jede Luminanzsignal-Trenneinrichtung 114₁ –114_M liefert ein eingegebenes Standbild S₁–S_M zum Bildschalter 118, wobei sie gleichzeitig das Luminanzsignal I_S1–I_SM vom entsprechenden Standbild S₁–S_M trennt und diese Luminanzsignale zur Vergleichs-Berechnungseinheit 116 liefert. Die Vergleichs-Berechnungseinheit 116 vergleicht die Pegel der Luminanzsignale I_S1–I_SM und meldet das Luminanzsignal mit dem niedrigsten Pegel zum Bildschalter 118. Der Bildschalter 118 liefert dann das Bild, das dieses gemeldete Luminanzsignal besitzt, als das Ausgabestandbild S zum Bildschalter 119.
Eine Anzahl N von Videobildern V₁–V_N wird jeweils von den Eingabeanschlüssen 112₁ –112_N eingegeben und zu der entsprechenden Luminanzsignal-Trenneinrichtung 115₁ –115_N geliefert. Jede Luminanzsignal-Trenneinrichtung 115₁ –115_N liefert dann ein eingegebenes Videobild V₁–V_N zum Bildschalter 119, wobei sie gleichzeitig das Luminanzsignal I_V1–I_VN vom entsprechenden Videobild V₁–V_N trennt und diese Luminanzsignale zur Vergleichs-Berechnungseinheit 117 liefert.
Eine Anzahl N von Schwellenwert-Signalen S_TV1–S_TVN wird jeweils von den Eingabeanschlüssen 113₁ –113_N eingegeben und zur Vergleichs-Berechnungseinheit 117 geliefert. Die Schwellenwert-Signale S_TV1–S_TVN entsprechen den vorausgehend für jedes Videobild V₁–V_N gesetzten Luminanzen-Schwellenwerten T_V1–T_VN. Die Vergleichs-Berechnungseinheit 117 vergleicht jedes Luminanzsignal I_V1–I_VN mit dem entsprechenden Schwellenwert-Signal S_TV1–S_TVN und liefert dann eine natürliche Zahl k, die dem Luminanzsignal mit der niedrigsten Luminanz von allen Luminanzsignalen I_Vk entspricht, die kleiner als das oder gleich dem entsprechenden Schwellenwert-Signal S_TVk (1 ≤ k ≤ N) sind, an den Bildschalter 119. In dem Fall, wenn alle Luminanzsignale I_V1–I_VN aller N Videobilder V₁–V_N größer als ihre entsprechenden Schwellenwert-Signale S_TV1–S_TVN sind, werden diese Informationen dem Bildschalter 110 gemeldet. In dem Fall, wenn derartige Informationen gemeldet werden, gibt der Bildschalter 119 das eingegebene synthetisierte Standbild S als das Ausgabebild P zum Ausgabeanschluss 120 aus; in allen anderen Fällen gibt der Bildschalter 119 das Videobild V_k, das der natürlichen Zahl k entspricht, als das Ausgabebild P zum Ausgabeanschluss 120 aus.
Die Ausführungsform 12
Im Folgenden wird die Ausführungsform 12 der vorliegenden Erfindung erklärt. 23 ist ein Blockschaltplan, der die Struktur einer Bildsynthetisierungsvorrichtung gemäß der Ausführungsform 12 zeigt. In 23 umfasst die oben erwähnte Bildsynthetisierungsvorrichtung eine Anzahl M (M ist eine natürliche Zahl) Eingabeanschlüsse 121₁ –121_M , eine Anzahl N Eingabeanschlüsse 122₁ –122_N (N ist eine natürliche Zahl größer als 1); einen Eingabeanschluss 123; eine Anzahl M Luminanzsignal-Trenneinrichtungen 124₁ –124_M ; eine Anzahl N Luminanzsignal-Trenneinrichtungen 125₁ –125_N ; die Vergleichs-Berechnungseinheiten 126 und 127, die Bildschalter 128 und 129; und einen Ausgabeanschluss 130.
Eine Anzahl M von Standbildern S₁–S_M wird jeweils von den Eingabeanschlüssen 121₁ –121_M eingegeben und zur entsprechenden Luminanzsignal-Trenneinrichtung 124₁ –124_M geliefert. Jede Luminanzsignal-Trenneinrichtung 124₁ –124_M liefert dann ein eingegebenes Standbild S₁–S_M zum Bildschalter 128, wobei sie gleichzeitig das Luminanzsignal I_S1–I_SM vom entsprechenden Standbild S₁–S_M trennt und diese Luminanzsignale zur Vergleichs-Berechnungseinheit 126 liefert. Die Vergleichs-Berechnungseinheit 126 vergleicht die Pegel der Luminanzsignale I_S1–I_SM und meldet das Luminanzsignal mit dem niedrigsten Pegel zum Bild schalter 128. Der Bildschalter 128 liefert dann das Bild, das dieses gemeldete Luminanzsignal besitzt, als das Ausgabestandbild S zum Bildschalter 129.
Eine Anzahl N von Videobildern V₁–V_N wird jeweils von den Eingabeanschlüssen 122₁ –122_N eingegeben und zu der entsprechenden Luminanzsignal-Trenneinrichtung 125₁ –125_N geliefert. Jede Luminanzsignal-Trenneinrichtung 125₁ –125_N liefert dann ein eingegebenes Videobild V₁–V_N zum Bildschalter 129, wobei sie gleichzeitig das Luminanzsignal I_V1–I_VN von dem entsprechenden Videobild V₁–V_N trennt und diese Luminanzsignale zur Vergleichs-Berechnungseinheit 127 liefert. Ein Schwellenwert-Signal S_TV wird vom Eingabeanschluss 123 eingegeben und zur Vergleichs-Berechnungseinheit 127 geliefert. Das Schwellenwert-Signal S_TV entspricht dem für alle Videobilder V₁–V_N gemeinsam vorgegebenen Luminanz-Schwellenwert T_V eines Bildelements. Die Vergleichs-Berechnungseinheit 127 vergleicht jedes Luminanzsignal I_V1–I_VN und meldet dann eine natürliche Zahl k, die dem Luminanzsignal mit der niedrigsten Luminanz von allen Luminanzsignalen I_Vk (1 ≤ k ≤ N) entspricht, an den Bildschalter 129. Außerdem vergleicht die Vergleichs-Berechnungseinheit 127 des Luminanzsignal mit der niedrigsten Luminanz I_Vk mit dem Schwellenwert-Signal S_TV. In dem Fall, wenn das Luminanzsignal I_Vk größer als die Schwellenwert-Signale S_TV ist, werden diese Informationen dem Bildschalter 129 gemeldet. In dem Fall, wenn derartige Informationen gemeldet werden, d. h., die Informationen, dass das Luminanzsignal I_Vk größer als die Schwellenwert-Signale S_TV ist, gibt der Bildschalter 119 das eingegebene synthetisierte Standbild S als das Ausgabebild P zum Ausgabeanschluss 130 aus; in allen anderen Fällen gibt der Bildschalter 129 das Videobild V_k, das der natürlichen Zahl k entspricht, als das Ausgabebild P zum Ausgabeanschluss 130 aus.

Claims

Verfahren zum Synthetisieren eines Bildes aus einer Mehrzahl von N Eingangsbildern P₁–P_N, wobei das Verfahren die folgenden Schritte umfaßt: Vergleichen der Luminanz I_p1xy–I_pNxy jedes Bildelements P_1xy–P_Nxy, das sich jeweils an denselben Koordinaten x, y jedes Eingangsbildes P₁–P_N befindet, mit einem Schwellenwert T₁–T_N, der jeweils für jedes Eingangsbild (SB4) gegeben ist; Bestimmen der Luminanz eines synthetisierten Bildelements p_xy an der Koordinate x, y eines synthetisierten Bildes durch Synthetisieren der Bildelemente p_1xy–p_Nxy mit einem vorgegebenen Syntheseverhältnis, das für jedes der Eingangsbilder P₁–P_N gegeben ist (SB11), falls die Luminanz I_p1xy–I_pNxy aller Bildelemente p_1xy–p_Nxy größer als der entsprechende Schwellenwert T₁–T_N ist (SB10), oder Bestimmen der Luminanz des synthetisierten Bildelements p_xy an der Koordinate x, y durch Synthetisieren lediglich jener Bildelemente von den Bildelementen p_1xy–p_Nxy, deren Luminanz kleiner oder gleich dem entsprechenden Schwellenwert T₁–T_N ist (SB14–SB16), falls die obenbeschriebene Bedingung nicht erfüllt ist (SB10); und Ausführen der obigen Prozedur für jeden Bildbereich, der synthetisiert werden soll (SB20–SB23).
Verfahren zum Synthetisieren eines Bildes aus N Videobildern und M Standbildern, wobei N eine natürliche Zahl größer als 1 ist und M eine natürliche Zahl ist, wobei das Verfahren die folgenden Schritte umfaßt: falls M gleich 1 ist (SE1), Übernehmen des einzigen Standbildes (S₁) als ein synthetisiertes Standbild S (SE25); falls M größer als 1 ist (SE1), Vergleichen der Luminanz I_s1xy–I_sMxy jedes Bildelements S_1xy–S_Mxy, das sich jeweils an denselben Koordinaten x, y der M Standbilder S₁–S_M befindet, mit einem vorgegebenen Schwellenwert T_s1–T_sM, der jeweils für jedes Standbild gegeben ist (SE5); Bestimmen eines synthetisierten Standbildelements x_xy an der Koordinate x, y eines synthetisierten Standbildes S; und Ausführen der obigen Prozedur für jeden Bildbereich, der synthetisiert werden soll (SE21–SE24); Vergleichen der Luminanz I_v1xy–I_vNxy jedes Bildelements v_1xy–v_Nxy, das sich jeweils an denselben Koordinaten x, y der N Videobilder V₁–V_N befindet, mit einem vorgegebenen Schwellenwert T_v1–T_vN, der jeweils für jedes Videobild gegeben ist (SE29); Übernehmen des synthetisierten Standbildelements s_xy an der Koordinate x, y des synthetisierten Standbildes S als ein synthetisiertes Bildelement p_xy an der Koordinate x, y eines synthetisierten Bildes P (SE37), falls die Luminanz I_v1_xy– I_vNxy aller Bildelemente v_1xy–v_Nxy größer als der entsprechende Schwellenwert T_v1–T_vN ist (SE35), oder Bestimmen der Luminanz des synthetisierten Bildelements p_xy an der Koordinate x, y des synthetisierten Bildes P unter jenen Bildelementen v_1xy–v_Nxy, deren Luminanz kleiner oder gleich dem entsprechenden Schwellenwert T_v1–T_vN ist (SE36–SE38), falls die obenbeschriebene Bedingung nicht erfüllt ist (SE35); und Ausführen der obigen Prozedur für jeden zu synthetisierenden Bildbereich (SE40–SE43).
Verfahren nach Anspruch 2, bei dem die Bestimmung synthetisierter Standbildelemente an der Koordinate x, y eines synthetisierten Standbildes durch Synthetisieren der Bildelemente s_1xy–s_Mxy mit einem vorgegebenen Syntheseverhältnis für jedes der Standbilder S₁–S_M erfolgt (SE12), falls die Luminanz I_s1xy– ^IsMxy der Bildelemente s_1xy–s_Mxy jeweils größer als der entsprechende Schwellenwert T_s1–T_sM ist (SE11), oder die Bestimmung des synthetisierten Standbildelements s_xy an der Koordinate x, y des synthetisierten Standbildes S durch Synthetisieren nur jener Bildelemente von den Bildelementen S_1xy–S_Nxy, deren Luminanz kleiner oder gleich dem entsprechenden Schwellenwert T_S1–T_M ist, mit einem beliebigen Syntheseverhältnis erfolgt (SE16, SE17), falls die obenbeschriebene Bedingung nicht erfüllt ist (SE11).
Verfahren nach Anspruch 2, bei dem ein Bildelement, das von den Bildelementen S_1xy–S_Mxy die niedrigste Luminanz besitzt, als das synthetisierte Standbildelement s_xy an der Koordinate x, y eines synthetisierten Standbildes S übernommen wird (SG10).
Verfahren nach Anspruch 4, das die folgenden Schritte umfaßt: nach dem Vergleichen jeder Luminanz I_v1xy–I_vNxy jedes Bildelements v_1xy– ^vNxy, das sich jeweils an denselben Koordinaten x, y von N Videobildern V₁–V_N befindet, Auswählen eines Bildelements mit der niedrigsten Luminanz aus den Bildelementen v_1xy–v_Nxy (SG31–SG35); Übernehmen des synthetisierten Standbildes s_xy an der Koordinate x, y des synthetisierten Standbildes S als ein synthetisiertes Bildelement p_xy an der Koordinate x, y eines synthetisierten Bildes P, falls die Luminanz des ausgewählten Bildelements größer als ein vorgegebener chwellenwert ist (SG36), oder Übernehmen des ausgewählten Bildelements als das synthetisierte Bildelement p_xy an der Koordinate x, y des synthetisierten Bildes P, falls die obenbeschriebenen Bedingungen nicht erfüllt sind; und Ausführen der obigen Prozedur für jeden Bereich, der synthetisiert werden soll.
Vorrichtung zum Synthetisieren eines Bildes aus einer Mehrzahl von N Eingangsbildern P₁–P_N, die umfaßt: eine Vergleichseinrichtung (24) zum Vergleichen der Luminanz I_p1xy–I_pNxy jedes Bildelements P_1xy–P_Nxy, das sich jeweils an denselben Koordinaten x, y jedes Eingangsbildes P₁–P_N befindet, mit einem Schwellenwert T₁–T_N, der jeweils für jedes Eingangsbild (SB4) gegeben ist; eine Synthetisierungseinrichtung (25, 26, 27) zum Bestimmen der Luminanz eines synthetisierten Bildelements p_xy an der Koordinate x, y eines synthetisierten Bildes durch Synthetisieren der Bildelemente p_1xy–p_Nxy mit einem vorgegebenen Syntheseverhältnis, das für jedes der Eingangsbilder P₁–P_N gegeben ist (SB11), falls die Luminanz I_p1xy–I_pNxy aller Bildelemente p_1xy–p_Nxy größer als der entsprechende Schwellenwert T₁–T_N ist (SB10), oder Bestimmen der Luminanz des synthetisierten Bildelements p_xy an der Koordinate x, y durch Synthetisieren lediglich jener Bildelemente von den Bildelementen p_1xy–p_Nxy, deren Luminanz kleiner oder gleich dem entsprechenden Schwellenwert T₁–T_N ist (SB14–SB16), falls die obenbeschriebene Bedingung nicht erfüllt ist (SB10); und eine Einrichtung zum Ausführen der obigen Prozedur für jeden Bildbereich, der synthetisiert werden soll (SB20–SB23).
Vorrichtung zum Synthetisieren eines Bildes aus N Videobildern und M Standbildern, wobei N eine natürliche Zahl größer als 1 ist und M eine natürliche Zahl ist, die umfaßt: eine Einrichtung zum Übernehmen des einzigen Standbildes (S₁) als ein synthetisiertes Standbild S (SE25), falls M gleich 1 ist (SE1); eine erste Vergleichseinrichtung (77) zum Vergleichen der Luminanz I_s1xy– I_sMxy jedes Bildelements S_1xy–S_Mxy, das sich jeweils an denselben Koordinaten x, y der M Standbilder S₁–S_M befindet, mit einem vorgegebenen Schwellenwert T_S1– T_sM, der jeweils für jedes Standbild gegeben ist (SE5), falls M größer als 1 ist (SE1); eine erste Synthetisierungseinrichtung (79, 81, 83) zum Bestimmen eines synthetisierten Standbildelements x_xy an der Koordinate x, y eines synthetisierten Standbildes S; eine Einrichtung zum Ausführen der obigen Prozedur für jeden Bildbereich, der synthetisiert werden soll (SE21–SE24) eine zweite Vergleichseinrichtung (77) zum Vergleichen der Luminanz I_v1xy– ^IvNxy jedes Bildelements v_1xy–v_Nxy, das sich jeweils an denselben Koordinaten x, y der N Videobilder V₁–V_N befindet, mit einem vorgegebenen Schwellenwert T_v1– T_vN, der jeweils für jedes Videobild gegeben ist (SE29); eine zweite Synthetisierungseinrichtung (80, 82, 84) zum Übernehmen des synthetisierten Standbildelements s_xy an der Koordinate x, y des synthetisierten Standbildes S als ein synthetisiertes Bildelement p_xy an der Koordinate x, y eines synthetisierten Bildes P (SE37), falls die Luminanz I_v1xy–I_vNxy aller Bildelemente v_1xy–V_Nxy größer als der entsprechende Schwellenwert T_v1–T_vN ist (SE35), oder Bestimmen der Luminanz des synthetisierten Bildelements p_xy an der Koordinate x, y des synthetisierten Bildes P unter jenen Bildelementen v_1xy–v_NXy, deren Luminanz kleiner oder gleich dem entsprechenden Schwellenwert T_v1–T_vN ist (SE36–SE38), falls die obenbeschriebene Bedingung nicht erfüllt ist (SE35); und eine Einrichtung zum Ausführen der obigen Prozedur für jeden zu synthetisierenden Bildbereich (SE40–SE43).
Vorrichtung nach Anspruch 7, bei der die erste Vergleichseinrichtung (77) erste Informationen ausgibt, falls die Luminanz I_s1xy–I_sMxy jeweils größer als der entsprechende Schwellenwert T_s1–T_sM ist, oder zweite Informationen bezüglich der Luminanzsignale ausgibt, die kleiner oder gleich dem entsprechenden Schwellenwert T_s1–T_sM sind, falls die obenbeschriebene Bedingung nicht erfüllt ist; wobei die erste Synthetisierungseinrichtung (79, 81, 83) das synthetisierte Standbild aus den Standbildern-S₁–S_M mit einem vorgegebenen Syntheseverhältnis für jedes der Standbilder S₁–S_M synthetisiert, falls die ersten Informationen eingegeben werden, oder das synthetisierte Standbild aus den entsprechenden Bildern zu den zweiten Informationen mit beliebigem Verhältnis synthetisiert, falls die zweiten Informationen eingegeben werden; wobei die zweite Vergleichseinrichtung (77) dritte Informationen ausgibt, die angeben, daß die entsprechende Bedingung erfüllt ist, falls die Luminanz I_v1xy– I_vNxy jeweils größer als die entsprechende Schwellenluminanz T_v1–T_vN ist, oder vierte Informationen bezüglich der Luminanzsignale, die kleiner oder gleich der entsprechenden Schwellenluminanz T_v1–T_vN sind, ausgibt, falls die obenbeschriebene Bedingung nicht erfüllt ist; und die zweite Synthetisierungseinrichtung (80, 82, 84) das synthetisierte Standbild als ein synthetisiertes Bild ausgibt, falls die dritten Informationen eingegeben werden, und ein Bild ausgibt, das aus jenem der Bilder V₁–V_N mit beliebigem Verhältnis synthetisiert ist, das den vierten Informationen entsprechende Luminanzsignale besitzt, falls die obenbeschriebene Bedingung nicht erfüllt ist.