SEGMENTIEREN VON VIDEOS AUF DER GRUNDLAGE EINES GEWICHTETEN WISSENSGRAPHEN

• Main Authors: Hu, Yan, Wang, Jian Gong, Yin, Kun Yan, Miao, Wan Wan, Wang, Lian Na
• Format: Patent
• Language: German
• Published: 29.09.2022
• Subjects: CALCULATING; COMPUTING; COUNTING; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRICITY; PHYSICS; PICTORIAL COMMUNICATION, e.g. TELEVISION

System, Verfahren und Computerprogrammprodukt zum Segmentieren von Videos. Das System umfasst mindestens eine Verarbeitungskomponente, mindestens eine Speicherkomponente, ein Video, eine Extraktionskomponente und eine Grafikkomponente. Die Extraktionskomponente ist so konfiguriert, dass sie Bild- und Textdaten aus dem Video extrahiert, Entitäten in den Bilddaten ermittelt, den Entitäten in den Bilddaten mindestens eine Entitätsbeziehung zuweist, Entitäten in den Textdaten ermittelt und den Entitäten in den Textdaten mindestens eine Entitätsbeziehung zuweist. Die Grafikkomponente ist so konfiguriert, dass sie für die Entitätsbeziehungen, die den Entitäten in den Bilddaten zugewiesen wurden, einen Bild-Wissensgraphen erzeugt, für die Entitätsbeziehungen, die den mindestens zwei Entitäten in den Textdaten zugewiesen wurden, einen Text-Wissensgraphen erzeugt, und auf der Grundlage des Bild- und des Textwissensgraphen einen gewichteten Wissensgraphen erzeugt. A system, method, and computer program product for segmenting videos. The system includes at least one processing component, at least one memory component, a video, an extraction component, and a graphing component. The extraction component is configured to extract image and text data from the video, identify entities in the image data, assign at least one entity relation to the entities in the image data, identifying entities in the text data, and assign at least one entity relation to the entities in the text data. The graphing component is configured to generate an image knowledge graph for the entity relations assigned to the entities in the image data, generate a text knowledge graph for the entity relations assigned to the at least two entities in the text data, and generate a weighted knowledge graph based on the image and text knowledge graphs.