Automatyczne opisywanie zdjęć (image captioning)

Image captioning · id imagecaptioning · aliases: image captioning, caption generation, opisywanie obrazów, podpisy do zdjęć

Generowanie opisu obrazu w języku naturalnym przez model łączący enkoder obrazu z dekoderem tekstu.

Generating a natural-language description of an image with a model joining an image encoder and a text decoder.

In one sentence

Program patrzy na zdjęcie i pisze jedno lub kilka zdań o tym, co na nim widać.

Software looks at a photo and writes a sentence or two about what it shows.

Problem it solves

Osoby niewidome nie widzą zdjęć w sieci, a milionów obrazów nie da się ręcznie opisać do wyszukiwania.

Blind people cannot see images online, and millions of pictures cannot be described by hand for search.

What it does

Jak ktoś, kto przez telefon opowiada drugiej osobie, co ma przed oczami: krótko i o tym, co najważniejsze.

Like someone describing over the phone what is in front of them: briefly, and only what matters.

Everyday example

Telefon z włączonym czytnikiem ekranu mówi: „pies leży na kanapie obok śpiącego dziecka”.

A phone with the screen reader on says: 'a dog lying on a sofa next to a sleeping child'.

This concerns you if you…

Related topics

Sources