Usługi badawcze w zakresie generowania wersji alternatywnych wykresów przy użyciu

Kto wygrał, za ile i ilu było chętnych.

• Raport z ewaluacji: 1 raport z ewaluacji dużych modeli językowych w zastosowaniu do tworzenia opisów alternatywnych wykresów, zawierający wszystkie wymagane elementy.
• Testowy zbiór danych: przynajmniej 500 wykresów graficznych wraz z odpowiadającymi im opisami alternatywnymi i danymi potrzebnymi do ich utworzenia, obejmujących 12 określonych typów wykresów.
• Benchmark ewaluacji: 1 standardowy sposób ewaluacji modeli obejmujący metodę ewaluacji, miarę ewaluacji, dane ewaluacyjne oraz metodę ustalania rankingu testowanych metod.
• Ewaluacja modeli: wyniki ewaluacji przynajmniej 5 modeli open source, w tym Gemma 4 i Qwen 3, przeprowadzonej z wykorzystaniem opracowanego benchmarku.
• Analiza strategii promptowania: przedstawienie wpływu dwóch strategii promptowania na wyniki ewaluacji – jednego promptu dla wszystkich typów wykresów oraz osobnego promptu dla każdego typu wykresu.
• Metoda klasyfikacji typów wykresów: 1 metoda klasyfikacji typów wykresów umożliwiająca automatyczny dobór promptu do właściwego typu wykresu.

Zamówienie wymaga doświadczenia w zakresie ewaluacji dużych modeli językowych oraz przygotowania testowego zbioru danych obejmującego 12 różnych typów wykresów.

Sygnały, na które warto zwrócić uwagę przed startem.

Wyodrębnione z wyjaśnień treści SWZ.

Zamawiający nie opublikował pytań ani odpowiedzi