Sztuczna inteligencja i ChatGPT — 27 ciekawostek

Jak nazywa się generowanie przez duże modele językowe fałszywych informacji?

Termin ten spopularyzowali naukowcy z Google w 2018 roku, a problem potrafi się pogarszać, gdy modele używa się do rozumowania.

W jakim rodzaju uczenia maszynowego program doskonali zachowanie na podstawie nagród i kar?

Do klasycznych technik uczenia maszynowego należą drzewa decyzyjne, regresja logistyczna i maszyny wektorów nośnych.

Ilu użytkowników osiągnął ChatGPT w ciągu dwóch miesięcy od uruchomienia?

TikTokowi osiągnięcie tej liczby użytkowników zajęło dziewięć miesięcy.

Jaki typ sieci neuronowych ma kluczowe znaczenie w przetwarzaniu obrazów?

Skupiają się one na połączeniach między neuronami leżącymi blisko siebie; niższe warstwy wykrywają krawędzie, wyższe rozpoznają np. twarze.

Kto w 1956 roku, na konferencji w Dartmouth, wymyślił termin „sztuczna inteligencja”?

Ten sam badacz założył kilka lat później laboratorium AI w Massachusetts Institute of Technology.

Który program DeepMind rozwiązał w 2020 roku problem przewidywania trójwymiarowej struktury białek?

Za to osiągnięcie Demis Hassabis i John Jumper zostali uhonorowani Nagrodą Nobla w 2024 roku.

Która logika dopuszcza stopniowanie prawdziwości zdań i pozwala modelować pojęcia nieostre?

Z kolei logiki niemonotoniczne pozwalają wycofywać wcześniejsze wnioski w świetle nowych informacji.

W którym roku program AlphaGo pokonał mistrza świata w go?

Kolejnymi kamieniami milowymi były architektura transformera oraz modele GPT-3 (2020) i GPT-4 (2023).

W którym roku Alan Turing zaproponował test polegający na udawaniu człowieka w zdalnej rozmowie?

Test Turinga uznaje maszynę za inteligentną, jeśli w rozmowie nie da się jej odróżnić od człowieka.

Na jakim mechanizmie opiera się architektura transformera?

Transformery przetwarzają dane równolegle, co pozwala szkolić je na znacznie większych zbiorach danych niż sieci rekurencyjne.

Która metoda optymalizacji stanowi podstawę treningu sieci neuronowych?

Inną drogą są obliczenia ewolucyjne, w tym algorytmy genetyczne, które udoskonalają populację rozwiązań przez mutacje i selekcję.

Co w generatywnych sieciach przeciwstawnych (GAN) ocenia drugi z dwóch modeli?

Sieci GAN cechowały się niestabilnym treningiem i skłonnością do powtarzania tych samych obrazów, dlatego wyparły je modele dyfuzyjne.

Które języki programowania powstały jako uboczny efekt prac laboratoriów SI?

Laboratoria SI stały się też „rozsadnikiem” kultury hakerskiej, a ich postęp przerywały tzw. zimy AI.

Ile ukrytych warstw musi mieć co najmniej sieć neuronowa, by nazywać ją zazwyczaj głęboką?

W najprostszej postaci sieć ma wejście, co najmniej jedną ukrytą warstwę połączeń i wyjście, a każde połączenie ma funkcję aktywacji.

Na czym polega wstępny trening dużych modeli językowych?

Po nim następuje docelowy trening, który ma poprawić użyteczność, wiarygodność i bezpieczeństwo modelu.

W którym roku sieć AlexNet wygrała konkurs ImageNet, otwierając erę uczenia głębokiego?

AlexNet wyprzedził metody tradycyjne o ponad 10 punktów procentowych; zbiór ImageNet zawierał miliony oznaczonych zdjęć.

Jaki algorytm analizuje w grach dwuosobowych drzewo możliwych ruchów obu graczy?

Gry logiczne, takie jak szachy i go, zalicza się do tzw. problemów AI-trudnych.

Jaką techniką dostraja się modele językowe do oczekiwań ludzi?

Już w 2016 roku opisano konkretne problemy bezpieczeństwa SI, np. podatność na manipulację funkcją nagrody czy bezpieczną eksplorację.

W jakim rodzaju uczenia model sam tworzy zadania pomocnicze, np. przewidywanie zasłoniętych słów?

Dzięki temu duże modele można wstępnie trenować na ogromnych, nieopisanych zbiorach danych, co wykorzystują modele językowe.

Z jakiej dziedziny fizyki pochodzi zjawisko, do którego nawiązuje nazwa modeli dyfuzyjnych?

Generowanie nowego obrazu zaczyna się od losowego szumu, z którego model iteracyjnie wydobywa pożądaną strukturę.

Który algorytm jest przykładem heurystyki kierującej przeszukiwanie ku obiecującym rozwiązaniom?

Proste przeszukiwanie wszerz zawodzi w rzeczywistych problemach, bo liczba możliwych stanów rośnie zbyt szybko.

Kto, obok Geoffreya Hintona i Yanna LeCuna, dostał w 2018 roku Nagrodę Turinga za uczenie głębokie?

Postęp uczenia głębokiego napędzały też procesory graficzne (GPU) i ogromne zbiory danych gromadzone w Internecie.

Jak nazywa się najpopularniejszy rodzaj rekurencyjnych sieci neuronowych?

Sieci rekurencyjne łączą wyjście z wejściem, co pozwala im tworzyć pamięć krótkotrwałą; sieci jednokierunkowe przesyłają dane tylko w jedną stronę.

Jaki szum dodaje się stopniowo do obrazu podczas treningu modelu dyfuzyjnego?

Modele dyfuzji ukrytej, jak Stable Diffusion, pracują na skompresowanej reprezentacji obrazu utworzonej przez autoenkoder.

Kto, wraz z Herbertem Simonem, założył pierwsze laboratorium AI na Carnegie Mellon University?

W latach 50. XX wieku odbyło się też pierwsze seminarium poświęcone SI, znane jako Warsztaty w Dartmouth.

Na ilu parach obrazów i podpisów wytrenowano model CLIP firmy OpenAI?

CLIP jest przykładem modelu multimodalnego, który łączy tekst i obraz we wspólnej przestrzeni reprezentacji.

Jaka francuska firma opracowała program NooK, który w 2022 roku pokonał mistrzów świata w brydżu?

Program wygrał z ośmiorgiem mistrzów świata w uproszczonej wersji brydża sportowego.