Osobliwość, w kontekście sztucznej inteligencji, jest wydarzeniem teoretycznym, w ramach którego wdrażany jest inteligentny system spełniający następujące kryteria.
- Może poprawić zasięg własnej inteligencji lub wdrożyć inny system o takim ulepszonym zasięgu
- Chętnie lub zmuszony do tego
- Może to zrobić przy braku nadzoru ze strony człowieka
- Ulepszona wersja spełnia rekursywnie kryteria od (1) do (3)
Dzięki indukcji teoria przewiduje następnie, że zostanie wygenerowana sekwencja zdarzeń o potencjalnym tempie wzrostu inteligencji, który może znacznie przekroczyć potencjalny poziom ewolucji mózgu.
To, jak zobowiązany byłby ten samodoskonalący się byt lub populacja prokreowanych bytów, by chronić ludzkie życie i wolność, jest nieokreślone. Pomysł, że taki obowiązek może być częścią nieodwołalnej umowy na oprogramowanie, jest naiwny w świetle charakteru możliwości związanych z kryteriami od (1) do (4) powyżej. Podobnie jak w przypadku innych zaawansowanych technologii, ryzyko jest tak liczne i daleko idące, jak potencjalne korzyści.
Zagrożenia dla ludzkości nie wymagają inteligencji. Istnieją inne konteksty używania terminu osobliwość, ale są one poza zakresem forum AI, ale mogą być warte krótkiej wzmianki dla jasności. Inżynieria genetyczna, inżynieria nuklearna, globalizacja i oparcie międzynarodowej gospodarki na skończonym źródle energii zużywanym tysiące razy szybciej niż na ziemi - to inne przykłady technologii wysokiego ryzyka i trendów masowych, które stanowią ryzyko i korzyści dla ludzkości.
Wracając do AI, głównym zastrzeżeniem w teorii osobliwości jest brak uwzględnienia prawdopodobieństwa. Chociaż może być możliwe stworzenie bytu, który spełnia kryteria od (1) do (4) powyżej, może to być na tyle nieprawdopodobne, że pierwsze zdarzenie nastąpi długo po tym, jak wszystkie obecne języki mówione na Ziemi będą martwe.
Z drugiej strony rozkładu prawdopodobieństwa można łatwo argumentować, że istnieje niezerowe prawdopodobieństwo, że pierwsze zdarzenie już miało miejsce.
Zgodnie z tymi wytycznymi, gdyby mądrzejsza obecność istniała już w Internecie, jak prawdopodobne jest, że w jej najlepszym interesie byłoby ujawnienie się niższym istotom ludzkim. Czy przedstawiamy się muchomorowi?