Oto kilka problemów, które wymyślił mój małpi umysł.
1.Smart! = Wszystko wiedząc
Eksplozja samodoskonalenia AI czyni ją mądrzejszą. Bycie mądrzejszym nie oznacza poznania większej liczby faktów. Myślę, że to dość wybredny argument, ale myślę, że warto o tym pomyśleć.
Bardzo mądry lekarz, który nie zna twojej historii, może nadal dokonać gorszego wyboru niż mniej inteligentny z lepszymi danymi.
2. Czy to wszystko dla ludzi? Czy to dla wszystkich ludzi?
ASI, który osiąga wyższy poziom, nie może być zainteresowany naszym samopoczuciem.
Kontrolowany ASI może nadal działać tylko dla nielicznych, jeśli ci nieliczni zdecydują się na złe cele, moglibyśmy cofnąć się.
3 trudne ASI
Umysł naukowy niekoniecznie pełen współczucia lub empatii.
4. Bycie mądrym i niemądrym
Wielkie umysły wciąż popełniają błędy: * w ustalaniu swoich celów i * w realizacji planu, aby go osiągnąć.
Intelekt geata nie gwarantuje braku celowości ani braku martwych punktów.
5. Limity
Jeśli istnieją granice egzystencji (ograniczenia prędkości typu światła), wtedy AI również będzie nimi podlegać. Może to oznaczać, że są rzeczy, których nawet ASI nie dostanie. Ponieważ nasz umysł może mieć ograniczenia oparte na swojej strukturze, kolejna sztuczna inteligencja może mieć również ograniczenia - i nawet jeśli poprawi się uppn, może osiągnąć granice, których nie może znaleźć rozwiązań, ponieważ jest „zbyt głupie”.
6. Nie dostaniemy tego
Zrozumienie przez ASI niektórych aspektów świata może nie być komunikatywne dla większości ludzi. Po prostu tego nie dostaniemy (nawet jeśli jesteśmy w stanie wszystko zrozumieć, to nie znaczy, że to zrozumiemy).
7. Jak z niego korzystać?
Możemy sami siebie zniszczyć, a sztuczna inteligencja dzięki technologii, którą pomaga nam budować. To nie musi być bomba. Może to być geoinżynieria lub cudowne leki.
Jest to szczególnie intensywne, gdy ASI jest już potężny, ale niewystarczająco silny, aby przewidzieć negatywne konsekwencje (lub i tak go zignorujemy).