Agenci AI to okropni freelancerzy

Nawet najlepsi agenci sztucznej inteligencji są raczej bezradni w pracy zdalnej online – tak wynika z eksperymentu podważającego tezę o masowym zastępowaniu pracowników biurowych przez sztuczną inteligencję.

Remote Labor Index to nowy wskaźnik opracowany przez badaczy z firmy Scale AI zajmującej się adnotacją danych oraz organizację non-profit Center for AI Safety (CAIS). Mierzy on zdolność modeli AI do automatyzacji ekonomicznie wartościowej pracy.

Naukowcy zlecili kilku wiodącym agentom AI symulację pracy na zlecenie i odkryli, że nawet najlepsi byli w stanie wykonać mniej niż 3% pracy, zarabiając 1810 dolarów z możliwych 143 991 dolarów. Naukowcy przyjrzeli się kilku narzędziom i uznali, że najbardziej odpowiednie okazały się Manus chińskiego startupu o tej samej nazwie, a następnie Grok z xAI, Claude z Anthropic, ChatGPT z OpenAI i Gemini z Google.

„Mam nadzieję, że da to znacznie dokładniejszy obraz tego, co dzieje się z możliwościami sztucznej inteligencji” – mówi Dan Hendrycks, dyrektor CAIS. Dodaje, że chociaż niektórzy agenci znacząco poprawili się w ciągu ostatniego roku, nie oznacza to, że sytuacja utrzyma się w tym samym tempie.

Spektakularny postęp w dziedzinie sztucznej inteligencji doprowadził do spekulacji, że sztuczna inteligencja wkrótce przewyższy ludzką i zastąpi ogromną liczbę pracowników. W marcu Dario Amodei, prezes Anthropic, zasugerował, że 90% zadań związanych z kodowaniem zostanie zautomatyzowanych w ciągu kilku miesięcy.

Poprzednie fale rozwoju sztucznej inteligencji (AI) zainspirowały błędne przewidywania dotyczące redukcji zatrudnienia, na przykład dotyczące rychłego zastąpienia radiologów algorytmami AI.

Naukowcy wygenerowali szereg zleceń dla freelancerów, korzystając z usług zweryfikowanych pracowników Upwork. Zadania obejmowały szeroki zakres prac, w tym projektowanie graficzne, montaż wideo, tworzenie gier oraz prace administracyjne, takie jak scrapowanie danych. Opis każdego zlecenia został połączony z katalogiem plików potrzebnych do jego wykonania oraz przykładem ukończonego projektu stworzonego przez człowieka.

Hendrycks twierdzi, że chociaż modele sztucznej inteligencji (AI) w ostatnich latach poprawiły swoje umiejętności kodowania , matematyki i logicznego rozumowania , nadal mają trudności z korzystaniem z różnych narzędzi i wykonywaniem złożonych zadań obejmujących wiele kroków. „Nie dysponują pamięcią długotrwałą i nie potrafią ciągle uczyć się na podstawie doświadczeń. Nie potrafią nabywać umiejętności w trakcie pracy, tak jak ludzie” – mówi.

Analiza stanowi kontrargument do benchmarku pracy ekonomicznej, zaprezentowanego we wrześniu przez OpenAI, o nazwie GDPval , który rzekomo mierzy pracę wartościową ekonomicznie. Według GDPval, pionierskie modele sztucznej inteligencji, takie jak GPT-5, zbliżają się do ludzkich możliwości w 220 zadaniach w różnych zawodach biurowych. OpenAI nie udzieliło komentarza.

„Od lat dyskutujemy o sztucznej inteligencji i miejscu pracy, ale większość naszych rozmów ma charakter hipotetyczny lub teoretyczny” – dodaje Bing Liu, dyrektor ds. badań w Scale AI.

Liu i Hendrycks przyznają, że nowy benchmark nie jest idealnym miernikiem wpływu AI na gospodarkę. Wiele zawodów obejmuje zadania, których ten wskaźnik nie obejmuje. W rzeczywistości wielu freelancerów prawdopodobnie również wykorzysta AI jako narzędzie zwiększające ich produktywność.

Jednak pogląd, że sztuczna inteligencja już zabiera pracę, nabiera rozpędu. W tym tygodniu Amazon ogłosił, że zlikwiduje 14 000 miejsc pracy, co częściowo przypisuje gwałtownemu rozwojowi generatywnej sztucznej inteligencji. „Ta generacja sztucznej inteligencji to najbardziej rewolucyjna technologia, jaką widzieliśmy od czasów internetu” – napisała Beth Galetti, starsza wiceprezes ds. doświadczeń kadrowych i technologii w Amazon, w publicznie udostępnionej notatce. „Umożliwia ona firmom wprowadzanie innowacji znacznie szybciej niż kiedykolwiek wcześniej (w istniejących segmentach rynku, jak i w zupełnie nowych)”.

Jednakże, jeśli Indeks Pracy Zdalnej jest jakimkolwiek wskaźnikiem, mało prawdopodobne jest, aby AI objęła którekolwiek z tych zwolnionych stanowisk.

Martwisz się, że sztuczna inteligencja odbierze Ci pracę? Daj mi znać, wysyłając e-mail na adres [email protected] .

To jest wydanie biuletynu AI Lab Willa Knighta . Przeczytaj poprzednie biuletyny tutaj.