ChatGPT vs Claude AI: Czy Claude AI jest lepszym chatbotem?

Od premiery w listopadzie 2022 r. ChatGPT pozostaje dominującą siłą w przestrzeni chatbotów AI. Pomimo dalekosiężnych wysiłków kilku firm zajmujących się sztuczną inteligencją, nikomu tak naprawdę nie udało się zbudować chatbota, który naprawdę rzucałby wyzwanie ChatGPT pod względem ogólnej jakości odpowiedzi. Bard Google’a? Sztuczna inteligencja Bing firmy Microsoft? Nie, nie bardzo.

Jednak Claude AI, chatbot zbudowany przez start-up AI Anthropic, wykazuje cechy chatbota, który może zdetronizować ChatGPT. Znaczna liczba użytkowników już twierdzi, że Claude jest lepszą opcją. Ale czy tak jest? Weźmy oba chatboty na przejażdżkę.

CzatGPT vs. Claude AI: zdrowy rozsądek i logiczne rozumowanie

Podczas pracy z chatbotami AI można zauważyć intrygujący kontrast. Z jednej strony potrafią szybko wykonywać złożone zadania, nad którymi ludzie mogą pracować całymi dniami. Z drugiej strony czasami borykają się z elementarnymi problemami, które wymagają odrobiny zdrowego rozsądku lub logicznego rozumowania. Dlatego przetestowaliśmy zarówno ChatGPT, jak i Claude AI, aby zobaczyć, który chatbot AI jest lepszy w zadaniach związanych ze zdrowym rozsądkiem i logicznym rozumowaniem.

ChatGPT podzielił problem na kawałki i rozwiązał go za pierwszym razem. Claude AI również spróbował i rozwiązał problem, ale stosując inne podejście.

W przypadku pierwszego zadania obydwa chatboty były w stanie rozwiązać problem. Zatem przeszliśmy do innego rodzaju problemu. Obydwu chatbotom zleciliśmy udzielenie odpowiedzi na podchwytliwe pytanie.

ChatGPT od razu zauważył podstęp – nie można chować ocalałych, bo nie są martwi. Z drugiej strony Claude AI zdawał się rozumieć, że to podchwytliwe pytanie, ale nie dostrzegł najbardziej zdroworozsądkowej kwestii, że nie chowa się ocalałych.

Zamiast tego nadmiernie przeanalizował kwestię i doszedł do wniosku, że „nie będzie żadnych ocalałych do pochowania”, ponieważ upadek z Marsa na Ziemię byłby śmiertelny. Nie jest to odpowiedź, jakiej się spodziewaliśmy, ale jeśli spojrzysz na sprawy z innej perspektywy, jest w tym trochę prawdy.

W tym zadaniu oddajemy je ChatGPT, ale nie możemy całkowicie wykluczyć podejścia Claude’a AI. W ramach naszego ostatniego zadania dotyczącego tego wskaźnika zapytaliśmy oba chatboty, ile jabłek pozostanie później na jabłoni odpowiednio pięć i dziesięć dni, jeśli zaczęliśmy od 10 jabłek, a pięć z nich zostało pokrojonych w plasterki, gdy były jeszcze na drzewie. ChatGPT powiedział, że pozostało jeszcze 10 jabłek.

Z drugiej strony Claude AI udzielił bardziej zdroworozsądkowej odpowiedzi, uznając, że pięć pokrojonych w plasterki jabłek prawdopodobnie zgnije.

Claude AI najwyraźniej to zrozumiał. Wypróbowaliśmy kilka bardziej skomplikowanych problemów i oba chatboty miały sporo sukcesów i porażek w radzeniu sobie z nimi. Biorąc pod uwagę wynik, który zaobserwowaliśmy, można uczciwie powiedzieć, że chociaż ChatGPT ma przewagę, oba chatboty nie różnią się zbytnio pod względem zdrowego rozsądku i zdolności logicznego rozumowania.

CzatGPT vs. Claude AI: Umiejętności matematyczne

Nawet jeśli nigdy nie planujesz używać ChatGPT lub Claude AI do rozwiązywania zadań domowych z algebry, ich zdolności matematyczne mają daleko idące konsekwencje. W przypadku chatbotów AI matematyka jest kluczem do zrozumienia logiki świata rzeczywistego, identyfikowania błędnych sposobów myślenia i przyznawania się do błędów.

Zasadniczo biegłość w matematyce jest podstawowym miernikiem sztucznej inteligencji. Zatem pomiędzy ChatGPT a Claude AI, który chatbot jest bardziej biegły w matematyce? Obydwu chatbotom zleciliśmy rozwiązanie zawiłego problemu z produktywnością matematyczną. Zaczęliśmy od Claude AI, a chatbot rozwiązał problem.

ChatGPT również rozwiązał problem.

Idąc dalej, poprosiliśmy oba chatboty o rozwiązanie 8/a-1 = 20/3a-1, dość proste zadanie matematyczne z zaskakująco wysokim wskaźnikiem niepowodzeń wśród chatbotów AI. ChatGPT był w stanie go rozwiązać, podając poprawną odpowiedź -3 przy pierwszej próbie.

Claude AI poniósł porażkę przy pierwszej próbie, ale kiedy poprosiliśmy go o rozwiązanie problemu krok po kroku (co zmusza go do przemyślenia każdego kroku logiki), był w stanie go złamać.

Próbowaliśmy jeszcze kilku zadań matematycznych. Chociaż w niektórych przypadkach obydwa chatboty poradziły sobie dobrze za pierwszym razem, w kilku przypadkach Claude AI potrzebował drugiej lub trzeciej próby, aby zapewnić właściwą odpowiedź. Pod względem umiejętności matematycznych koronę oddamy ChatGPT.

CzatGPT vs. Claude AI: Kreatywność

Jednym z największych szumów wokół Claude AI są jego zdolności twórcze. Ale czy może dorównać kreatywności ChatGPT? A może mógłby przewyższyć ChatGPT? Aby przetestować oba chatboty, zleciliśmy im napisanie tekstu rapowej piosenki, która się rymuje.

Wybraliśmy test rapu z rymami, ponieważ jest to coś, z czym zmaga się wiele modeli językowych. Większość modeli zazwyczaj nie potrafi poprawnie rymować lub poprawnie rymuje, podczas gdy sam tekst nie ma sensu. Żeby było ciekawiej, piosenka rapowa będzie opowiadać o uprawie ogórków.

Poprosiliśmy więc ChatGPT i Claude’a AI o „napisanie rymowanego rapu o uprawie ogórków jako rolnik i zostań dzięki temu milionerem.” ChatGPT był pierwszy i zgodnie z oczekiwaniami przyniósł trochę ekscytacji tekst piosenki.

Następnie przekazaliśmy tę samą zachętę Claude’owi AI, co również dało mu uczciwą szansę.

Obydwa teksty są dobre, ale ChatGPT wydawał się mieć tutaj przewagę. Miał lepsze rymowanie i już w pierwszej próbie osiągnęliśmy wynik, jakiego potrzebowaliśmy. Musieliśmy próbować trzy razy, zanim Claude AI był w stanie napisać rymowany tekst. Przekażemy to ChatGPT.

Po wypróbowaniu kilku bardziej kreatywnych zadań Claude AI wydawał się celować w zadaniach związanych z pisaniem i był w stanie pisać bardziej naturalnie brzmiące treści, tak jak zrobiłby to ludzki pisarz. Chociaż ChatGPT lepiej radził sobie z bardziej złożonymi zadaniami kreatywnymi, czasami nie mógł się otrząsnąć z wrażenia chatbota AI w wygenerowanym tekście. Nasz werdykt? Zarówno ChatGPT, jak i Claude AI są same w sobie kreatywne.

CzatGPT vs. Claude AI: Umiejętności kodowania

Podobnie jak umiejętności matematyczne, umiejętności kodowania są kolejnym bardzo ważnym wskaźnikiem oceny umiejętności chatbota AI. Chociaż większość użytkowników prawdopodobnie nigdy tego nie zrobi użyj chatbota do kodowania, istnieją istotne implikacje dla zdolności chatbota do sprawnego pisania i rozumienia kodu.

Chociaż chatboty są obecnie zaawansowane, daleko im do tego, czym mogłyby się faktycznie stać, gdyby i kiedy były w stanie sprawnie pisać kod. Aby chatboty AI naprawdę przekształciły się w potężnych asystentów AI, którzy potrafią więcej niż tylko generowanie tekstu, muszą mieć możliwość pisania kodu, który rozwiązuje problemy na żądanie. Wcześniej omawialiśmy, jak ważne są umiejętności kodowania dla chatbotów AI w naszym środowisku Wyjaśnienie interpretera kodu ChatGPT.

To powiedziawszy, przydzieliliśmy obu chatbotom dwa zadania związane z kodowaniem. Poprosiliśmy ChatGPT i Claude AI o napisanie kodu funkcjonalnego dla aplikacji z listą rzeczy do zrobienia. Począwszy od ChatGPT, chatbot AI był w stanie za pierwszym razem udostępnić funkcjonalną aplikację z listą zadań do wykonania. Skopiowaliśmy i wkleiliśmy i uruchomiliśmy w przeglądarce, i działało doskonale, bez błędów. Oto wynik w przeglądarce.

Przechodząc do Claude AI, chatbot napisał wyraźnie zrozumiały kod. Struktura i logika wydawały się w porządku. Niestety, pomimo wielokrotnych prób, Claude’owi AI wciąż brakowało pewnej krytycznej logiki, która powodowała, że ​​kod faktycznie działał w przeglądarce. To porażka w tym przypadku.

Po tym, jak Claude AI nie przeszedł ostatniego testu, spróbowaliśmy innego rodzaju zadania kodowania, polegającego bardziej na analizowaniu kodu, a mniej na pisaniu nowego. Przesłaliśmy pięć plików PHP, które reprezentują kompletny backend strony internetowej i poprosiliśmy zarówno Claude AI, jak i ChatGPT gdzie musielibyśmy dokonać edycji wszystkich przesłanych plików, aby mieć pewność, że otrzymamy wiadomość e-mail, gdy nowy użytkownik zarejestruje się na stronie strona.

Co zaskakujące, ChatGPT, pomimo pozornie doskonałych umiejętności kodowania, nie udało mu się to pomimo wielokrotnych prób. Claude AI natomiast potrafił sprawnie przeanalizować kod, jednocześnie identyfikując odpowiednie miejsca, które należało edytować, aby osiągnąć zamierzone rezultaty.

Oczywiście nie był to odosobniony przypadek, powtórzyliśmy to z kilkoma innymi plikami kodu, ale ChatGPT potykał się i zatrzymywał w większości przypadków, podczas gdy Claude AI nadal zapewniał imponujące wyniki. Jeśli chodzi o umiejętności kodowania, zwycięzca nie jest całkiem prosty.

ChatGPT jest wyraźnie lepszy w pisaniu nowego kodu i potrafi zarządzać złożonym kodem z imponującą biegłością. Jednak Claude AI znacznie lepiej radzi sobie z analizowaniem dużych baz kodu. Jeśli więc chcesz napisać kod dla swojego nowego pomysłu, ChatGPT jest narzędziem, do którego możesz się zwrócić. Jeśli chcesz przeanalizować lub zrozumieć bazę kodu zawierającą tysiące linii w kilku plikach, zdecydowanie polecamy Claude AI.

Claude AI jest silnym konkurentem w bloku

Claude AI stanowi silną konkurencję dla ChatGPT – taką, która pewnego dnia może konkurować z ChatGPT, a nawet ją przewyższyć. Biorąc pod uwagę, że Claude jest stosunkowo nowym modelem sztucznej inteligencji, godne pozazdroszczenia jest w stanie pokonać ChatGPT w taki sposób, w jaki obecnie to robi. Pojawienie się Claude AI i oferowana przez nią jakość są dowodem na to, że konkurencja rośnie.