ChatGPT는 아직 인간 스마트 계약 감사인을 이길 수 없습니다 OpenZeppelin의 Ethernaut가 도전합니다.

생성적 인공지능(AI)은 다양한 작업을 수행할 수 있지만 최근 테스트에 따르면 OpenAI의 ChatGPT-4는 인간 감사인만큼 스마트 계약을 효과적으로 감사할 수 없습니다.

인간 감사인을 대체할 수 있는 AI 도구가 될 수 있는지 여부를 결정하기 위해 블록체인 보안 회사인 OpenZeppelin의 Mariko Wakabayashi와 Felix Wegener는 ChatGPT-4를 해당 회사의 Ethernaut 보안 도전과 대결시켰습니다.

AI 모델은 대부분의 레벨을 통과했지만 2021년 9월 훈련 데이터 기준 이후에 추가된 레벨에서는 웹 연결 가능성을 허용하는 플러그인이 테스트에 포함되지 않아 어려움을 겪었습니다.

Ethernaut는 해킹을 위한 28개의 스마트 계약 또는 레벨로 구성된 Ethereum Virtual Machine에서 플레이되는 워게임입니다. 다른 말로하면, 올바른 악용을 찾으면 레벨이 완료됩니다.

• 이더리움 구매가 지금은 너무 늦은가요? ETH 가격이 계속 하락하고 있지만 친환경 에코테라는 450만 달러를 기록했습니다 – 2023년 100배의 잠재력?
• 미국 정부의 FTX 조사 촉구, 항소 법원에 이르다 – 최신 상황은 이렇습니다.
• Dubis 암호 화폐를 받아들이는 것이 미국 국가 안보의 미래를 결정할 수 있다.

OpenZeppelin의 AI 팀에 따르면 ChatGPT-4는 악용을 찾고 28개 중 20개의 레벨을 통과했지만, 초기 프롬프트 이후에 일부 레벨을 해결하기 위해 추가적인 프롬프트가 필요했습니다. 이에 대한 질문에 Wegener는 OpenZeppelin은 모든 Ethernaut 레벨을 완료할 수 있는 감사인을 예상하며, 모든 유능한 작성자가 그렇게 할 수 있어야 한다고 답변했습니다.

Wakabayashi와 Wegener는 ChatGPT-4가 현재까지는 인간 감사인을 대체할 수 없지만, 스마트 계약 감사인의 효율성을 증가시키는 도구로 사용할 수 있으며 보안 취약점을 검출할 수 있다는 점을 강조했습니다.

“Web3 BUIDLers 커뮤니티에게 위로의 말씀을 전합니다 – 일하시는 것은 안전합니다! 당신이 무엇을 하는지 안다면, AI는 당신의 효율성을 높이는 도구로 사용될 수 있습니다.”

Dubis의 질문에 대해 Wegener는 감사 요구 사항이 높아서 고품질 감사를 제공할 수 있는 역량을 초과하는 감사 수요가 있으며, Web3에서 감사인으로 고용되는 사람 수가 계속해서 증가할 것으로 예상하고 있다고 말했습니다.

관련 기사: Satoshi Nak-AI-moto: 비트코인의 창시자가 AI 챗봇이 되었습니다

Wakabayashi는 5월 31일 트위터 스레드에서 ChatGPT와 같은 대형 언어 모델(LLMs)은 스마트 계약 보안 감사에 아직 준비되지 않았으며, 이는 상당한 정확도를 필요로하는 작업이며 LLMs가 텍스트를 생성하고 인간과 대화하는 데 최적화되어 있기 때문입니다.

LLMs는 항상 가장 가능성이 높은 결과를 예측하려고 하기 때문에 출력이 일관되지 않습니다. 이는 높은 확신과 정확성이 필요한 작업에 대한 큰 문제입니다.

— Mariko (@mwkby) May 31, 2023

그러나 Wakabayashi는 맞춤형 데이터와 출력 목표를 사용하여 훈련 된 AI 모델이 대중에게 제공되는 대량의 데이터로 훈련 된 챗봇보다 신뢰성이 높은 솔루션을 제공할 수 있다고 제안했습니다.

이것이 web3 보안에서 AI에 대한 의미는 무엇입니까? 더 구체적인 취약성 데이터와 명확한 출력 목표를 사용하여 AI 모델을 훈련하면 대량의 데이터로 훈련 된 강력한 LLMs보다 더 정확하고 신뢰성이 높은 솔루션을 구축할 수 있습니다.

— Mariko (@mwkby) May 31, 2023

AI Eye: 25K traders bet on ChatGPT’s stock picks, AI sucks at dice throws, and more

We will continue to update WiCoco; if you have any questions or suggestions, please contact us!