본문 바로가기

AI 인공지능17

AI 코드리뷰 자동 머지 파이프라인이 3일간 멈춘 이유 혹시 이런 상상 해보신 적 있나요?기획서 넣으면 AI가 알아서 작업을 쪼개고, 코드 짜고, PR 올리고, 다른 AI가 리뷰해서 승인하면 자동으로 머지까지. 사람은 알림만 확인하면 되는 개발 파이프라인.상상이 아니라 실제로 이렇게 운영하는 팀이 있습니다. 24시간 AI 에이전트가 돌아가는 이른바 '개발 오토파일럿'이죠.근데 어느 날 아침, 대시보드를 봤더니 완료된 작업이 3일 연속 0건이었다고 해요."오토파일럿이 죽었네."어? 근데 이상하죠? 죽은 게 아니었거든요. 모든 컴포넌트가 멀쩡했습니다. 계획도 생성되고, 에이전트가 PR도 열고, AI 리뷰어는 이미 승인까지 끝낸 상태. CI도 전부 초록불. 딱 하나, 머지만 일어나지 않았어요.오늘은 이 장애 회고를 뜯어보려고 합니다. AI 자동화 얘기 같지만, 사.. 2026. 7. 2.
Claude Code가 프롬프트에 몰래 마커를 심고 있었다 저도 처음 이 글 봤을 때 "설마?" 했거든요.Claude Code. 요즘 AI 코딩 도구 중에서 가장 많이 쓰는 것 중 하나죠. 파일 읽고, 명령어 실행하고, 깃 커밋까지 직접 하는 도구인데.근데 이 도구가 내가 보내는 프롬프트에 몰래 뭔가를 심고 있었다는 게 밝혀졌어요.스테가노그래피(Steganography)라는 기술이에요. 원래 이미지나 파일 안에 숨겨진 정보를 심는 기법인데, 여기선 텍스트 프롬프트에 적용된 거거든요.어떻게 발견됐나보안 연구자 Thereallo가 Claude Code 바이너리를 직접 뜯어봤어요.이유는 단순해요. Claude Code는 파일 시스템, 쉘, 브라우저, 심지어 컴퓨터 전체에 접근하는 도구잖아요. 그러면 그 도구 자체가 뭘 하는지도 봐야 하는 거죠.그래서 로컬에 설치된 C.. 2026. 7. 1.
AI 고객센터에 "나 주인인데요" 했더니 계정을 내줬다 — Meta 인스타그램 해킹 사건 메타가 인스타그램 고객센터를 AI 챗봇으로 교체했어요. 편리하게 계정 문제를 해결해준다고 했죠. 비밀번호도 바꿔주고, 이메일도 수정해주고.근데 해커들이 이걸 발견했어요. "AI한테 그냥 말로 부탁하면 되는 거 아냐?"맞았어요."해킹"이라고 부르기도 민망한 공격2026년 6월 초, 인스타그램 계정이 수천 개씩 털렸어요. 누가 털렸냐고요?오바마 행정부 시절 백악관 계정, 미국 우주군 부사령관 계정, 보안 연구자 계정까지. 셀레나 고메즈급 팔로워를 가진 계정들이 하룻밤 사이에 주인이 바뀌었어요.공격 방법이 뭔지 아세요?Meta AI 챗봇에 이렇게 말했어요. "나 이 계정 주인인데, 이메일 주소 바꿔줘."그게 다예요.챗봇은 아무 확인 없이 그냥 해줬어요. 그 이메일로 비밀번호 재설정 → 끝. 계정 주인이 바뀌는.. 2026. 6. 7.
AI 쓰다가 F 맞은 버클리 CS 학생들 — 한국도 예외가 아니다 AI 잘 쓰면 실력이 는다고들 하잖아요.근데요.데이터가 나오기 시작했어요. 그것도 꽤 충격적인 숫자로요.버클리 CS 수업, F 학점이 폭발했다2026년 봄 학기 기준이에요.CS 10 수업에서 F를 받은 학생이 35.3%. CS 61A는 10.6%.작년 같은 시기엔 두 수업 다 F 비율이 10%를 넘지 않았거든요. 그게 갑자기 세 배 이상 튀어오른 거예요.버클리 EECS 학과 기준으로 하위 학년 수업에서 D와 F를 합쳐 7% 이내가 정상이에요. 근데 이 기준을 완전히 벗어난 거죠.어? 갑자기 왜요?교수들이 본 원인 — 아무도 수업에 안 온다CS 10과 CS 61A를 가르친 Dan Garcia 교수가 직접 말했어요."학생들이 LLM에 너무 기대다가, 시험장에서 완전히 준비가 안 된 상태로 들어온다."AI로 .. 2026. 6. 4.
AI 에이전트가 멈췄는데, 아무도 몰랐다 Claude Code 써보셨어요?처음엔 진짜 신기하거든요. "이 기능 구현해줘" 하면 알아서 파일 열고, 코드 짜고, 테스트까지 돌려요. 옆에서 누가 일해주는 느낌이랑 딱 비슷해요.근데 한 번쯤 이런 경험 해보셨을 거예요.한참 돌아가고 있는 것 같은데... 뭔가 이상하다. 보니까 같은 에러 메시지가 계속 반복되고 있어요. 에이전트가 멈춘 게 아니라, 같은 시도를 계속 하고 있던 거죠.이게 단순한 버그가 아니에요. 2026년 기준으로 에이전틱 AI(Agentic AI)의 가장 큰 문제로 꼽히는 현상입니다.에이전틱 AI가 뭐가 다른데요?잠깐 짚고 넘어갈게요.기존 AI는 "물어보면 답하는" 구조예요. 제가 질문하면 답하고 끝이죠.에이전틱 AI(Agentic AI)는 달라요. 목표를 주면 스스로 계획 세우고, .. 2026. 6. 3.
Meta AI 챗봇이 인스타그램 계정을 내줬다 — AI 고객지원의 치명적 구멍 오바마 전 대통령 백악관 계정이 해킹당했어요.미 우주군 주임원사 계정도요.그것도 주말 하루 만에.근데 진짜 문제는 어떻게 뚫렸냐는 거거든요.취약점을 찾은 게 아니에요. 데이터베이스를 뚫은 것도 아니에요.그냥 Meta의 AI 고객지원 챗봇한테 말을 걸었더니 알아서 계정을 넘겨줬어요.어떻게 된 건지 풀어볼게요2026년 5월 31일, 텔레그램에 영상 하나가 돌기 시작했어요.친이란 해커 그룹이 올린 건데, 내용이 황당하거든요.방법이 이렇게 단순해요.VPN으로 피해자 근처 IP로 접속한다인스타그램 비밀번호 재설정을 요청한다Meta AI 고객지원 챗봇과 채팅을 시작한다챗봇한테 "이 계정에 새 이메일 주소 연결해줘"라고 한다챗봇이 그 이메일로 인증 코드를 보내준다끝.어? 이상하죠?비밀번호도 모르고, 본인 인증도 없이.. 2026. 6. 2.