AI가 내 폰을 대신 눌러주게 하기, Phone Harness 따라하기

AI가 내 폰을 대신 눌러주게 하기, Phone Harness 따라하기

① 어떻게 생긴 것인가 (공식 데모 18초)

왼쪽 폰 화면이 아이폰 미러링 창이고, 오른쪽이 클로드 코드입니다. "지금 위치에서 Delah Coffee 까지 Waymo 불러줘" 라고 치자 AI가 폰 연결 확인 → 앱 열기 → 주소 입력 → 호출까지 혼자 눌렀습니다.

② 아이폰을 맥에 미러링으로 연결

맥 아이폰 미러링 앱을 열고 아이폰과 페어링합니다(같은 애플 계정, 같은 와이파이, 블루투스 켜기). 시스템 설정 → 개인정보 보호 및 보안에서 손쉬운 사용과 화면 기록 권한을 터미널(또는 클로드 코드 앱)에 줍니다.

안드로이드는 개발자 옵션에서 USB 디버깅 을 켜고 USB 로 연결하면 됩니다.

③ 클로드 코드에 설치 문장 한 줄

클로드 코드를 열고 아래를 그대로 붙여넣습니다. 설치와 점검을 AI가 알아서 합니다.

Install or upgrade phone-harness to the latest stable version with uv using Python 3.12, then run `phone-harness doctor` and `phone-harness skill`.

• phone-harness doctor : 연결·권한 점검
• phone-harness skill : 클로드 코드에 '폰 조작' 스킬 등록
• phone-harness update : 업그레이드

④ 시키기 (예시 지시문 10개)

클로드 코드 채팅창에 말로 시키면 됩니다.

1. 폰에서 인스타 열고 내 프로필로 들어가서 팔로워 수 읽어줘
2. 인스타 스토리에 사진 앱 맨 위 사진 올리고 "오늘 작업물" 이라고 적어줘
3. 스레드 앱 열고 홈 피드 맨 위 글 5개 제목만 읽어줘
4. 쿠팡 앱 열고 "무선 청소기" 검색해서 첫 상품 가격 알려줘
5. 유튜브 앱에서 내 채널 → 최근 영상 조회수 읽어줘
6. 카톡 오픈채팅 "바코드랩" 방 열고 공지 내용 읽어줘 (보내지는 말고 읽기만)
7. 알람 앱에서 아침 7시 알람 켜줘
8. 메모 앱 새 메모 만들고 "내일 할 일 3개" 적어줘
9. 설정 → 배터리 들어가서 지난 24시간 많이 쓴 앱 3개 알려줘
10. 사진 앱에서 오늘 찍은 사진 개수 세줘

직접 코드로 시킬 수도 있습니다.

phone-harness <<'PY'
open_app("Notes")
tap_text("New Note")
type_text("hello from the harness")
print([o["text"] for o in screen()][:10])
PY

⑤ 꼭 지킬 것

• 본계정으로 자동 업로드하지 마세요. 인스타·스레드는 자동 조작을 잡아내면 계정을 막습니다. 테스트 계정에서 먼저, 하루 몇 번만.
• 폰 잠금을 풀면 미러링이 멈춥니다. 쓰는 동안 폰은 그대로 두기.
• 아이콘만 있고 글자가 없는 버튼은 못 찾을 때가 있습니다. "오른쪽 아래 파란 동그라미 눌러" 처럼 위치로 말해 주면 됩니다.
• 얼굴 인식, 카메라, 멀티터치는 안 됩니다.

막히면

• doctor 에서 권한 오류 → 시스템 설정 → 손쉬운 사용 / 화면 기록 에 터미널 추가 후 다시.
• 미러링 창이 안 뜸 → 아이폰 미러링 앱을 먼저 열어 두고 실행.
• 안드로이드가 안 보임 → adb devices 로 기기가 뜨는지, USB 디버깅 허용 팝업을 눌렀는지.

출처: github.com/phone-harness/phone-harness · PyPI phone-harness 0.3.3 (2026-11-02) · 데모 GIF 는 공식 저장소 미디어

🙋 이번 주 미션: 8번 지시문(메모 앱에 글 적기)로 한 번 시켜 보고 화면 캡처를 카톡방에 올려 보기!