# Android에서 화면을 보고 휴대폰 작업 돕게 하기

> 화면 질문과 화면 자동화의 기기·지역·권한 차이를 이해하고 실행·인계·중지한다.

원문: https://www.aihoon.kr/guide/gemini/consumer/mobile-actions

Android에서는 현재 화면을 질문의 자료로 쓰거나, 지원 앱에서 다단계 작업을 맡길 수 있습니다. 화면을 읽는 기능과 화면을 조작하는 기능은 권한과 결과가 다르므로 각각 설정하세요.

## 화면에 관해 질문하기

다른 앱·웹페이지·영상에서 Gemini를 호출하면 화면 작업 제안이 표시될 수 있습니다. 제안을 탭하면 스크린샷·파일·URL 등의 정보가 Gemini로 전송됩니다. **물어보기**를 제외한 화면 작업은 자동 전송될 수 있으며 칩을 길게 눌러 자동 전송을 바꿀 수 있습니다.

영어로 제공되는 지능형 화면 컨텍스트는 언제 현재 화면을 사용할지 추론합니다. **설정 → 화면 컨텍스트 → 화면 텍스트·스크린샷 사용**에서 제어합니다. 한국어 질문에서도 모든 화면이 자동으로 읽힌다고 가정하지 마세요.

가상의 행사 포스터를 열었다면 “이 화면에서 준비물만 정리해 줘”라고 질문할 수 있습니다. 다른 메신저 알림이 겹쳐 있거나 미공개 파일이 보인다면 먼저 화면을 정리하세요.

## 화면 자동화의 지원 조건

베타 화면 자동화는 미국·한국의 성인 개인 계정과 지원 기기·일부 앱에서 영어·한국어로 점진 제공됩니다. 지원 목록에는 Pixel 10 계열, Galaxy S26, Z Flip 8·Z Fold 8이 있으며 **한국에서는 Pixel 10이 지원되지 않습니다**.

요청을 입력하고 계획·권한 안내를 확인합니다. 연결 앱으로 처리할 수 있으면 그 경로를 우선 사용할 수 있습니다. 채팅을 닫아도 작업은 계속될 수 있습니다. **진행 상황 보기**로 확인하고 **작업 중지**로 멈춥니다. 직접 제어는 기기별 차이가 있으며 Pixel 10·Galaxy S26에는 제공되지 않는다고 안내됩니다. Flip 8·Fold 8에서 인계 후 10분 안에 진행하지 않으면 작업이 중단될 수 있습니다.

## 완료 표시와 실제 상태 대조하기

**가상 예시:** 행사 간식 후보를 장바구니에 담는다면 수량·배송지·결제 전 총액이 필요한 기준입니다. “담았어요”라는 말과 결제 완료는 다른 상태입니다. 주문을 직접 끝내지 않으면 상품이 장바구니에 남을 수 있습니다.

```text
행사용 생수 후보를 찾아 12개 수량과 배송 조건을 확인해 주세요.
예산은 배송비 포함 2만원입니다.
조건에 맞는 후보와 장바구니 상태를 보여 주세요.
조건이 모호하면 진행 전에 알려 주세요.
```

이것은 요청 설계 예시이며 실제 주문을 실행한 기록이 아닙니다. 제품의 확인 절차가 모든 오류를 막지는 못하므로 마지막 상태와 원래 앱을 확인합니다. 로그인·결제 정보는 채팅에 적지 말고 필요한 경우 앱에서 직접 입력하세요.

**설정 → 화면 자동화**에서 앱별 **항상 허용·항상 확인·허용 안 함**을 선택합니다. 연결 앱 설정과 별개이므로 화면 자동화를 꺼도 연결 앱 기능이 작동할 수 있습니다.

## 잠금 화면과 호출 방식 관리

**설정 → 잠금 화면에서 Gemini 사용**에서 잠금 해제 없이 쓰는 기능을 정합니다. 전화·문자 허용은 별도 항목입니다. 허용해도 Calendar 읽기 같은 개인 작업은 잠금 해제를 요구할 수 있고 Pixel Tablet은 잠금을 풀어야 합니다.

원치 않게 열리면 전원·측면 버튼 동작, Hey Google, 잠금 화면 설정을 각각 조정합니다. 기본 디지털 어시스턴트는 Android의 **앱 → 기본 앱 → 디지털 어시스턴트 앱**에서 바꿉니다. Gemini 앱을 삭제해도 기본 어시스턴트 설정이나 과거 활동이 자동으로 사라지지는 않습니다.

### Hey Google과 Voice Match 확인하기

현재 도움말은 Gemini의 **메뉴 → 프로필 → Google 계정 관리 → 데이터 및 개인 정보 보호 → Voice Match**에서 Hey Google을 켜거나 끄는 경로를 안내합니다. 기기에 따라 Gemini 설정의 핸즈프리 항목에서도 접근할 수 있습니다. Hey Google을 끄는 것과 저장된 Voice Match 모델을 삭제하는 것은 별도 선택입니다. 모델을 삭제했다가 다시 쓰려면 음성 설정을 다시 진행해야 합니다.

대기 상태에서는 활성화 신호를 기다리도록 설계되지만 비슷한 소음으로 잘못 켜질 수 있습니다. Voice Match도 비슷한 목소리나 녹음된 음성을 잘못 인식할 수 있으므로 개인 자료에 대한 완전한 접근 보호 장치로 보지는 마세요. 활동 보관이 켜져 있으면 의도하지 않은 활성화도 일반 상호작용처럼 기록될 수 있습니다.

원치 않는 호출이 반복되면 Hey Google·측면 버튼·잠금 화면 중 어느 경로로 열린 것인지 먼저 확인합니다. 음성 호출을 끈 뒤에도 버튼으로 열리는 것은 서로 다른 설정이기 때문입니다.

전화·문자 작업은 [통화와 메시지](/guide/gemini/consumer/phone-messaging), 집 안 기기 제어는 [Google Home](/guide/gemini/consumer/home-devices), 여러 업무를 맡기는 기능은 [Spark](/guide/gemini/consumer/spark)에서 구분해 설명합니다.