최근 더우바오(Doubao) 워크의 컴퓨터 조작 능력이 업그레이드되어, 화면 클릭의 정밀도와 속도가 향상되어 더 정확하고 더 빨라졌습니다. 대화에서 직접 컴퓨터 조작 관련 요청을 하면, 사용자의 승인을 받은 후 더우바오 워크가 자동으로 컴퓨터 화면을 확인하고 인간의 마우스 및 키보드 조작을 모방하여 관련 앱을 조작할 수 있습니다. 동시에, 기존의 크로스 앱 조작, 브라우저 조작을 스킬로 녹화하는 기능을 바탕으로, 이제 사용자는 컴퓨터 조작을 녹화하여 시연 과정을 재사용 가능한 스킬로 저장할 수 있습니다. 또한, 컴퓨터 조작이 필요한 작업은 Mac이 잠금 화면 상태가 된 후에도 계속 실행될 수 있으며, 사용자는 휴대폰을 통해 작업을 지시하고 결과를 확인할 수도 있습니다.
대화 인터페이스의 '더 많은 스킬'에서 '조작 녹화하여 스킬 생성'을 찾아 안내에 따라 인증을 완료하면, 사용자는 평소처럼 컴퓨터를 조작하면서 음성으로 요구 사항을 보충할 수 있습니다. 예를 들어 파일을 정리할 때 '이 폴더만 정리하고, 파일은 날짜별로 이름 짓기'라고 말해 조작 범위와 명명 규칙을 한꺼번에 전달할 수 있습니다. 녹화 중에는 더바오워크(Doubao Work)가 마우스 클릭, 입력한 텍스트, 창 내용을 기록하며, 사용자는 언제든 취소할 수 있습니다. 사용 시에는 계정 비밀번호 등 민감한 정보가 노출되지 않도록 주의해야 합니다.
녹화가 끝나면 더바오워크는 조작 과정과 설명을 개인 스킬로 정리합니다. 다음에 같은 종류의 작업을 실행할 때 해당 스킬을 선택하고 이번에 처리할 대상과 요구 사항만 말하면, 조작 단계를 반복해서 설명할 필요가 없습니다. 이렇게 하면 다단계 조작, 임시 조건, 처리 습관이 한 번의 시연에서 호출 가능한 스킬로 축적되어, 유사 작업에 대한 반복 설명을 줄일 수 있습니다.
작업 실행 측면에서 사용자는 '설정 → 작업 태스크 모드 설정'으로 들어가 '잠금 화면 시 더바오 작업 허용'을 켤 수 있습니다. 해당 기능을 활성화하고 사용자 인증을 거치면, 더바오워크는 Mac이 잠금 화면 상태일 때도 컴퓨터 조작이 필요한 작업을 계속 실행할 수 있습니다. 사용자는 컴퓨터를 떠나 있을 때 휴대폰을 통해 이 잠금 상태의 Mac에 작업을 지시하고, 휴대폰에서 결과를 확인할 수 있으며, 컴퓨터 앞으로 돌아와 잠금을 해제하면 언제든 작업을 이어받을 수 있습니다. 연속적으로 실행해야 하면서도 컴퓨터 앞에 계속 머무르기 불편한 작업의 경우, 이 기능은 더 유연한 처리 방식을 제공합니다.
Mac이 잠금 화면 상태가 된 후에도 더바오워크는 컴퓨터 조작이 필요한 작업을 계속 실행할 수 있습니다(인터페이스 예시)
사용 시 Mac은 전원이 켜져 있고 네트워크에 연결된 상태를 유지해야 하며, 더바오 클라이언트가 계속 실행 중이어야 하고, 기기는 깨어 있는 상태를 유지해야 합니다.
AI 에이전트가 실제 업무 환경으로 확장됨에 따라, Computer Use는 소프트웨어를 조작하고 작업을 실행하는 중요한 능력으로 자리 잡고 있습니다. 이번 더바오워크의 업그레이드를 통해 사용자가 익숙한 조작 방식을 재사용 가능한 스킬로 저장할 수 있게 되었고, Mac이 잠금 화면 상태가 된 후에도 작업을 계속 실행할 수 있어 반복적인 설명과 컴퓨터 앞에 계속 머물러야 하는 부담을 줄이는 데 도움이 됩니다. 일반 사용자에게 이는 반복적인 조작의 일부를 AI에 맡기고, 판단·창작 및 경험이 필요한 작업에 더 많은 시간과 에너지를 쓸 수 있는 기회를 의미하며, AI가 생산성을 높이는 가치가 일상 업무 흐름에 점차 실현되도록 합니다.
레이펑왕(공식 계정: 레이펑왕) 레이펑왕