커넥터가 없는 맥 앱도 봇이 직접 다룰 수 있을지 궁금했습니다. 제 맥북에서 Grok Bot으로 agent-desktop 스킬을 테스트하며, 입력이 된 장면과 막힌 장면을 함께 확인했습니다. Vercel Labs가 만든 agent-desktop은 Rust로 구현된 도구입니다. 화면의 픽셀을 짐작하는 대신 접근성 트리로 앱의 실제 구조를 읽고, JSON에 담긴 요소의 ref를 이용해 클릭하거나 입력합니다. 앱과 창을 확인하고 스냅샷을 읽어 동작한 뒤 다시 확인하며, 화면이 바뀌면 ref도 다시 찾아야 합니다. 맥북은 깨어 있고 잠금이 풀려 있어야 합니다. 실행 없이 코드를 읽은 정적 보안 점검 결과는 위험 낮음이었습니다. 백도어나 몰래 정보를 빼내는 코드는 발견되지 않았습니다. 맥용 실행 코드에서 확인된 네트워크 호출은 127.0.0.1 한 곳뿐이었습니다. 번들 실행 파일 10개의 SHA-256 해시도 모두 일치했습니다. 실행 중 자동 업데이트 기능은 없다는 점도 코드 점검에서 확인했습니다. 다만 해시 일치는 일관성 확인이며 무해함을 증명하지는 않습니다. 실제 테스트에서는 Finder 조작과 텍스트 편집기 문장 입력에 성공했습니다. Chrome의 RHWP 확장에서는 첫 헤드리스 입력이 문서에 보이지 않았습니다. 헤드 모드로 창에 포커스를 주고 입력칸을 클릭한 다음, 클립보드의 문장을 Cmd+V로 붙여넣어 해결했습니다. 입력 결과는 접근성으로 다시 읽을 수 없어 사람이 화면으로 확인했습니다. 이런 경우에는 사람의 확인이나 화면 캡처로 결과를 봐야 합니다. rhwp-studio 웹 버전에서는 ego lite CLI로 직접 타이핑한 문장이 나타났습니다. 워드는 라이선스 만료로 편집이 막혀 테스트하지 못했습니다. 커넥터를 먼저 쓰고, 웹은 브라우저 도구로 처리하며, 네이티브 앱에 agent-desktop을 쓰는 순서를 기준으로 삼았습니다. 버전은 1.0.2로 고정하고 화면 설명을 외부로 보내는 도우미와 그 키는 사용하지 않습니다. macOS 권한 창은 사용자...
오늘 구글 공식 블로그 를 통해서 소개된 Gmail 에드온 앱들입니다. 지메일과 연동하여 사용할 수 있는 앱들도 지메일 로그인 후 같은 U/I 내에서 대부분 사용할 수 있도록 한 애드온 앱들입니다. 주로 크롬 브라우저 익스텐션으로 설치해야 사용이 가능한 것들이고, 이중에는 모바일 지메일과 연동한 앱들도 소개 되고 있습니다. 이 블로그에 소개된 앱중에서 지메일 사용자들이 가장 필요로 하는 앱일 수 있는 'Streak' 라는 앱을 소개합니다. 지메일을 통해서 보낸 메일을 추적할 수 있는 기능으로, 소위 지메일용 메일 수신 확인 기능을 제공하는 3rd party 앱입니다. 예전에도 소개된 적이 있었습니다. 이번엔 구글 블로그를 통해서 공식 소개된 앱 목록에 포함되어 있어서 다시한번 소개합니다. 개인 지메일 또는 기업용 지메일을 사용하는 분들의 불만 사항중에 하나는 보낸 메일에 대한 수신 확인 하는 기능이 없다는 이야기를 많이 듣습니다. 특히, 국내에서 제공하는 이메일 서비스에서는 대부분 제공하는데 왜? 지메일만 제공하지 않는지에 대한 불만이지요. 사실 표준 이메일 시스템들은 본래부터 보낸 메일에 대한 수신 확인 하는 내부 표준 기능은 제공하기 않고 있습니다. 따라서 대부분 수신확인 기능을 제공하는 메일 서비스들은 같은 이메일 시스템 내의 사용자간 이메일 확인만 가능하거나 또는 타 이메일 시스템으로 보낸 메일에 대한 수신확인 제대로 확인이 안되는 경우가 많습니다. 지메일에서는 대부분 수신확인 기능이 제공하지 않는 것으로 알고 있을 것입니다. 사실 개인 지메일 (무료 지메일) 본래 수신확인 기능은 제공하지 않는 것이 맞습니다. 그러나 기업용 지메일(G Suite)에서는 ‘수신 확인 요청' 기능이 본래 제공하고 있었습니다. (아래 기업용 지메일 캡쳐이미지 참조) 메일 보내기에서 선택적으로 ‘수신 확인 요청' 을 할 수 있게 되어 있습니다. 그러나, 기업용 지메일에서의 ‘수신확인 요청...