Bước cùng AI

Công cụ mới giúp 'vẽ' chỉ dẫn trực tiếp trên màn hình cho AI

2 phút đọc·

Bạn cần biết gì trong 30 giây

Một công cụ AI mới vừa ra mắt, cho phép người dùng vẽ và ghi chú trực tiếp lên giao diện máy tính để hướng dẫn AI thực hiện các tác vụ tự động hóa một cách chính xác hơn.

Công cụ mới giúp 'vẽ' chỉ dẫn trực tiếp trên màn hình cho AI

Giới thiệu

Một công cụ mới vừa ra mắt, giúp người dùng dễ dàng hướng dẫn các tác vụ tự động hóa AI bằng cách vẽ trực tiếp lên màn hình máy tính. Tính năng này cho phép bạn tạo các mũi tên, ô vuông hay ghi chú ngay trên giao diện, giúp AI tập trung vào đúng vị trí cần thao tác, giải quyết vấn đề AI đôi khi làm sai hoặc không hiểu ngữ cảnh trên màn hình.

Có gì mới?

Công cụ này mang đến một cách tiếp cận trực quan để tương tác với AI, đặc biệt hữu ích cho các tác vụ tự động hóa giao diện đồ họa (GUI automation). Thay vì phải mô tả bằng lời hay code phức tạp, người dùng giờ đây có thể dùng chuột để 'chỉ' cho AI thấy chính xác nút nào cần bấm, trường nào cần điền. Điều này biến việc hướng dẫn AI trở nên đơn giản như việc bạn chỉ một điểm trên màn hình cho người khác vậy.

Tính năng nổi bật

  • Vẽ trực tiếp trên màn hình: Dùng công cụ vẽ để tạo mũi tên, hình chữ nhật, hoặc khoanh vùng trên bất kỳ ứng dụng nào.
  • Ghi chú ngữ cảnh: Thêm các ghi chú ngắn gọn để giải thích rõ hơn cho AI về mục đích của thao tác.
  • Tăng độ chính xác cho AI: Giúp AI nhận diện đúng các yếu tố trên giao diện, giảm thiểu lỗi khi thực hiện tự động hóa.
  • Giao diện thân thiện: Dễ sử dụng, không yêu cầu kiến thức lập trình chuyên sâu.

Ý nghĩa với người Việt

Công cụ này rất hữu ích cho dân văn phòng, chủ shop online và giáo viên tại Việt Nam. Người dùng có thể tự động hóa các tác vụ lặp đi lặp lại như nhập liệu vào bảng tính, quản lý đơn hàng trên website bán lẻ, hoặc chuẩn bị tài liệu giảng dạy mà không cần nhờ đến lập trình viên. Ví dụ, chủ shop có thể hướng dẫn AI tự động click vào nút 'Xác nhận đơn hàng' trên sàn thương mại điện tử.

Đã dùng được ở Việt Nam chưa?

Hiện tại, công cụ này có thể dùng được ở Việt Nam. Tuy nhiên, thông tin cụ thể về việc có cần VPN hay thẻ thanh toán quốc tế chưa được công bố rõ ràng. Nhiều khả năng sẽ có bản miễn phí giới hạn để người dùng trải nghiệm trước khi quyết định nâng cấp lên bản trả phí với nhiều tính năng hơn.

So với đối thủ?

Trong khi các công cụ tự động hóa AI khác thường yêu cầu mô tả bằng văn bản hoặc script, công cụ này nổi bật với khả năng hướng dẫn trực quan bằng hình ảnh. Điều này giúp rút ngắn đáng kể thời gian thiết lập và giảm độ phức tạp, đặc biệt phù hợp với những người không chuyên về công nghệ so với các giải pháp RPA (Robotic Process Automation) truyền thống hay các công cụ AI agent khác.

Prompt mẫu
Bạn là một trợ lý tự động hóa. Nhiệm vụ của bạn là thực hiện thao tác 'Thêm vào giỏ hàng' trên website [Tên website]. Tôi đã vẽ một mũi tên chỉ vào nút cần bấm. Hãy xác nhận khi bạn đã thực hiện.

Ảnh từ bài gốc

CI
CI
License: MIT
License: MIT
A real macOS desktop, Hacker News of 2014-06-10 in Chrome, nine bigarrow arrows in nine colours from every side: same since 2007, already argued in 2014, not a lurker? log in, the article is in here, remember me? (Firefox 30), nothing. nothing changed. (a spiral, going round in circles), 20,000 devs 40,000 opinions, finally a bigger arrow, 12 years later: still no consensus
A real macOS desktop, Hacker News of 2014-06-10 in Chrome, nine bigarrow arrows in nine colours from every side: same since 2007, already argued in 2014, not a lurker? log in, the article is in here, remember me? (Firefox 30), nothing. nothing changed. (a spiral, going round in circles), 20,000 devs 40,000 opinions, finally a bigger arrow, 12 years later: still no consensus
bigarrow pointing at a dialog
bigarrow pointing at a dialog
An agent walks a human through the most complained-about Mac setting since 2023: one click on the wallpaper and every window flees; then 1. The apple. Yes, the fruit. 2. System Settings. Where settings go to hide. 3. Desktop & Dock. Not Wallpaper. Not Displays. This one. 4. Scroll. Further. It
An agent walks a human through the most complained-about Mac setting since 2023: one click on the wallpaper and every window flees; then 1. The apple. Yes, the fruit. 2. System Settings. Where settings go to hide. 3. Desktop & Dock. Not Wallpaper. Not Displays. This one. 4. Scroll. Further. It
System Settings, Device Control and Data Access: a green arrow with a close button, Franz, switch this on: Terminal may control your Mac, and an orange zigzag ring on the plus button: Not in the list? Plus. Then find it.
System Settings, Device Control and Data Access: a green arrow with a close button, Franz, switch this on: Terminal may control your Mac, and an orange zigzag ring on the plus button: Not in the list? Plus. Then find it.
Keynote: a purple ring, 1. Click Animate; an orange box, 2. Add an Effect; a teal zigzag on Play, 3. Press play. Bask in the applause.
Keynote: a purple ring, 1. Click Animate; an orange box, 2. Add an Effect; a teal zigzag on Play, 3. Press play. Bask in the applause.
TextEdit print dialog: a pink arrow, Mom, click PDF, then Save as PDF, and a small black one on Cancel: Not this one, Mom
TextEdit print dialog: a pink arrow, Mom, click PDF, then Save as PDF, and a small black one on Cancel: Not this one, Mom

Dùng ngay hôm nay

Mở Công cụ AI chỉ dẫn trực quan (Bản miễn phí giới hạn) và thử ngay hôm nay — chỉ mất khoảng 5 phút.

Bài viết có thể chứa link giới thiệu — không ảnh hưởng giá bạn trả.

Câu hỏi thường gặp

Công cụ này hoạt động như thế nào?

Nó cho phép bạn vẽ các mũi tên, hình khối hoặc ghi chú trực tiếp lên giao diện màn hình để chỉ dẫn AI thực hiện các thao tác cụ thể, giúp AI hiểu rõ hơn ngữ cảnh và vị trí cần tương tác.

Ai nên sử dụng công cụ này?

Công cụ này lý tưởng cho dân văn phòng, giáo viên, chủ shop online hoặc bất kỳ ai muốn tự động hóa các tác vụ lặp đi lặp lại trên máy tính mà không cần kiến thức lập trình.

Có cần cài đặt phức tạp không?

Theo thông tin ban đầu, công cụ được thiết kế để dễ sử dụng, với giao diện thân thiện và quy trình cài đặt đơn giản, không yêu cầu kiến thức chuyên sâu.

Nó có giúp AI làm việc chính xác hơn không?

Có, bằng cách cung cấp các chỉ dẫn trực quan rõ ràng, công cụ giúp AI nhận diện đúng các yếu tố trên giao diện, từ đó giảm thiểu lỗi và tăng độ chính xác trong các tác vụ tự động hóa.

Tôi có thể dùng nó để làm gì cụ thể?

Bạn có thể dùng nó để tự động điền biểu mẫu, click vào các nút trên website, quản lý đơn hàng, hoặc bất kỳ thao tác nào cần tương tác với giao diện đồ họa của máy tính.

Bài này còn đúng không?

Muốn triển khai quy mô công ty?

Nhận tư vấn miễn phí 15 phút — chúng tôi dựng workflow này cho cả phòng ban của bạn.

Bài liên quan