Flowtica

AI Computer-Use Agent คืออะไร? ตัวช่วยทำงานเว็บแบบไม่มี API สำหรับ SME ไทย

โดย ทีม Flowtica

AI Computer-Use Agent คืออะไร? ตัวช่วยทำงานเว็บแบบไม่มี API สำหรับ SME ไทย

AI Computer-Use Agent คือซอฟต์แวร์ที่ใช้โมเดล AI อ่านหน้าจอคอมพิวเตอร์ ตีความปุ่มและฟอร์มต่าง ๆ แล้วควบคุมเมาส์และคีย์บอร์ดเพื่อคลิก พิมพ์ และดึงข้อมูลออกมาตามที่ผู้ใช้กำหนด ความหมายคือ "มีผู้ช่วยที่ดูแลหน้าจอแทนพนักงาน" โดยไม่ต้องให้ระบบเป้าหมายเปิด API หรือเขียนสคริปต์เชื่อมต่อเอง สำหรับ SME ไทยที่ต้องทำงานกับเว็บธนาคาร ตลาดออนไลน์ หรือพอร์ทัลภาครัฐ นี่คือวิธีลดงานพิมพ์ซ้ำและข้อผิดพลาดของคนโดยที่ยังมีมนุษย์ตรวจสอบขั้นตอนสำคัญได้

AI Computer-Use Agent คืออะไร และทำงานอย่างไร

Computer-Use Agent ไม่ใช่แค่บอตที่ตอบแชท มันทำงานกับหน้าจอจริงเหมือนมนุษย์นั่งอยู่หน้าคอมพิวเตอร์ หลักการทำงานแบ่งออกเป็นสามส่วน ได้แก่ การมองเห็น การวางแผน และการลงมือทำ

ส่วนแรกคือ การมองเห็น ตัว Agent จะได้รับภาพ screenshot ของหน้าจอ หรืออ่านข้อมูลจากโครงสร้างหน้าเว็บที่เบราว์เซอร์มองเห็น เช่น ชื่อปุ่ม ตำแหน่งฟอร์ม ข้อความในตาราง ข้อมูลเหล่านี้จะถูกส่งให้โมเดล AI ซึ่งเข้าใจบริบทของหน้าเว็บ ไม่ใช่แค่จำลองการคลิกตามตำแหน่งเดิม

ส่วนที่สองคือ การวางแผน เมื่อผู้ใช้บอกเป้าหมาย เช่น "เข้าเว็บธนาคาร แล้วดาวน์โหลดรายการเดินบัญชีของเมื่อวาน" Agent จะแปลงเป็นขั้นตอนย่อย ได้แก่ เปิดเบราว์เซอร์ พิมพ์ URL กรอกชื่อผู้ใช้ รอหน้าเว็บโหลด คลิกเมนูรายงาน เลือกวันที่ แล้วกดดาวน์โหลด

ส่วนที่สามคือ การลงมือทำ ตัวควบคุมเบราว์เซอร์จะคลิกที่พิกัดหรือ element นั้น ๆ จากนั้นระบบจะวนลูปอ่านหน้าจอใหม่ ตรวจสอบผลลัพธ์ว่าหน้าจอเปลี่ยนไปอย่างไร แล้วตัดสินใจทำขั้นถัดไป จนกว่าจะได้ผลลัพธ์ครบ หรือจนกว่าจะเจอปัญหาที่ไม่รู้จักแล้วขอให้มนุษย์ช่วย

จุดที่ทำให้ Computer-Use Agent ต่างจากบอตทั่วไปคือ การตัดสินใจแบบยืดหยุ่น ถ้าเว็บเปลี่ยนตำแหน่งปุ่มเล็กน้อย หรือมีป๊อปอัปโผล่เข้ามา Agent จะอ่านข้อความใหม่และลองหาวิธีผ่านไปให้ได้โดยไม่ต้องแก้สคริปต์ทุกครั้ง

ทำไม SME ไทยถึงควรใช้ AI Computer-Use Agent

SME ไทยส่วนใหญ่ไม่ได้ใช้ระบบ ERP ขนาดใหญ่ที่เชื่อมทุกอย่างได้ด้วย API ข้อมูลมักกระจายอยู่ในเว็บธนาคาร เว็บสรรพากร เว็บประกันสังคม ตลาดออนไลน์ และระบบขายหน้าร้านที่ซื้อมานาน แม้แต่บริษัทที่จ้างนักพัฒนาไปคุยกับธนาคารเพื่อขอ API ก็ยังติดข้อกำหนดด้านความปลอดภัย ค่าใช้จ่าย และระยะเวลาพัฒนาที่ยาวนาน

ผลลัพธ์คือพนักงานต้องเปิดหลายแท็บ คัดลอกข้อมูลจากเว็บหนึ่งไปวางอีกเว็บหนึ่ง พิมพ์ตัวเลขซ้ำ ๆ ตรวจสอบยอด และเสี่ยงพิมพ์ผิด การใช้ Computer-Use Agent ลดงานประเภทนี้ได้ เพราะAgent ทำงานบนหน้าเว็บแบบที่มนุษย์มองเห็นอยู่แล้ว ไม่ต้องรอ API หรือการแก้ไขระบบจากภายนอก

นอกจากนี้ เทคนิค Human-in-the-loop ยังทำให้ SME เริ่มใช้ได้แบบไม่เสี่ยงมากนัก แทนที่จะปล่อยให้ AI ทำทุกอย่างเอง เจ้าของกิจการหรือหัวหน้าฝ่ายบัญชีสามารถตั้งจุดให้ AI หยุดและรอคนตรวจสอบก่อนกดยืนยัน เช่น AI กรอกแบบฟอร์มภาษีครบแล้ว รอคนตรวจสอบตัวเลขก่อนส่งจริง แนวทางนี้ตอบโจทย์ SME ที่อยากประหยัดเวลา แต่ยังไม่ไว้ใจเต็มร้อย

AI Computer-Use Agent ช่วยงานอะไรได้บ้างในธุรกิจจริง

ตัวอย่างที่เห็นผลจริงกับธุรกิจไทยมีหลายกลุ่ม เริ่มจากงานที่ทำเป็นประจำทุกวันหรือทุกสัปดาห์

ฝ่ายบัญชีและผู้ประกอบการที่ต้องเช็คยอดเงิน สมมติว่าเจ้าของร้านต้องดึงรายการเดินบัญชีจากเว็บธนาคารทุกเช้าเพื่อเช็คยอดที่ลูกค้าโอนเข้ามา Computer-Use Agent สามารถเข้าระบบ ดาวน์โหลดไฟล์รายงาน หรืออ่านยอดคงเหลือ แล้วบันทึกใส่ตารางสรุปใน Google Sheets ได้ พนักงานยังเป็นคนตรวจสอบยอดอีกครั้งตอนปิดบัญชี แต่ไม่ต้องมานั่งกดดาวน์โหลดและคัดลอกทีละรายการ

ร้านค้าออนไลน์และโรงงาน SME ที่ขายหลายช่องทาง การอัปเดตสต็อกสินค้าเป็นงานน่าเบื่อหน่าย เพราะสินค้าชิ้นเดียวกันอาจต้องแก้จำนวนในเว็บร้านค้า ตลาดออนไลน์ และเว็บของบริษัทขนส่งพร้อมกัน Computer-Use Agent ใช้ข้อมูลจากไฟล์สต็อกกลางแล้วเข้าไปแก้ทีละเว็บได้ โดยไม่ต้องให้แต่ละแพลตฟอร์มเปิด API ให้ และระบบจะบันทึกหน้าจอก่อน-หลังเพื่อให้มนุษย์ตรวจสอบว่าจำนวนเปลี่ยนถูกต้อง

ธุรการที่ต้องกรอกเอกสารภาครัฐ พอร์ทัลของกรมสรรพากรหรือประกันสังคมมีแบบฟอร์มหลากหลาย การกรอกซ้ำ ๆ เช่น การยื่นภาษีหัก ณ ที่จ่าย หรือการแจ้งพนักงานเข้า-ออก ใช้ข้อมูลจากตารางเงินเดือนของบริษัทได้ Agent จะกรอกข้อมูลลงฟอร์ม แล้วหยุดให้คนตรวจสอบก่อนกดส่งจริง ช่วยลดการกรอกผิดช่องและลดเวลานั่งค้นหาเลขเอกสาร

ผู้ประกอบการที่ต้องตรวจสอบเว็บของคู่ค้าหรือหน่วยงานราชการ เช่น ตรวจสอบสถานะใบอนุญาต ตรวจสอบเลขที่บิลนำเข้า-ส่งออก หรือติดตามสถานะการขนส่งบนเว็บของท่าเรือ งานเหล่านี้ไม่มี API ให้ใช้ และหน้าจอเปลี่ยนบ่อย Computer-Use Agent เข้าไปอ่านข้อมูลและแจ้งเตือนเมื่อค่าที่ต้องการเปลี่ยนจากเดิม

AI Computer-Use Agent ต่างจาก RPA และ n8n อย่างไร

RPA หรือ Robotic Process Automation เป็นเทคโนโลยีเดิมที่ใช้หุ่นยนต์ซอฟต์แวร์ทำงานซ้ำ ๆ โดยต้องมีขั้นตอนที่เขียนตายตัว ตัวอย่างเช่น ใช้ RPA เปิดโปรแกรมบัญชี กดปุ่มส่งออก แล้วย้ายไฟล์ไปไว้ในโฟลเดอร์ ซึ่งทำงานได้ดีกับระบบที่มีกฎแน่นอน แต่ถ้าหน้าจอเปลี่ยนตำแหน่งปุ่มเพียงเล็กน้อย หรือมีหน้าต่างโผล่ขึ้นมาไม่ตรงเวลา สคริปต์ก็พังได้ และการ implement มักต้องใช้ทีมไอทีเขียนโค้ดหรือตั้งค่า Selector

n8n เป็นเครื่องมือ workflow automation ที่เน้นการเชื่อมต่อระบบผ่าน API เป็นหลัก เช่น ดึงข้อมูลจาก Google Sheets ส่งไปยัง LINE Notify หรืออัปเดตฐานข้อมูล แต่ถ้าเว็บปลายทางไม่มี API ให้เรียก n8n จะทำได้ยาก หรือต้องใช้วิธี hack ที่ซับซ้อน

Computer-Use Agent อยู่คนละระดับ คือ ไม่ต้องพึ่ง API หรือเขียนสคริปต์เชื่อมระบบ มันใช้ AI อ่านหน้าจอเหมือนมนุษย์ ทำให้เข้าถึงเว็บที่ RPA และ n8n เข้าไม่ถึง แต่แลกมาด้วยความเสี่ยงที่ผลลัพธ์อาจไม่แน่นอนเสมอไป เพราะ AI ไม่ใช่กฎตรรกะที่ตายตัว การทำงานครั้งหนึ่งอาจสำเร็จ และอีกครั้งอาจติดเพราะหน้าเว็บโหลดช้า จึงต้องมีระบบบันทึกและขั้นตอนตรวจสอบของมนุษย์เสมอ

วิธีเริ่มต้นใช้ AI Computer-Use Agent แบบ Low-Risk ต้องทำอย่างไร

การเริ่มใช้งานไม่จำเป็นต้องเปลี่ยนระบบทั้งหมด ขั้นตอนแรกคือเลือกงานที่ ซ้ำ ๆ มีกฎชัดเจน เสี่ยงไม่สูง และเห็นผลเร็ว เช่น ดึงข้อมูลมาวางในตาราง อัปเดตข้อมูล หรือกรอกฟอร์มที่ตรวจสอบได้ ขั้นตอนที่แนะนำสำหรับ SME ไทยมีดังนี้

เริ่มจากทำรายการงานที่พนักงานเสียเวลามากที่สุดในหนึ่งสัปดาห์ แล้วเลือกงานที่มีขั้นตอนเป็นลำดับ ไม่ต้องตีความซับซ้อน เช่น "เข้าเว็บนี้ กรอกรหัส คลิกดาวน์โหลดไฟล์" ดีกว่างานที่ต้องอ่านอีเมลหลายฉบับแล้วตัดสินใจเอง

จากนั้นกำหนดขอบเขตการใช้งานให้แคบ เช่น ให้ Agent ทำงานเฉพาะบนเว็บที่กำหนด ใช้บัญชีที่มีสิทธิ์อ่านอย่างเดียว หรือเปิดใช้งานเฉพาะเวลา 08.00 - 18.00 น. การจำกัดนี้ช่วยลดความเสียหายถ้ามีอะไรผิดพลาด

ใช้ระบบจัดการข้อมูลลับที่ปลอดภัย ไม่ควรใส่รหัสผ่านธนาคารไว้ในข้อความตั้งค่าหรือในตัว Agent โดยตรง ควรใช้ secret manager แยกเก็บข้อมูลต่างหาก สำหรับ SME ที่ยังไม่มีโครงสร้างนี้ อาจเริ่มจากบัญชีทดลองที่มีสิทธิ์น้อย และไม่ผูกกับเงินจริงในจำนวนมาก

เพิ่ม Human-in-the-loop อย่างน้อย 1 จุดในขั้นตอนสำคัญ เช่น ให้ AI หยุดก่อนกดโอนเงิน ก่อนส่งแบบฟอร์มภาษี หรือก่อนลบข้อมูล แล้วส่งข้อความไปยัง LINE หรืออีเมลให้ผู้รับผิดชอบตรวจสอบ เมื่อยืนยันแล้ว AI ถึงทำขั้นต่อ

เปิดโหมดบันทึกหน้าจอและ Log ทุกการทำงาน เพื่อให้ตรวจสอบย้อนหลังได้ว่า AI คลิกอะไร พิมพ์อะไร และเห็นผลลัพธ์อะไร ถ้าเกิด error จะได้รู้ว่าต้องแก้ที่ขั้นตอนไหน และใช้เป็นหลักฐานยืนยันความถูกต้องในการทำงานกับหน่วยงานภายนอก

สุดท้ายคือทำ Pilot Project ระยะสั้น เลือกงานเล็ก ๆ เช่น ดึงข้อมูลรายวันจากเว็บธนาคารมาใส่ Excel ให้พนักงานลองใช้จริง 2 - 4 สัปดาห์ สังเกตว่ามีกี่ครั้งที่ต้องแก้ไข มีกี่ครั้งที่ Agent ผิด แล้วค่อยขยายไปงานอื่น

มีข้อควรระวังอะไรบ้างก่อนใช้ Computer-Use Agent

ความเสี่ยงอันดับแรกคือ การเก็บ credential และข้อมูลส่วนบุคคล เพราะ Agent ทำงานบนเว็บที่อาจมีข้อมูลลูกค้า เลขบัญชี และเลขประจำตัวประชาชน ควรใช้เครื่องหรือสภาพแวดล้อมแยกจากคอมพิวเตอร์ทำงานทั่วไป กำหนดสิทธิ์การเข้าถึงเฉพาะที่จำเป็น และเก็บ Log ที่เข้ารหัส ไม่ควรให้ AI จำรหัสผ่านทุกเว็บโดยไม่มีวันหมดอายุ

ความเสี่ยงอันดับสองคือ การเปลี่ยนหน้าจอของเว็บ แม้ AI จะอ่านหน้าจอและปรับตัวได้ แต่ถ้าเว็บเปลี่ยนโครงสร้างใหญ่ เช่น เปลี่ยนสัญลักษณ์ปุ่ม เปลี่ยนขั้นตอนการเข้าระบบ หรือมีแคปต์ชาแบบใหม่ Agent อาจทำงานไม่สำเร็จ จึงต้องมีระบบแจ้งเตือนเมื่อ Agent ติดขัด และมีมนุษย์พร้อมเข้าไปจัดการ

ความเสี่ยงอันดับสามคือ ขั้นตอนที่ไม่ย้อนกลับได้ เช่น การส่งข้อมูลภาษี การโอนเงิน หรือการลบข้อมูล ควรตั้งค่าให้ AI หยุดเสมอก่อนถึงจุดนั้น และให้มนุษย์เป็นคนกดยืนยัน หลักง่าย ๆ คืออะไรที่ส่งไปแล้วแก้ยาก ให้ "มนุษย์ไว้ก่อน"

นอกจากนี้ควรบันทึกตัวเลขความสำเร็จของ Agent อย่างสม่ำเสมอ เพราะผู้ให้บริการอาจประกาศความแม่นยำในระดับสูง แต่ผลจริงขึ้นกับหน้าจอ เว็บ และบริบทของแต่ละธุรกิจ ควรเก็บสถิติของตัวเอง เช่น มีกี่ครั้งที่ Agent ทำงานสำเร็จแบบไม่มีมนุษย์แก้ไข เพื่อประกอบการตัดสินใจขยายงานไปยังกระบวนการที่สำคัญขึ้น

สรุป: เริ่มใช้กับงานไหนก่อนดี

AI Computer-Use Agent เป็นตัวช่วยที่เหมาะกับ SME ไทยที่ต้องจัดการข้อมูลบนเว็บจำนวนมากแต่ไม่มี API ใช้ เริ่มจากงานที่ซ้ำชัดเจน เลือกแพลตฟอร์มที่รองรับการบันทึกและมี Human-in-the-loop กำหนดขอบเขตการเข้าถึงให้แคบ แล้วค่อยขยายตามความเชื่อมั่นของทีม

ที่ Flowtica มองว่าเทคโนโลยีนี้ไม่ได้มาแทนที่พนักงานทันที แต่มา "ทำงานหนักแทนคน" ในส่วนที่เสียเวลา เช่น คัดลอกข้อมูล เช็คยอด ส่งออกไฟล์ และกรอกฟอร์ม ทำให้พนักงานมีเวลาไปโฟกัสงานที่ต้องการความเข้าใจของมนุษย์จริง ๆ ก้าวแรกไม่ต้องใหญ่ แค่เลือกงานเล็ก ๆ หนึ่งงาน ตั้งระบบตรวจสอบให้ดี แล้วลงมือทดลอง

คำถามที่พบบ่อย

AI Computer-Use Agent กับ RPA ต่างกันอย่างไร

RPA ดั้งเดิมต้องใช้กฎที่เขียนตายตัว เช่น เลือก element บนหน้าเว็บหรือพิกัดหน้าจอ และต้องมี API หรือ scripting เพื่อให้ทำงานตามขั้นตอน Computer-Use Agent ใช้โมเดล AI มองภาพหน้าจอและโต้ตอบเหมือนมนุษย์ ทำให้ทำงานกับเว็บที่ไม่มี API ได้ ต่างกันตรงที่ RPA ให้ผลลัพธ์แน่นอนถ้าโครงสร้างไม่เปลี่ยน แต่ Computer-Use Agent ยืดหยุ่นกว่า และผลลัพธ์มีความไม่แน่นอนจึงต้องมีคนตรวจสอบ

SME ไทยที่ไม่มีโปรแกรมเมอร์ เริ่มใช้ Agent ได้ไหม

ได้ ถ้าเลือกแพลตฟอร์มที่รองรับการตั้งค่าแบบ low-code หรือบอกเป็นภาษาไทยได้ เช่น กำหนดว่าให้เข้าเว็บธนาคารและดาวน์โหลดไฟล์รายงาน อย่างไรก็ตาม SME ควรเริ่มจากงานที่ไม่ซับซ้อนและมีขั้นตอนชัดเจน และต้องมีคนในทีมที่พอเข้าใจเรื่องความปลอดภัยของข้อมูล ไม่จำเป็นต้องเป็นนักพัฒนาซอฟต์แวร์

งานแบบไหนที่ไม่ควรให้ AI Computer-Use Agent ทำ

งานที่ย้อนกลับไม่ได้และเกิดความเสียหายสูง เช่น การโอนเงินจำนวนมาก การอนุมัติสัญญา การแก้บัญชีหลัก หรือการลบข้อมูลสำคัญ ยังไม่ควรให้ AI ทำเองแบบอัตโนมัติเต็มรูปแบบ เพราะถ้า AI อ่านรายละเอียดผิดอาจเกิดผลกระทบที่แก้ไขยาก ควรให้ AI เตรียมข้อมูล หยุดก่อนขั้นตอนส่งจริง แล้วให้มนุษย์ตรวจสอบและกดยืนยัน

ถ้าเว็บธนาคารหรือเว็บสรรพากรเปลี่ยนหน้าจอ Agent จะยังทำงานได้ไหม

Computer-Use Agent มีข้อดีตรงที่ใช้ AI เข้าใจความหมายของปุ่มและฟอร์มใหม่ ทำให้รับมือการเปลี่ยนเล็กน้อยได้ดีกว่า RPA ที่ยึดตำแหน่งตายตัว แต่ถ้าเปลี่ยนโครงสร้างใหญ่ Agent ก็อาจสับสนได้ เมื่อเริ่มระบบควรเปิดบันทึกการทำงานและตั้งการแจ้งเตือนเมื่อ error เพื่อหยุดงาน และต้องวางแผนรับมือเมื่อหน้าจอเปลี่ยน

ต้องทำอย่างไรให้ credential ปลอดภัยเมื่อใช้ Agent

ไม่ควรให้ Agent จำรหัสผ่านด้วยตัวเองหรือบันทึกในข้อความตั้งค่า ควรใช้ระบบ secret management หรือตัวจัดการข้อมูลลับ แยกสิทธิ์การเข้าถึง กำหนดว่า Agent ใช้บัญชีจำกัดสิทธิ์เท่านั้น และเปิด two-factor authentication สำหรับขั้นตอนสำคัญ ถ้าเป็นไปได้ให้มนุษย์เป็นคนกรอกรหัส OTP เพื่อยืนยันตัวตน