ตัวแทนการทดสอบแอป (Android)

เอเจนต์การทดสอบแอปเป็นเอเจนต์การสร้าง การจัดการ และการดำเนินการกรณีทดสอบที่ทำงานด้วย Gemini ใน Firebase คุณกำหนดเป้าหมายการทดสอบในภาษาธรรมชาติ และเอเจนต์จะใช้ AI เพื่อทำความเข้าใจและไปยังส่วนต่างๆ ของแอป จำลองการโต้ตอบของผู้ใช้ และให้ผลการทดสอบโดยละเอียด

วิธีที่ตัวแทนการทดสอบแอปใช้ข้อมูลของคุณ

เอเจนต์การทดสอบแอปให้บริการโดย Gemini ใน Firebase และอยู่ภายใต้ ข้อกำหนดเดียวกัน ดูข้อมูลเพิ่มเติมเกี่ยวกับวิธีที่ Gemini ใน Firebase ใช้ข้อมูลของคุณได้ที่วิธีที่ Gemini ใน Firebase ใช้ข้อมูลของคุณ

ก่อนเริ่มต้น

ลงทะเบียนแอปกับ Firebase หากยังไม่ได้ลงทะเบียน

หากไม่ได้ใช้ผลิตภัณฑ์อื่นๆ ของ Firebase คุณจะต้องสร้างโปรเจ็กต์และลงทะเบียนแอปเท่านั้น โดยไม่ต้องเพิ่ม SDK ใดๆ ลงในแอป อย่างไรก็ตาม หากตัดสินใจใช้ผลิตภัณฑ์เพิ่มเติมในอนาคต โปรดทําตามขั้นตอนทั้งหมดในเพิ่ม Firebase โดยใช้Firebaseคอนโซล

เมื่อพร้อมที่จะเผยแพร่แอปเวอร์ชันก่อนเปิดตัวให้ผู้ทดสอบ ให้สร้าง APK หรือ AAB โดยใช้กระบวนการปกติ แล้วอัปโหลดไปยัง App Distribution ในFirebase Console คุณต้องลงนาม APK ด้วยคีย์การแก้ไขข้อบกพร่องหรือคีย์ App Signing

สร้างกรณีทดสอบ

หากต้องการเรียกใช้การทดสอบที่ AI แนะนำ ตัวแทนการทดสอบแอปจะใช้กรณีทดสอบในภาษามนุษย์เพื่อเรียกใช้การทดสอบกับแอป

ระบบจะแบ่งกรณีทดสอบแต่ละรายการออกเป็นขั้นตอนต่างๆ ซึ่งจะดำเนินการตามลำดับ ขั้นตอนช่วยให้คุณแบ่งกรณีทดสอบออกเป็นระยะต่างๆ โดยแต่ละระยะจะมี เกณฑ์ความสําเร็จของตัวเอง ตัวแทนอาจดำเนินการหลายอย่างในขั้นตอนเดียว

หากต้องการสร้างกรณีทดสอบ ให้เปิดหน้า App Distribution ของ Firebase คอนโซล แล้วทำตามขั้นตอนต่อไปนี้

1. ในแท็บกรณีทดสอบ ให้คลิกกรณีทดสอบใหม่ หากไม่ต้องการสร้างกรณีทดสอบด้วยตนเอง คุณสามารถแก้ไขหรือใช้กรณีทดสอบตัวอย่างที่ให้ไว้ได้
2. ในกล่องโต้ตอบเพิ่มกรณีทดสอบ ให้ตั้งชื่อกรณีทดสอบ ใช้เพื่อระบุการทดสอบ แต่ตัวแทนจะละเว้น
3. ลองแบ่งการทดสอบออกเป็นหลายขั้นตอนโดยคลิกปุ่มเพิ่มอีกขั้นตอน
4. กำหนดเป้าหมายให้กับแต่ละขั้นตอนเพื่ออธิบายสิ่งที่เอเจนต์การทดสอบแอปควรทำในขั้นตอนนั้น
5. (ไม่บังคับ) เพิ่มคำแนะนำเพื่อให้ข้อมูลเพิ่มเติมเพื่อช่วยให้ตัวแทน App Testing เข้าใจและไปยังส่วนต่างๆ ของแอปในขั้นตอนนั้น
6. (ไม่บังคับ) เพิ่มเกณฑ์ความสำเร็จเพื่อช่วยให้ตัวแทนการทดสอบแอปทราบว่าขั้นตอนเสร็จสมบูรณ์แล้วเมื่อใด
7. คลิกบันทึกเมื่อปรับแต่งการทดสอบเสร็จแล้ว

ตัวอย่างกรณีทดสอบ

ต่อไปนี้เป็นตัวอย่างวิธีสร้างกรณีทดสอบโดยใช้เอเจนต์การทดสอบแอป

ทำการทดสอบ

เอเจนต์การทดสอบแอปช่วยให้คุณเรียกใช้การทดสอบที่ AI แนะนำในคอนโซลได้โดย คลิกปุ่มเรียกใช้การทดสอบจากหน้าการเผยแพร่หรือหน้ากรณีทดสอบ ซึ่งจะเปิดหน้าจอการปรับแต่งตัวแทนการทดสอบแอป ที่คุณสามารถเลือกกรณีทดสอบที่มีอยู่ตั้งแต่ 1 รายการขึ้นไปเพื่อให้ตัวแทนดำเนินการ นอกจากนี้ คุณยังเลือกอุปกรณ์ที่ต้องการทดสอบเทียบด้วยได้ รวมถึงเลือกว่าจะระบุข้อมูลเข้าสู่ระบบหรือไม่

นอกจากนี้ คุณยังเลือกที่จะเรียกใช้การทดสอบการ Crawl แบบสุ่มได้ด้วยการเปลี่ยนประเภทการทดสอบ การทดสอบการ Crawl แบบสุ่มใช้ฟีเจอร์เครื่องมือทดสอบอัตโนมัติ

คุณดูผลการทดสอบได้จากหน้ารุ่นในแท็บตัวแทนการทดสอบแอปของรุ่น ปุ่มดูรายละเอียดจะเปิดกล่องโต้ตอบผลการทดสอบและแสดงปัญหา ภาพหน้าจอของแอป และ การดำเนินการที่ Gemini ทำระหว่างการทดสอบ

ทดสอบบิลด์โดยอัตโนมัติ

หากต้องการเรียกใช้การทดสอบตัวแทน App Testing ในบิลด์ใหม่โดยอัตโนมัติ เช่น จากไปป์ไลน์ CI/CD คุณสามารถเผยแพร่บิลด์ไปยังตัวแทนได้โดยใช้ปลั๊กอิน Gradle หรือ fastlane ของ App Distribution หรือ Firebase CLI

testPasswordFile="/path/to/testPassword.txt"

แก้ไขข้อบกพร่องของผลการทดสอบ

หากผลการทดสอบแตกต่างจากที่คาดไว้ คุณสามารถแก้ไขข้อบกพร่องของการทดสอบได้โดยใช้ปุ่มเปิด/ปิดแสดงมุมมองของตัวแทนในส่วนดูรายละเอียดในหน้าผลการทดสอบ มุมมองตัวแทนจะแสดงองค์ประกอบบนหน้าจอที่ตัวแทน App Testing ตรวจพบเมื่อใช้ข้อมูลการช่วยเหลือพิเศษของแอป หากต้องการดูสิ่งที่ตัวแทนเห็นอย่างละเอียด คุณสามารถดาวน์โหลด ข้อมูลดังกล่าวจากเมนูการดำเนินการเพิ่มเติม

นอกจากนี้ คุณยังใช้ปุ่มดูอาร์ติแฟกต์ในหน้าผลการทดสอบเพื่อดูวิดีโอ บันทึก และอาร์ติแฟกต์อื่นๆ ในระบบคลาวด์ทั้งหมดสำหรับผลการทดสอบได้ด้วย

ปัญหาและข้อจำกัดที่ทราบ

ตัวอย่างเอเจนต์การทดสอบแอปมีข้อจำกัดที่ทราบกันดังนี้

• เนื่องจากเอเจนต์การทดสอบแอปใช้ Generative AI เพื่อทดสอบแอป จึงอาจ ดำเนินการต่างๆ ในบางครั้งขณะที่ยังคงทำตาม วิธีการเดียวกัน
• เอเจนต์การทดสอบแอปจะรองรับเฉพาะการดำเนินการต่อไปนี้ แตะ ป้อนข้อความ ปัดขึ้น/ลง/ซ้าย/ขวา และรอ
• ตัวแทนการทดสอบแอปมีปัญหาในการดำเนินการทดสอบที่มีเพียงขั้นตอนเดียว ซึ่งต้องใช้การดำเนินการหลายอย่างจึงจะสำเร็จ โดยจะทำงานได้ดีขึ้นเมื่อแบ่งงานที่ซับซ้อน ออกเป็นขั้นตอนย่อยๆ หลายขั้นตอน
• บางครั้งเอเจนต์การทดสอบแอปจะไม่เลื่อนเพื่อแสดงองค์ประกอบอื่นๆ ที่อยู่นอกหน้าจอ ซึ่งมักเกิดขึ้นเมื่อไม่มีข้อบ่งชี้ที่มองเห็นได้ว่าเลื่อนได้ วิธีแก้ปัญหาชั่วคราวคือใช้ช่อง "คำแนะนำ" เพื่อแนะนำ การเลื่อน
• บางครั้งเอเจนต์การทดสอบแอปอาจนับได้ยาก เช่น การดำเนินการจำนวนครั้งที่เฉพาะเจาะจง
• ตัวแทนการทดสอบแอปจะไม่สามารถไปยังส่วนต่างๆ ของแอปได้หากเปิดใช้ FLAG_SECURE แทนที่จะเห็นภาพหน้าจอของแอป ระบบจะเห็นเพียงหน้าจอว่าง

โควต้าการทดสอบ

ในช่วงเวอร์ชันตัวอย่าง เราจะเสนอการทดสอบที่ AI แนะนำโดยไม่มีค่าใช้จ่าย ภายในโควต้าที่จำกัด ขีดจำกัดโควต้าเริ่มต้นคือ 200 การทดสอบต่อเดือนต่อโปรเจ็กต์ Firebase

โปรดทราบว่าหากคุณเลือกที่จะเรียกใช้กรณีทดสอบหลายรายการ หรือเรียกใช้กรณีทดสอบเดียวกัน ในอุปกรณ์หลายเครื่อง ระบบจะนับเป็นการทดสอบหลายรายการ เช่น หากคุณเรียกใช้กรณีทดสอบ 2 รายการในอุปกรณ์ 2 เครื่อง ระบบจะนับเป็นการทดสอบทั้งหมด 4 รายการ

หากต้องการเพิ่มโควต้าให้สูงกว่าขีดจำกัดเริ่มต้น โปรดติดต่อทีมสนับสนุน Firebase พร้อมแจ้งกรณีการใช้งานของคุณ