Browser Arena — benchmark กลางสาย AI browser ที่…
อันนี้เป็นโปรเจกต์ของ Notte ที่ตั้งใจแก้ pain ใหญ่มากในวงการ AI agent ตอนนี้ คือ “ทุกเจ้าบอกตัวเองแรง แต่ไม่มีใครเทสแบบยุติธรรม”
สิ่งที่เค้าทำคือสร้าง benchmark แบบ open-source ที่เอา cloud browser provider หลายเจ้ามาเทียบกัน ด้วยเงื่อนไขเดียวกันหมด ทั้ง infra, test, environment แล้วรันจริง 1,000+ ครั้งต่อเจ้า
จุดที่ผมว่ามันโคตรสำคัญคือ เค้าไม่ได้โชว์แค่ best case แต่โชว์ median, P90, P95 พร้อม error rate ด้วย ซึ่งนี่คือของจริงสำหรับคนทำ production มากกว่าการโชว์ตัวเลขสวยๆ
อีกอย่างที่ rare มากคือ เค้าเปิดทุกอย่างให้ reproduce ได้หมด ตั้งแต่โค้ดไปจนถึง infra metadata แบบ region, instance type คือใครอยากเถียง ต้องรันเองได้ ไม่ใช่เชื่อ slide
ตัว benchmark ตอนนี้ยังโฟกัสที่ lifecycle พื้นฐานของ browser session เช่น create → connect → navigate → release ซึ่งเป็น cost ที่ทุก automation ต้องจ่ายอยู่แล้ว
แต่ roadmap ต่อไปคือ interesting มาก เพราะจะเริ่มไปวัดของจริง เช่น scroll, extract data, fill form, checkout flow ซึ่งพวกนี้แหละที่ agent ส่วนใหญ่ใช้จริง
มุมผมคิดว่า tool นี้ไม่ได้มีค่าแค่ “เลือก provider” แต่มันกำลังสร้าง standard ใหม่ของวงการ ว่าการ claim performance ต้อง verify ได้ ไม่งั้นจะเริ่มไม่น่าเชื่อถือ
สรุปคือ ถ้าใครทำ AI agent, web automation หรือกำลังเลือก infra อยู่ อันนี้ไม่ใช่แค่ tool แต่เป็น “truth layer” ที่วงการนี้ขาดมานาน
อยากใช้ AI กับงานจริงเป็นระบบ?
เรียน Claude Method — วิธีคิดและลงมือใช้ Claude/AI กับงานจริง ตั้งแต่วันแรก
📍 โพสต้นฉบับบน Facebook: AI กับ Peesamac