ข้ามไปยังเนื้อหา

แท็ก

#Dev Proxy

2 บทความ

เมื่อ eval ของ coding agent ผ่านเพราะ sandbox รั่ว — Microsoft เล่าเคสที่ agent ถูกตัดเน็ตแล้วไปเจอซอร์สโค้ดคำตอบอยู่บนเครื่องตัวเอง
เครื่องมือนักพัฒนา

เมื่อ eval ของ coding agent ผ่านเพราะ sandbox รั่ว — Microsoft เล่าเคสที่ agent ถูกตัดเน็ตแล้วไปเจอซอร์สโค้ดคำตอบอยู่บนเครื่องตัวเอง

16 ก.ย. Waldek Mastykarz จาก Microsoft เผยแพร่เคสจริงของ eval ที่ให้ผลผ่านแต่วัดผิดสิ่ง เขาปิดเว็บและบล็อก curl เพื่อวัดความรู้ภายในของ GPT-5.6 Luna เรื่อง Dev Proxy แต่ agent ไปเจอ Dev Proxy ที่ติดตั้งอยู่บนเครื่องพร้อม git history แล้วอ่านซอร์สที่ tag v0.29.2 ตอบถูกหมด บทความเสนอให้นิยาม sandbox รอบ 'ข้อมูล' แทนที่จะไล่บล็อกทีละเครื่องมือ พร้อมเช็คลิสต์ 8 ข้อ

· อ่าน 5 นาที
จะวัดผล agent skill ที่เรียก API จริงได้อย่างไรโดยไม่เผาเงินและไม่ทำข้อมูลจริงพัง — Microsoft เสนอให้เอา Dev Proxy มาคั่น
AI Skills

จะวัดผล agent skill ที่เรียก API จริงได้อย่างไรโดยไม่เผาเงินและไม่ทำข้อมูลจริงพัง — Microsoft เสนอให้เอา Dev Proxy มาคั่น

Waldek Mastykarz จาก Microsoft เขียน (17 ก.ค. 2026) ถึงปัญหาที่คนเขียน agent skill เจอเวลาจะทำ eval กับ skill ที่เรียก API จริง — ค่า API บานปลาย, PATCH/DELETE ไปแก้ข้อมูลจริง และผลรันไม่นิ่งเพราะ state เปลี่ยน — แล้วเสนอทางออกด้วย Dev Proxy ที่ดักทราฟฟิก HTTP ตอบแทน API จริงโดย skill ยังเรียก URL เดิมไม่ต้องแก้อะไรเลย

· อ่าน 5 นาที