Open-Interface: ควบคุมคอมพิวเตอร์ด้วย LLM

• สามารถใช้คีย์ OpenAI API เพื่อควบคุมคอมพิวเตอร์ได้
  • หากต้องการก็สามารถใช้ LLM อื่นได้เช่นกัน และอาจใช้ความช่วยเหลือจาก LiteLLM ได้
• สามารถสื่อสารกับ LLM และจำลองคำสั่งของมันได้ (อินพุตเมาส์/คีย์บอร์ด)
• ตัวอย่าง:
  • "ช่วยแก้ปริศนาคำศัพท์ประจำวันนี้ให้หน่อย"
  • "เปิด Google Docs แล้วช่วยจัดเมนูอาหารกลางวันให้หน่อย"
  • "ช่วยเขียนโค้ดเว็บแอปพลิเคชันให้หน่อย"
• คำสั่งที่อาจทำให้ทำงานผิดพลาด:
  • การให้เหตุผลเชิงพื้นที่
    • การจัดการสเปรดชีต
  • แอปพลิเคชัน GUI ที่ซับซ้อนซึ่งจำเป็นต้องใช้เคอร์เซอร์เมาส์
• สิ่งที่วางแผนไว้:
  • "ช่วยสร้างตัวอย่างเสียงเบสกีตาร์ด้วย Garage Band ให้หน่อย"
  • "ช่วยใช้ Sportify เพื่อดูรสนิยมทางดนตรีของเพื่อนฉัน แล้วสร้างเพลย์ลิสต์สำหรับปาร์ตี้คืนนี้ให้หน่อย"
• คาดว่าจะมีค่าใช้จ่ายประมาณ $0.0005 - $0.002 ขึ้นอยู่กับ LLM
• สามารถหยุดได้โดยกดปุ่ม 'Stop' หรือย้ายเคอร์เซอร์ไปที่มุมจอ
• หากใช้หลายจอ จะทำงานได้เฉพาะภายในหน้าจอหลักเท่านั้น