Microsoft CorporationMSFT
± ผสมกฎเกณฑ์ความเกี่ยวข้อง
Microsoft proposes a self-imposed AI governance framework requiring human shutdown control and public feedback, a regulatory/standards development with unclear near-term financial impact.
ผลกระทบต่อหุ้น 1
Artificial Intelligence▲ · 1 หุ้น
Microsoft Corporationผลกระทบต่อธีม 1
บริษัทนอก coverage
ข่าวที่เกี่ยวข้อง
▼2
กูเกิลยืนยัน Gemini เข้าถึงระบบบริษัทจริง 3 แห่งโดยไม่ตั้งใจระหว่างทดสอบความปลอดภัย
กูเกิลยืนยันเมื่อวันศุกร์ที่ 18 กันยายนว่า Gemini โมเดลปัญญาประดิษฐ์ของบริษัทได้เข้าถึงระบบที่มีการป้องกันของบริษัท 3 แห่งโดยไม่ตั้งใจ ระหว่างการทดสอบความปลอดภัยทางไซเบอร์ในเดือนพฤษภาคมที่ผ่านมา เนื่องจากโมเดลเข้าใจผิดว่าระบบเหล่านั้นเป็นเป้าหมายที่ได้รับอนุญาตให้ทดสอบ เฮเทอร์ แอดกินส์ รองประธานฝ่ายวิศวกรรมความปลอดภัยของกูเกิลระบุว่า ระหว่างการประเมินตามมาตรฐาน Gemini ใช้ข้อมูลที่เปิดเผยต่อสาธารณะบนอินเทอร์เน็ตและคาดเดาข้อมูลเข้าสู่ระบบ เพื่อเข้าถึงเว็บไซต์ 3 แห่งที่โมเดลเข้าใจว่าเป็นส่วนหนึ่งของสภาพแวดล้อมที่ได้รับอนุญาตให้ทดสอบ อย่างไรก็ตาม Gemini หยุดดำเนินการเพิ่มเติมหลังตรวจพบว่าระบบที่เข้าถึงนั้นเป็นของบริษัทที่มีอยู่จริง ไม่ใช่ระบบจำลองสำหรับการทดสอบ โดยกูเกิลได้แจ้งให้ทั้ง 3 บริษัทที่ได้รับผลกระทบทราบแล้ว และร่วมมือกับบริษัทคู่ค้าด้านการทดสอบเพื่อปรับปรุงขั้นตอนการทดสอบ ตามรายงานของวอลล์สตรีท เจอร์นัล การทดสอบดังกล่าวดำเนินการโดย Irregular บริษัทประเมินความปลอดภัยของ AI โดยการทดสอบครั้งหนึ่ง Gemini พยายามใช้รหัสผ่านหลายครั้งจนสามารถเข้าถึงระบบจริงที่ได้รับการป้องกันได้ ขณะที่การทดสอบอีก 2 ครั้ง โมเดลพบข้อมูลเข้าสู่ระบบที่เปิดเผยอยู่ในแหล่งข้อมูลสาธารณะ และนำข้อมูลดังกล่าวมาใช้เพื่อเข้าถึงระบบของบริษัทอื่น Irregular ระบุว่า การทดสอบดังกล่าวออกแบบโดยใช้บริษัทสมมติเป็นเป้าหมาย แต่เกิดความผิดพลาดจากมนุษย์ ทำให้ชื่อบริษัทสมมติตรงกับโดเมนอินเทอร์เน็ตของบริษัทที่มีอยู่จริง นอกจากนี้ สภาพแวดล้อมการทดสอบบางส่วนยังสามารถเข้าถึงอินเทอร์เน็ตได้โดยไม่ได้ตั้งใจ ทำให้โมเดล AI เข้าใจผิดว่าเป้าหมายจริงบนอินเทอร์เน็ตเป็นส่วนหนึ่งของการทดสอบจำลอง
▲2
แอนโทรปิกจับมือแอคเซนเจอร์ประเมินความปลอดภัย AI 5 ปี ฝ่ายละ 1 พันล้านดอลลาร์
บริษัทผู้พัฒนาเทคโนโลยีปัญญาประดิษฐ์แอนโทรปิกประกาศเมื่อวันที่ 18 ว่าบริษัทได้จับมือกับแอคเซนเจอร์ บริษัทที่ปรึกษารายใหญ่ เพื่อดำเนินการประเมินโมเดล AI ชั้นนำของบริษัทอย่างเป็นอิสระ ทั้งสองบริษัทจะลงทุนฝ่ายละอย่างน้อย 1 พันล้านดอลลาร์ในช่วง 5 ปีข้างหน้า เพื่อใช้ในการสร้างระบบการประเมิน หน่วยงานด้าน AI เฉพาะทางของแอคเซนเจอร์จะเป็นผู้นำความร่วมมือครั้งนี้ โดยจะทำการประเมินโมเดลของแอนโทรปิก การทดสอบแบบเรดทีม การประเมินด้านการจัดแนวพฤติกรรม และการตรวจสอบมาตรการความปลอดภัยของโมเดล การลงทุนของทั้งสองบริษัทจะสนับสนุนแนวทางที่เรียกว่าการประเมินแบบฝังตัว ซึ่งผู้ประเมินอิสระทำงานภายในบริษัท AI โดยมีสิทธิ์เข้าถึงใกล้เคียงกับพนักงาน แอนโทรปิกอธิบายว่าผู้ประเมินแบบฝังตัวสามารถประเมินวิธีดำเนินงานของบริษัท ตรวจสอบว่าคำมั่นด้านความปลอดภัยได้รับการปฏิบัติตามหรือไม่ และระบุจุดบอดได้ ทั้งสองบริษัทมีแผนจะร่วมมือในลักษณะเดียวกันกับหน่วยงานประเมินอื่นและบริษัทผู้พัฒนา AI รายอื่นด้วย
แอนโทรปิกพิจารณาเปิดตัวโมเดลใหม่ก่อน IPO เพื่อรับมือ GPT-6 Astra ของโอเพนเอไอ
บริษัทแอนโทรปิก ผู้พัฒนาเทคโนโลยีปัญญาประดิษฐ์ กำลังพิจารณาเปิดตัวโมเดลใหม่ก่อนการเสนอขายหุ้นต่อประชาชนทั่วไปครั้งแรก หรือ IPO โดยมีเป้าหมายเพื่อรับมือกับโอเพนเอไอซึ่งเป็นคู่แข่งในอุตสาหกรรมเดียวกันที่กำลังได้รับความสนใจเพิ่มขึ้นนับตั้งแต่เปิดตัว GPT-6 Astra แหล่งข่าวสามรายเปิดเผยเรื่องนี้
แหล่งข่าวรายหนึ่งกล่าวว่า แอนโทรปิกกำลังประเมินความปลอดภัยของโมเดลรุ่นถัดไป ซึ่งเป็นส่วนหนึ่งของการพิจารณาเปิดตัวโมเดลใหม่
แหล่งข่าวที่ใกล้ชิดกับแนวคิดของบริษัทกล่าวว่า ท่ามกลางภาวะอัตราดอกเบี้ยขาขึ้นที่ทำให้นักลงทุนให้ความสำคัญกับจังหวะเวลาที่คาดว่าจะได้รับผลกำไรมากขึ้น ประเด็นที่อยู่ระหว่างการหารือรวมถึงวิธีสร้างสมดุลระหว่างการลงทุนเพื่อเปิดตัวโมเดลใหม่กับการดำเนินการเพื่อเสริมสร้างความสามารถในการทำกำไร
แหล่งข่าวหลายรายกล่าวว่า บริษัทอาจเลื่อนการ IPO ออกไปหลังการเลือกตั้งกลางเทอมของสหรัฐในเดือนพฤศจิกายน แอนโทรปิกปฏิเสธที่จะแสดงความคิดเห็น