บริษัทจัดการข้อมูลแบบไม่มีโครงสร้าง Komprise ได้พัฒนาเทคโนโลยีที่ได้รับการจดสิทธิบัตรซึ่งสามารถแยกชุดข้อมูลที่ไม่มีโครงสร้างขนาดใหญ่แบบไดนามิกได้ โซลูชันนี้จะกระจายปริมาณงานไปยังกลไกประมวลผลหลายตัวระหว่างการส่งข้อมูลไปยัง GPU ที่ประมวลผลด้วย AI ซึ่งช่วยเร่งความเร็วการประมวลผลโดยรวมได้อย่างมาก
เทคโนโลยี Komprise Elastic Shares (KES) ได้รับการบันทึกอย่างเป็นทางการเป็นสิทธิบัตร US-12566637-B2 โดย Michael Peercy ซึ่งเป็นซีทีโอของ Komprise และทีมวิจัยของเขาเป็นผู้ยื่นเสนอ ชื่ออย่างเป็นทางการของมันคือ “ระบบและวิธีการแบ่งย่อยแผนผังที่ไม่รู้จักสำหรับการดำเนินการโดยกลไกการคำนวณหลายตัว”
Peercy กล่าวว่า "Elastic Shares ช่วยให้ลูกค้าของเราใช้ประโยชน์จากทรัพยากรคอมพิวเตอร์ หน่วยความจำ และเครือข่ายอันทรงคุณค่าได้อย่างเต็มที่ เทคโนโลยีนี้มอบการปรับขนาดประสิทธิภาพที่เกือบจะเชิงเส้น ช่วยให้องค์กรต่างๆ ได้รับความได้เปรียบทางการแข่งขันที่โดดเด่น"
สำหรับชุดข้อมูลระดับเพตะไบต์ที่ส่งไปยังเซิร์ฟเวอร์ AI สำหรับการวิเคราะห์ การอนุมาน LLM หรือการคำนวณเอเจนต์ AI เอ็นจิ้นการประมวลผลเดียวต้องใช้เวลาหลายชั่วโมงในการสำรวจแผนผังไดเร็กทอรีหรือคำนำหน้าพื้นที่จัดเก็บอ็อบเจ็กต์ กลไกการประมวลผลสามารถกำหนดเป็นเซิร์ฟเวอร์อิสระ แต่ละเธรด กลุ่มเธรด กระบวนการ หรือคลัสเตอร์กระบวนการ โดยมีหลักการปฏิบัติงานที่สอดคล้องกันในทุกสถานการณ์ แม้ว่าผู้ใช้สามารถปรับใช้กลไกหลายตัวสำหรับการประมวลผลแบบขนานล่วงหน้าได้ การจัดสรรแบบคงที่มักจะทำให้เกิดความไร้ประสิทธิภาพ ขนาดสาขาที่ไม่สม่ำเสมอส่งผลให้โหนดประมวลผลบางโหนดทำงานเสร็จเร็วและไม่ได้ใช้งานในขณะที่รอให้โหนดที่ช้ากว่าทำงานที่ได้รับมอบหมายให้เสร็จสิ้น
สิทธิบัตร Komprise US-12566637-B2
ทีมงานของ Peercy ได้คิดค้นเครื่องกำหนดเวลางานอัจฉริยะที่ฝังอยู่ภายในกลไกประมวลผลตัวใดตัวหนึ่งเพื่อตรวจสอบสถานะของโหนดแบบเรียลไทม์ เมื่องานการประมวลผลข้อมูลเริ่มต้นขึ้น ปริมาณงานจะถูกจัดสรรตั้งแต่แรกผ่านกลไกการประมวลผลที่มีอยู่ เมื่อโหนดใดๆ เสร็จสิ้นพาร์ติชันที่กำหนด โหนดจะกลับไปที่พูลทรัพยากรเพื่อรับงานที่ค้างอยู่ กลไกนี้ช่วยลดเวลาว่าง กำหนดปริมาณงานใหม่อย่างต่อเนื่องให้กับโหนดประมวลผลที่ว่าง และลดระยะเวลาการประมวลผลโดยรวมให้สั้นลง
ตามโพสต์บล็อกอย่างเป็นทางการของ Komprise KES จะแจกจ่ายปริมาณงานข้อมูลที่ไม่มีโครงสร้างแบบไดนามิกทั่วทั้งคลัสเตอร์เซิร์ฟเวอร์ในลักษณะสตรีมมิ่ง เทคโนโลยีนี้บรรลุการเร่งความเร็วแบบเกือบเชิงเส้นสำหรับการประมวลผลข้อมูลขนาดใหญ่ โดยไม่ต้องใช้ข้อมูลที่ได้มาล่วงหน้าเกี่ยวกับความจุของชุดข้อมูล โครงสร้างภายใน หรือเวลาแฝงในการประมวลผล
พูดง่ายๆ ก็คือ: ทุกโหนดคอมพิวเตอร์จะได้รับงานใหม่โดยอัตโนมัติทันทีหลังจากเสร็จสิ้นการมอบหมายปัจจุบัน โดยคงการใช้ทรัพยากรอย่างเต็มที่จนกว่างานข้อมูลทั้งหมดจะเสร็จสมบูรณ์
ไมเคิล เพียร์ซี.
เอกสารสิทธิบัตรระบุว่างานย้ายข้อมูลขนาดใหญ่ระหว่างไฟล์เซิร์ฟเวอร์หรือโวลุ่มการจัดเก็บข้อมูลมักจะเผชิญกับข้อจำกัดด้านเวลาที่เข้มงวด โหนดประมวลผลเดียว ไม่ว่าจะเป็นเธรด กระบวนการ หรือเซิร์ฟเวอร์แบบสแตนด์อโลน ขาดปริมาณการประมวลผลที่เพียงพอที่จะเสร็จสิ้นเวิร์กโหลดหนักได้อย่างรวดเร็ว ทำให้การประมวลผลแบบขนานหลายกลไกเป็นโซลูชันที่จำเป็น
เอกสารอธิบายเพิ่มเติมว่าโครงสร้างแผนผังไดเร็กทอรีสามารถระบุได้เฉพาะระหว่างการแวะเวียนแบบเรียกซ้ำจากโหนดรากไปยังโหนดปลายสุด ในบางกรณี ข้อมูลจะต้องได้รับการประมวลผลตามลำดับคงที่ เช่น การจัดลำดับความสำคัญของไดเร็กทอรีหลักก่อนโฟลเดอร์ย่อยและไฟล์ ซึ่งจำเป็นต้องมีการแบ่งส่วนภาระงานแบบไดนามิกแบบเรียลไทม์ แทนการแบ่งพาร์ติชันแบบคงที่ที่เข้มงวด ซึ่งจะต้องปรับให้เข้ากับสถาปัตยกรรมข้อมูลที่หลากหลายและไม่รู้จัก
เทคโนโลยีที่ได้รับการจดสิทธิบัตรนี้ใช้กับไฟล์ โฟลเดอร์ ออบเจ็กต์การจัดเก็บข้อมูล และคำนำหน้าออบเจ็กต์ แม้ว่าเดิมทีจะออกแบบมาสำหรับเซิร์ฟเวอร์กายภาพอิสระ แต่ก็สามารถทำงานร่วมกับกลไกประมวลผลทุกรูปแบบ รวมถึงเธรด กระบวนการ และคลัสเตอร์บริการแบ็กเอนด์
Komprise เน้นย้ำถึงข้อได้เปรียบหลักสามประการที่มาจากเทคโนโลยี KES:
-
การแบ่งพาร์ติชันงานแบบไดนามิก: ทรัพยากรการประมวลผลที่มีมูลค่าสูงจะถูกมอบหมายใหม่พร้อมกับงานใหม่ทันทีเมื่อไม่ได้ใช้งาน
-
การประมวลผลข้อมูลแบบตาบอด: ระบบรองรับการคำนวณชุดข้อมูลโดยไม่ต้องรับรู้ขนาดข้อมูล โครงสร้างภายใน และเวลาแฝงในการประมวลผลตัวแปรล่วงหน้า ซึ่งเหมาะสมอย่างยิ่งกับสถานการณ์การส่งข้อมูลการสตรีม AI
-
การปรับสมดุลทรัพยากรอย่างชาญฉลาด: ปรับกลยุทธ์การจัดสรรให้เหมาะสมโดยอัตโนมัติเพื่อปรับให้เข้ากับลำดับชั้นข้อมูลที่ไม่มีโครงสร้างซึ่งมีความหนาแน่นของสาขาที่ไม่สามารถคาดเดาได้
เทคโนโลยีที่ได้รับการจดสิทธิบัตรที่เป็นนวัตกรรมใหม่นี้มอบการเพิ่มประสิทธิภาพในทางปฏิบัติและมีประสิทธิภาพสำหรับการประมวลผลข้อมูลที่ไม่มีโครงสร้างขนาดใหญ่
Beijing Qianxing Jietong Technology Co., Ltd.
Sandy Yang/ผู้อำนวยการฝ่ายกลยุทธ์ระดับโลก
WhatsApp / WeChat: +86 13426366826
อีเมล: yangyd@qianxingdata.com
เว็บไซต์: www.qianxingdata.com/www.storagesserver.com
มุ่งเน้นธุรกิจ:
การจัดจำหน่ายผลิตภัณฑ์ ICT/บูรณาการระบบและบริการ/โซลูชั่นโครงสร้างพื้นฐาน
ด้วยประสบการณ์การจัดจำหน่ายด้านไอทีมากกว่า 20 ปี เราร่วมมือกับแบรนด์ชั้นนำระดับโลกเพื่อนำเสนอผลิตภัณฑ์ที่เชื่อถือได้และบริการระดับมืออาชีพ
“ใช้เทคโนโลยีเพื่อสร้างโลกอัจฉริยะ” ผู้ให้บริการผลิตภัณฑ์ ICT ที่เชื่อถือได้ของคุณ!
ข้อความของคุณจะต้องอยู่ระหว่าง 20-3,000 ตัวอักษร!
Thai
