ستستحوذ شركة NetApp على شركة DataPelago، وهي منشأة محرك معالجة البيانات العالمي النووي (UDPE) الذي يسرع الحوسبة غير المتجانسة للتحليلات والذكاء الاصطناعي التوليد.
بنيت على مصدر مفتوح غلوتين، فيلوكس و سبسترايت، النواة تسرع بشكل كبير سبارك و ترينو لتقديم أداء استثنائي من حيث التكلفة.الرسمتم تأسيسها في عام 2021 من قبل الرئيس التنفيذي راجان غويال و CPO آناند آيير ، DataPelago خرجت من التخفي في أكتوبر 2024 وجمع أكثر من 75 مليون دولار في المجموع ،بما في ذلك جولة تمويل بقيمة 47 مليون دولار في عام 2024.
صرح الرئيس التنفيذي لشركة NetApp جورج كوريان أن تطوير أجهزة الذكاء الاصطناعي يتطلب بنية تحتية بيانات قادرة على حد سواء لفتح قيمة بيانات المؤسسة،ويعزز الاستحواذ قدرة NetApp على تقديم معالجة البيانات السريعة للتمييز التنافسي.
أشار مدونة DataPelago إلى أن Nucleus سيتم تضمينها بشكل أصلي داخل منصة بيانات NetApp، مما يتيح اعتماد الشركات على نطاق أوسع بكثير مما يمكن للشركة الناشئة تحقيقه بشكل مستقل. في وقت سابق من هذا العام،DataPelago تحتل المرتبة الرابعة في علوم البيانات في قائمة Fast Company للشركات الأكثر ابتكاراً في العالم لعام 2026.
على عكس الهندسة المعمارية التقليدية التي تنقل مجموعات البيانات إلى مجموعات CPU / GPU الخارجية ، يقوم Nucleus بتشغيل الحوسبة المتسارعة مباشرة في مستوى التخزين. تظهر المعايير المقارنة مع Nvidia cuDF ما يصل إلى 10.5 أضعاف سرعة الإسقاطات، مرشحات أسرع 10.1x وتجميعات أسرع 4.3x. وضعت بين محركات الاستعلامات (Spark ، Trino ، Flink) وأطر Python (Ray ، Dask) ، يحتوي كومته على ثلاث طبقات وحدات:
1.DataApp: وحدة تكامل قابلة للشحن لإدخال التسارع في Spark و Trino ومحركات أخرى.
2.DataOS: طبقة التنسيق التي ترسم عمليات البيانات بشكل ديناميكي إلى مسرعات مختلطة لتنسيق الأداء القابل للتوسع.
3.DataVM: آلة افتراضية مخصصة مع ISA خاصة بالمجال ، تقدم تجريد تنفيذي موحد لمعالجات المعالجات المركزية والمعالجات الفورية ، FPGA والسيليكون المخصص.
تدفق تنفيذ البيانات الأساسية
1الوصول إلى البيانات عبر مكونات الإطار: يتم نشرها كملحقات Spark JAR متوافقة مع مكونات البيانات القياسية ، تدعم Parquet و ORC و Iceberg و Delta Lake و JSON وأهداف التخزين بما في ذلك S3 و GCS,ADLS و HDFS ومصفوفات على الموقع. يمتد التسارع إلى تكاملات التخزين مع الاحتفاظ بمنطقية الاستعلامات الأصلية عبر طبقات إدخال / إخراج المحرك القياسية.
2تخطيط الاستعلامات وتحسينها: يقوم محرك المضيف بتوليد خطة مادية؛ ويتحولها DataApp إلى تمثيل وسيط عبر Gluten / Substrait.يقوم محسن ذكي ببناء مخططات تدفق البيانات المثلى وتخصيص موارد وحدة المعالجة المركزية / وحدة المعالجة المركزية لتنفيذ DataOS / DataVM.
3تحسينات نقل البيانات عبر الأجهزة: اندماج المشغل / النواة وتنفيذ التدفق يلغي التطبيقات الوسيطة الكاملة لخفض تكاليف الإدخال والخروج.تقلل الذاكرة المشتركة من النسخة الصفرية من تكرار بيانات وحدة المعالجة المركزية وحدة المعالجة المركزية، في حين أن DataVM® ISA تستفيد من LLVM و CUDA و ROCm لتوجيه المهام إلى الأجهزة المثلى عن طريق المعالجة المتجهة العمودية.هذه التعديلات ترفع من استغلال معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة معالجة.
تعمل Nucleus على الموقع وعبر السحب العامة الرئيسية. يسلم مسرع Spark الخاص بها مكاسب 3 × 4 في معدل الإنجاز مقابل Databricks Photon ؛كما أنها تتكامل مع Snowflake من خلال تسريع معالجة تنسيق الطاولة المفتوحة وأنابيب Spark / Trino الصاعدة / الهبوطية التي تغذي المستودعتقول DataPelago أن Nucleus يقلل من تكاليف البنية التحتية بنسبة تصل إلى 80٪ ويقدم أداء أسرع 10 مرات من خطوط الأنابيب القديمة. من خلال إزالة تكرار البيانات الإلزامي بين الأنظمة التشغيلية ونظم الذكاء الاصطناعي,فإنه يزيل الحاجز الرئيسي الذي يبطئ إطلاق الذكاء الاصطناعي للمؤسسات، مع عمليات نشر مباشرة في الشركات العالمية الكبيرة عبر القطاعات العمودية.
قال الرئيس التنفيذي لشركة داتا بيلاغو، راجان غويال، إن المهمة الأساسية للشركة هي حل اختناقات معالجة البيانات التي تعيق ابتكار الذكاء الاصطناعي.الاندماج مع NetApp يربط بين تقنية التسارع الرائدة مع محفظة البنية التحتية واسعة النطاق لـ NetAppوقد استثمرت الشركات بكثافة في وحدات المعالجة الفورية والنماذج، ومع ذلك تعاني من صوامع البيانات المجزأة التي تترك الأجهزة غير مستغلة بشكل كاف، وتبسيط المجموعة المشتركة لنشر الذكاء الاصطناعي على نطاق واسع.
تشكل NetApp الاستحواذ على أنه ترقية هامة للمحفظة ، مما يجلب المعالجة المتسارعة من GPU مباشرة إلى سير العمل التخزين لتقديم تفعيل بيانات المؤسسات الصفرية الحقيقية لذكاء الاصطناعي.لا تزال التمويلات الصفقة غير معروفة؛ نظراً للجاذبية المؤسسية لنوكليوس، والتآزر الوثيق مع NetApp AIDE والطلب المتزايد على الذكاء الاصطناعي، فإن تقييم الشراء من المرجح أن يصل إلى مضاعف 4 × 5 من التمويل الإجمالي لـ 75 مليون دولار من DataPelago.ستعمل DataPelago كشركة تابعة لـ NetApp مملوكة بالكامل.
التمييز الرئيسي: النواة مقابل KV Cache مقابل NetApp AIDE
1تمييز.Nucleus و KV Cache: يعمل Nucleus على تحسين استيعاب البيانات قبل الاستدلال وتحويلها والاستعلام قبل وصول البيانات إلى خوادم GPU.Nvidia KV Cache هو تحسين ذاكرة في GPU نشط فقط بعد وصول البيانات إلى أجهزة GPU لزيادة كفاءة توليد الرموز. النواة تسريع تسليم البيانات إلى الحوسبة؛ كيه في كاش تحسين وقت تشغيل النموذج بعد وصول البيانات إلى المسرعات.
2.NetApp AIDE مقابل Nucleus UDPE: AIDE هي معالجة الذكاء الاصطناعي المسبقة الموقوفة على ONTAP / AFX لـ LLM والعملاء ، والتي تعمل ك ETL الملكية مع قاعدة بيانات متجهة مدمجة ، وتصنيف البيانات الوصفية ،خدمة RAG وتكامل Nvidia AI Enterprise (بما في ذلك خدمات NIM الصغيرة). النواة غير قادرة على التخزين وتسريع أحمال عمل Spark / Trino العامة. دمج النواة مع AIDE من شأنه تعزيز أنابيب التحول والتدريب والتعديل الدقيق والاستنتاج ،تمكين أحمال العمل المتسارعة مباشرة على تخزين NetApp AFX؛ من المتوقع أن يكون هناك حل شامل لـ AIDE+Nucleus.
قال سيام ناير، مدير التشغيل التنفيذي لشركة نيتاباك إن نيكليوس يوفر تسريعًا محددًا ببرنامجًا في التخزين، مما يتيح إعداد البيانات والحوكمة وتفعيل الذكاء الاصطناعي دون نسخة عبر وحدة المعالجة المركزية ووحدات معالجة الرسوم البيانية.نيت اب تدير المزيد من البيانات المؤسسية متعددة البيئات من أي منافس، وتعتمد الموجة القادمة من القدرة التنافسية للذكاء الاصطناعي على معالجة البيانات في مصدرها
شركة بكين تشيانكسينغ جييتونغ للتكنولوجيا المحدودة
ساندي يانغ مدير الاستراتيجية العالمية
واتساب / ويتشات: +86 13426366826
البريد الإلكتروني: yangyd@qianxingdata.com
الموقع: www.qianxingdata.com/www.storagesserver.com
التركيز على الأعمال:
توزيع منتجات تكنولوجيا المعلومات والاتصالات / تكامل النظام والخدمات / حلول البنية التحتية
مع أكثر من 20 عامًا من الخبرة في توزيع تكنولوجيا المعلومات، نحن نتعاون مع العلامات التجارية العالمية الرائدة لتقديم منتجات موثوقة وخدمات مهنية.
استخدام التكنولوجيا لبناء عالم ذكي مزود خدمة منتجات تكنولوجيا المعلومات والاتصالات الموثوق به
يجب أن تكون رسالتك بين 20-3000 حرف!
Arabic
