EMR Serverless Spark من Alibaba Cloud يعالج الآن الصور والفيديو باستخدام SQL فقط، دون الحاجة إلى بايثون

أضافت Alibaba Cloud دعماً متعدد الوسائط لوظيفة الذكاء الاصطناعي في E-MapReduce (EMR) Serverless Spark. تعمل الصور، أطر الفيديو، والبيانات الثنائية الآن مباشرة داخل استعلامات SQL. وصل التحديث مع إصدار esr-4.7.0، استناداً إلى Spark 3.5.2. يمكن لمهندسي البيانات التوقف عن خلط البيانات بين دفاتر بايثون ونقاط نهاية خدمة تعلم الآلة. يعمل استنتاج الرؤية كدالة SQL قياسية إلى جانب أعمال ETL الحالية.

ثلاث طرق لإدخال الصور في SQL

تكشف وظيفة الذكاء الاصطناعي عن قدرتين أساسيتين: ai_query تتعامل مع فهم الصور وتصنيفها؛ ai_embedding_multimodal تولد تضمينات متجهة من البيانات البصرية. كلاهما يدعم ثلاثة أوضاع إدخال:

• حقل DLF Blob: تخزين بيانات الصور الثنائية مباشرة في عمود جدول وتمريرها إلى الدالة.
• مسار URI: الإشارة إلى ملفات الصور المخزنة في OSS، OSS-HDFS، أو أنظمة ملفات أخرى متوافقة مع Hadoop. تقرأ الدالة الملف داخلياً.
• read_files + binary: قراءة الصور دفعة واحدة من دليل دون إنشاء جدول مسبقاً، باستخدام معلمة اللاحقة لتصفية نوع الملف.

يحل هذا مشكلة شائعة للفرق التي تخزن بالفعل مسارات الصور في جداول منظمة ولكنها تحتاج إلى تشغيل استنتاج دون إعادة كتابة خطوط الأنابيب الخاصة بها. the-verification-horizon-why-rewarding-coding-agents-is-getting-harder

حالة القيادة الذاتية: من التصنيف اليدوي إلى ETL باستخدام SQL

أظهرت Alibaba Cloud القدرة من خلال سيناريو معالجة بيانات القيادة الذاتية. يعتمد تحليل كاميرا لوحة القيادة التقليدي على فرق التصنيف اليدوي. إنه مكلف، بطيء، وعرضة للأخطاء على المركبات النادرة أو الهياكل الطرقية المعقدة.

باستخدام ai_query مع Qwen 3.6-plus، بنى الفريق خط أنابيب ETL قياسي. يقرأ الصور الخام من OSS، يطبق إرشاداً يصف خمس فئات بصرية (دوار، سيارة شرطة، شاحنة بيك آب، شاحنة رافعة/رافعة، لا شيء مما سبق)، ويخرج نتائج JSON منظمة، كل ذلك في عبارة SQL واحدة. how-alibaba-cloud-pushed-its-way-into-20-gartner-quadrants-and-what-it-means-for-the-ai-cloud-race

أكملت المهمة في ثوانٍ عبر خمس صور اختبار عالية الدقة، مع تحديد المركبات وميزات الطريق بشكل صحيح. عملت الحالات الحدودية: عندما تم إعطاء صورة لا تتطابق مع أي فئة محددة، أعاد النظام مصفوفة فارغة بدلاً من اختلاق تسمية.

النماذج ومسارات التكامل

يأتي EMR Serverless Spark مع عدة نماذج مدمجة قابلة للاستدعاء دون تسجيل: Qwen 3.6-plus، Qwen 3.5-plus، Qwen-plus، text-embedding-v4، و tongyi-embedding-vision-plus. للعمل المؤسسي، تدعم المنصة التكامل مع PAI-EAS لنماذج موزعة آمنة في VPC و Alibaba Cloud Model Studio لاختبار إثبات المفهوم السريع. how-local-llms-like-gemma-and-qwen-are-taming-open-source-repository-triage-at-scale

تدعم البنية أيضاً نماذج LLM خارجية بما في ذلك DeepSeek، KIMI، GLM، و MiniMax من خلال آلية تسجيل خدمة نموذج موحدة.

التضمينات المتجهة للاسترجاع متعدد الوسائط

تحول دالة ai_embedding_multimodal الصور إلى تضمينات متجهة يمكن كتابتها مباشرة في Milvus أو قواعد بيانات متجهة أخرى. يتيح هذا البحث عبر الوسائط بين النص والصورة والاسترجاع متعدد الوسائط. microsofts-new-platform-gives-scientists-a-governed-factory-for-ai-agents

تضع Alibaba Cloud هذا التحديث كمُمكن للحلقة المغلقة لبيانات القيادة الذاتية، من لقطات الكاميرا الخام إلى التسميات المنظمة، التضمينات، ومجموعات البيانات الجاهزة للتدريب، كل ذلك ضمن خط أنابيب Serverless Spark واحد.