Zarr (डेटा प्रारूप)
Zarr एक खुला स्रोत प्रारूप है जो n-आयामी सरणियों को खंडित, संपीड़ित रूप में संग्रहीत करने के लिए है, जो क्लाउड-मूल और समानांतर I/O कार्यभार के लिए डिज़ाइन किया गया है। रोबोटिक्स में, Zarr का उपयोग बड़े रोबोट प्रदर्शन डेटासेट (छवियां, संयुक्त अवस्थाएं, क्रियाएं) को संग्रहीत करने के लिए किया जाता है जिसे वस्तु भंडारण (S3, GCS) से पूरी फाइलें डाउनलोड किए बिना कुशलतापूर्वक पढ़ा जा सकता है। HDF5 के विपरीत, Zarr समवर्ती लेखन का समर्थन करता है, जिससे यह वितरित डेटा संग्रह पाइपलाइनों के लिए उपयुक्त है। Zarr v3 ने प्रारूप को मानकीकृत किया और शार्डिंग के लिए समर्थन जोड़ा (कई छोटे खंडों को कम बड़ी फाइलों में संयोजित करना), जो क्लाउड भंडारण दक्षता में सुधार करता है। LeRobot और कई स्वायत्त वाहन डेटासेट जैसी परियोजनाओं ने बड़े पैमाने पर डेटासेट होस्टिंग के लिए Zarr को अपनाया है। इसे व्यवहार में देखें: हमारी डेटा संग्रह सेवा →