प्रौद्योगिकी साझेदारी

Shengsi Large Model - MindFormers इत्यस्य उपयोगः - वातावरणं शुद्धतः संस्थाप्य विन्यस्तुं च

2024-07-12

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

         

MindSpore Transformers सूटस्य लक्ष्यं बृहत् मॉडलप्रशिक्षणस्य, सूक्ष्म-समायोजनस्य, मूल्याङ्कनस्य, अनुमानस्य, परिनियोजनस्य च कृते पूर्ण-प्रक्रिया-विकास-समूहस्य निर्माणं भवति, एतत् उद्योगस्य मुख्यधारायां Transformer-प्रकारस्य पूर्व-प्रशिक्षण-माडलं तथा SOTA डाउनस्ट्रीम-कार्य-अनुप्रयोगं प्रदाति समृद्धं समानान्तरविशेषतां आच्छादयन्। वयं आशास्महे यत् उपयोक्तृभ्यः बृहत् आदर्शप्रशिक्षणं अभिनवसंशोधनविकासं च सुलभतया प्राप्तुं साहाय्यं करिष्यामः।

MindSpore Transformers सूट् MindSpore इत्यस्य अन्तः निर्मितस्य समानान्तरप्रौद्योगिक्याः घटकस्य च डिजाइनस्य आधारेण अस्ति, तथा च निम्नलिखितविशेषताः सन्ति ।

  • कोडस्य एकः पङ्क्तिः एककार्डात् बृहत्-परिमाणेन क्लस्टर-प्रशिक्षणं प्रति निर्विघ्न-स्विचिंग् सक्षमं करोति;
  • लचीलं सुलभं च व्यक्तिगतं समानान्तरविन्यासं प्रदातुम्;
  • स्वयमेव टोपोलॉजी जागरूकतां कर्तुं समर्थः तथा च आँकडा समानान्तरता तथा मॉडल समानान्तरता रणनीतयः कुशलतया एकीकृत्य;
  • एकेन क्लिकेण कस्यापि कार्यस्य कृते एक-कार्ड/बहु-कार्ड-प्रशिक्षणं, सूक्ष्म-समायोजनं, मूल्याङ्कनं, अनुमान-प्रक्रियाः च आरभत;
  • घटकरूपेण कस्यापि मॉड्यूलस्य विन्यासार्थं उपयोक्तृभ्यः समर्थनं करोति, यथा अनुकूलकः, शिक्षणरणनीतिः, संजालसङ्घटनम् इत्यादयः;
  • उच्चस्तरीयसुलभ-उपयोग-अन्तरफलकानि यथा Trainer, pipeline, AutoClass च प्रदाति;
  • पूर्वनिर्धारित SOTA भारस्य स्वचालितं डाउनलोड् लोडिंग् च कार्याणि प्रदाति;
  • कृत्रिमबुद्धिगणनाकेन्द्राणां निर्बाधप्रवासस्य परिनियोजनस्य च समर्थनं कुर्वन्ति;

Mindspore बृहत् मॉडल मंच (mindspore.cn) .

mindformers: MindSpore Transformers सूटस्य लक्ष्यं बृहत् मॉडलप्रशिक्षणस्य, अनुमानस्य, परिनियोजनस्य च कृते पूर्ण-प्रक्रिया-समूहस्य निर्माणम् अस्ति: उद्योगस्य मुख्यधारायां Transformer-प्रकारस्य पूर्व-प्रशिक्षण-माडलं प्रदातुं, समृद्ध-समानान्तर-विशेषताः कवरं कृत्वा। वयं आशास्महे यत् उपयोक्तृभ्यः बृहत् आदर्शप्रशिक्षणं सुलभतया कार्यान्वितुं साहाय्यं करिष्यामः। प्रलेखनम् : https://mindformers.readthedocs.io/zh-cn/latest/ (gitee.com)

1. स्थापना

Linux Ubuntu वातावरणे प्रथमं git संस्थापयन्तु

sudo apt install git

मनःनिर्मातारः प्राप्नुवन्तु

git clone -b r1.1.0 https://gitee.com/mindspore/mindformers.git

स्क्रिप्ट् निष्पादयितुं निर्देशिकां प्रविशन्तु

cd mindformers
bash build.sh

अस्याः स्क्रिप्ट् मध्ये python setuptools पुस्तकालयं संस्थाप्य लिङ्क् मध्ये आदेशं चालयितुं आवश्यकम् अस्ति

'distutils.cmd_नामकं कोऽपि मॉड्यूलः 'distutils.cmd-CSDN博客' इति नाम्ना कोऽपि मॉड्यूलः नास्ति

sudo apt-get install python3.7-distutils   3.7

पायथन् संस्करणं न्यूनातिन्यूनं ३.७ भवितुमर्हति, अहं ३.९ संस्थापनं अनुशंसयामि

उबण्टु पायथन् इत्यस्य उन्नयनं 3.7_apt-get updates python3.7-CSDN blog इत्यत्र करोति

python3

सामान्य आदेशपङ्क्तिविधानं प्रति प्रत्यागन्तुं "exit()" इति टङ्कयन्तु

build.h त्रुटिं प्रतिवेदयितुं शक्नोति त्रुटिः: अमान्यः आवश्यकता: 'mindformers*whl'.

स्क्रिप्ट् मध्ये python इत्येतत् python3 इति परिवर्तयन्तु

Esc नुदन्तु ":wq!"

पुनः धावतु

bash build.sh

सफलतया चालयन्तु संस्थापनं च सम्पन्नम्।

कदाचित् Python इत्यस्य भिन्नाः संस्करणाः आवश्यकाः भवन्ति यत् python3 इत्येतत् python इत्यस्मात् भिन्नम् अस्ति । अहं स्मरामि यत् इदमपि विन्यासयोग्यम् अस्ति।

  1. whereis python3
  2. rm /usr/bin/python3
  3. ln -s /usr/bin/python3.9 /usr/bin/python3

यदि ३.९ इति

sudo apt-get install python3.9-distutils   3.9