மெக்கின்சி கெட்ரோவை அறிமுகப்படுத்துகிறார், அதன் முதல் திறந்த மூல கருவி

கெட்ரோ என்பது ஆலோசனை நிறுவனமான மெக்கின்சியின் ஒரு பிரிவால் உருவாக்கப்பட்ட முதல் திறந்த மூல கருவியாகும். இது தரவு விஞ்ஞானிகள் மற்றும் பொறியியலாளர்களால் பயன்படுத்தப்பட்டது. ஒரு தரவு மற்றும் குழாய்களை உருவாக்க பயன்படுத்தக்கூடிய குறியீடு நூலகம், இயந்திர கற்றல் திட்டத்தின் கட்டுமான தொகுதிகள்.

மெக்கின்ஸி & கம்பெனி ஒரு அமெரிக்க உலகளாவிய மேலாண்மை ஆலோசனை நிறுவனம். பொது மற்றும் தனியார் துறைகளில் மேலாண்மை முடிவுகளை மதிப்பீடு செய்ய தரமான மற்றும் அளவு பகுப்பாய்வுகளை செய்கிறது. அவரது வாடிக்கையாளர்களில் உலகின் மிகப்பெரிய நிறுவனங்களில் 80% அடங்கும்.

முதல் திறந்த மூல கருவி

ஒரு திறந்த மூல உரிமத்தின் கீழ் உள்நாட்டில் உருவாக்கப்பட்ட கருவிகளில் ஒன்றை நிறுவனம் இதற்கு முன்பு வெளியிடவில்லை. உண்மையில், கெட்ரோ தனியுரிம மென்பொருளாகப் பிறந்தார். இருப்பினும், நிறுவனத்துடனான உறவு முடிந்ததும், வாடிக்கையாளர்களுக்கு இந்த திட்டத்தை அணுக முடியவில்லை.

கெட்ரோ என்ற பெயர் உருவானது மையம் அல்லது மையத்திற்கான கிரேக்க சொல். இந்த திறந்த மூல கருவி மேம்பட்ட பகுப்பாய்வு திட்டங்களை உருவாக்குவதற்கான முக்கியமான குறியீட்டை வழங்குகிறது என்பதால் இது தேர்ந்தெடுக்கப்பட்டது.

கெட்ரோவுக்கு இரண்டு முக்கிய நன்மைகள் உள்ளன:

• பகுப்பாய்வுக் குறியீட்டை ஒரே மாதிரியான முறையில் கட்டமைப்பதன் மூலம் அணிகள் மிகவும் எளிதாக ஒத்துழைக்க இது உதவுகிறது.
• இது ஒரு திட்டத்தின் அனைத்து நிலைகளிலும் அனைத்து கூறுகளையும் தடையின்றி பாய அனுமதிக்கிறது.

இதில் அடங்கும்

• தரவு மூலங்களின் ஒருங்கிணைப்பு,
• தரவு சுத்திகரிப்பு
• அம்ச உருவாக்கம்
• விளக்கமளிக்கும் அல்லது முன்கணிப்பு பகுப்பாய்விற்கு இயந்திர கற்றல் மாதிரிகளில் தரவை ஊட்டவும்.

கெட்ரோவும் பயன்படுத்த தயாராக குறியீட்டை வழங்க உதவுகிறது. மென்பொருள் உருவாக்கத்தில் பொதுவாக நிபுணர்களாக இல்லாத தரவு விஞ்ஞானிகளுக்கு இது மிகவும் பயனுள்ளதாக இருக்கும்.

கெட்ரோ ஏன் பயனுள்ளது?

கெட்ரோ போன்ற திறந்த மூல கருவிகள் அனுமதிக்கின்றன ஒரு முன்மாதிரியை உற்பத்தி குறியீடாக வாரங்களுக்கு மாற்றுவதற்கான நேரத்தை குறைக்கவும். ஆய்வாளர்கள் தங்கள் வாடிக்கையாளர்களுக்கு குறைவான நேரத்தை குறியீட்டு மற்றும் அதிக நேரம் செலவழிக்க முடியும்.

கெட்ரோ அணிகளுக்கு மட்டு தரவு சேனல்களை உருவாக்க உதவுகிறது, சோதனை செய்யப்பட்டு, எந்த சூழலிலும் மீண்டும் உருவாக்கக்கூடியது மற்றும் பதிப்பு செய்யப்பட்டு, முந்தைய தரவு நிலைகளை பயனர்களை அணுக அனுமதிக்கிறது. அதே குறியீடு ஒற்றை டெவலப்பரின் மடிக்கணினியிலிருந்து கிளவுட் கம்ப்யூட்டிங்கைப் பயன்படுத்தி ஒரு நிறுவன தர திட்டத்திற்கு செல்லலாம். இது அனைத்து தொழில்கள், மாதிரிகள் மற்றும் தரவு மூலங்களுடனும் பயன்படுத்தப்படலாம்.

மெக்கின்சி ஏற்கனவே 50 க்கும் மேற்பட்ட திட்டங்களில் கெட்ரோவைப் பயன்படுத்தியுள்ளார். ஒரு நிர்வாகியின் கூற்றுப்படி, வாடிக்கையாளர்கள் குறிப்பாக குழாய்களின் காட்சிப்படுத்தலை விரும்புகிறார்கள். உருமாற்றத்தின் வெவ்வேறு நிலைகள், சம்பந்தப்பட்ட மாதிரிகள் வகைகளை அவை உடனடியாகக் காண்கின்றன, மேலும் முடிவுகளை மூல தரவு மூலத்திற்குக் காணலாம்.

மெக்கென்சி தொழில்நுட்பத்துடன் நேரடியாக தொடர்புடைய முதல் நிறுவனம் அல்ல இது திறந்த மூல கருவிகளை வெளியிடுகிறது. உபெர் மற்றும் ஏர்பின்ப் ஏற்கனவே செய்திருந்தன.

கேண்ட்ரோ அம்சங்கள் மற்றும் நிறுவல்

கெட்ரோ ஒரு பணிப்பாய்வு மேம்பாட்டு கருவியாகும் வலுவான, அளவிடக்கூடிய, வரிசைப்படுத்தக்கூடிய, மறுஉருவாக்கக்கூடிய மற்றும் பதிப்பு செய்யப்பட்ட தரவு சேனல்களை உருவாக்குதல்.

கெட்ரோவின் முக்கிய பண்புகள் யாவை?

1. திட்ட வார்ப்புரு மற்றும் குறியீட்டு தரநிலைகள்

• பயன்படுத்த எளிதான, நிலையான திட்ட வார்ப்புரு
• நற்சான்றிதழ்கள், பதிவு, தரவு பதிவேற்றம் மற்றும் ஜூபிட்டர் குறிப்பேடுகள் / ஆய்வகத்திற்கான அமைப்புகள்.
• பைட்டெஸ்டைப் பயன்படுத்தி சோதனை மூலம் இயக்கப்படும் வளர்ச்சி
• நன்கு ஆவணப்படுத்தப்பட்ட குறியீட்டை உருவாக்க ஸ்பிங்க்ஸ் ஒருங்கிணைப்பு

2. தரவு பிரித்தெடுத்தல் மற்றும் பதிப்பு

• தரவு மேலாண்மை அடுக்கிலிருந்து கணினி அடுக்கைப் பிரித்தல், வெவ்வேறு தரவு வடிவங்கள் மற்றும் சேமிப்பக விருப்பங்களுக்கான ஆதரவு உட்பட.
• உங்கள் தரவு தொகுப்புகள் மற்றும் இயந்திர கற்றல் மாதிரிகளுக்கான பதிப்புகள்

3. குழாய்களின் மாடுலரிட்டி மற்றும் சுருக்கம்

• குறியீட்டின் பெரிய பகுதிகளை சிறிய சுயாதீன பிரிவுகளாக பிரிக்க தூய பைதான் செயல்பாடுகள், முனைகளுக்கான ஆதரவு.
• முனைகளுக்கு இடையிலான சார்புகளின் தானியங்கி தீர்மானம்

4. அம்சங்களின் விரிவாக்கம்

• கெட்ரோவின் கட்டளை வரி இடைமுகத்தில் (சி.எல்.ஐ) கட்டளைகளை செலுத்தும் ஒரு சொருகி அமைப்பு: கெட்ரோ-ஏர்ஃப்ளோ, இது உங்கள் தரவுக் குழாயை கெட்ரோவில் முன்மாதிரி செய்வதை எளிதாக்குகிறது. கெட்ரோ-டோக்கர், கெட்ரோ திட்டங்களை கொள்கலன்களில் பொதி செய்து அனுப்பும் கருவி
• கெட்ரோவை உள்நாட்டிலும், வளாகத்திலும், மேகத்திலும் (AWS, Azure, மற்றும் GCP) அல்லது கொத்தாக (EMR, Azure HDinsight, GCP, மற்றும் Databricks) பயன்படுத்தலாம்.

செய்வதன் மூலம் எங்கள் முன் குறிப்பிடப்பட்ட லினக்ஸ் விநியோகத்தில் கெட்ரோவை நிறுவலாம்:

sudo apt install python3-pip
pip install kedro

உண்மைப்படுத்த:
pip3 install kedro -U

இதனுடன் ஆவணங்களை நாம் காணலாம்:
kedro docs
மேலும் தகவல்களை இங்கே காணலாம் திட்ட பக்கம்