Clyso பொறியாளர்கள் Ceph உடன் ஒரு கிளஸ்டரில் Tbit/s செயல்திறனை அடைந்ததாக பெருமை கொள்கிறார்கள்

கிளிசோவின் படம்

கிளிசோவின் படம்

சமீபத்தில் தி கிளைசோ பொறியாளர்கள் செய்தி வெளியிட்டுள்ளனர் முன்னோடியில்லாதது, அவர்கள் அதைக் குறிப்பிடுவதால் வினாடிக்கு டெராபைட்களை விட அதிகமான செயல்திறனைப் பெற முடிந்தது ஒரு சேமிப்பகக் கிளஸ்டரில், பிழை-சகிப்புத்தன்மை கொண்ட விநியோகிக்கப்பட்ட Ceph அமைப்பின் அடிப்படையில்.

சந்தேகத்திற்கு இடமின்றி, Ceph-அடிப்படையிலான ஒரு கிளஸ்டர், கிளஸ்டரில் இத்தகைய செயல்திறனை அடைவதற்கு தொடர்ச்சியான சவால்களை கடந்து, அத்தகைய குறிகாட்டியை அடைந்தது முதல் முறையாக இது ஒரு சாதனையாகும்.

இந்த செயல்திறன் அடையப்பட்டது என்ற உண்மையின் காரணமாக இருந்தது கிளைசோ பொறியாளர்கள் ஒரு கிளஸ்டரை செயல்படுத்துவதற்கான கோரிக்கையைப் பெற்றனர் மற்றும் உங்கள் வாடிக்கையாளரின் தேவைகள் மற்றும் உங்கள் பணியின் அடிப்படையில் கோரிய தேவைகளை ஒதுக்கிவிடாமல் சிறந்த செயல்திறனைப் பெறுங்கள்.

வாடிக்கையாளர் முதலில் கிளைசோவை அணுகிய பொறியாளர்கள், 34 ரேக்குகளில் விநியோகிக்கப்பட்ட 2 17U இரட்டை-சாக்கெட் முனைகளைப் பயன்படுத்திய ஒரு கட்டமைப்பை முன்மொழிந்ததாகக் குறிப்பிடப்பட்டுள்ளது.

இறுதியில், கிளைசோவால் வடிவமைக்கப்பட்ட டெல் கட்டிடக்கலையுடன் செல்ல வாடிக்கையாளர் முடிவு செய்தார், இது பல முக்கிய நன்மைகள் இருந்தபோதிலும் அசல் கட்டமைப்பை விட தோராயமாக 13% மலிவானது. புதிய உள்ளமைவு ஒரு OSDக்கு குறைவான நினைவகத்தைக் கொண்டுள்ளது (இன்னும் வசதியாக ஒவ்வொன்றும் 12 GiB), ஆனால் வேகமான நினைவக செயல்திறன்.

இது மேலும் ஒருங்கிணைக்கப்பட்ட CPU ஆதாரங்கள், கணிசமாக அதிக ஒருங்கிணைந்த நெட்வொர்க் செயல்திறன், எளிமையான ஒற்றை-சாக்கெட் கட்டமைப்பு மற்றும் சமீபத்திய தலைமுறை AMD செயலிகள் மற்றும் DDR5 ரேம் ஆகியவற்றைப் பயன்படுத்துகிறது. சிறிய முனைகளைப் பயன்படுத்துவதன் மூலம், கிளஸ்டர் மீட்டெடுப்பில் முனை தோல்வியின் தாக்கத்தை பாதியாகக் குறைக்கிறோம்.

வாடிக்கையாளர் ஒரு ரேக்கிற்கான கூடுதல் மின் நுகர்வு சுமார் 1000-1500 வாட் வரை குறைக்க விரும்புவதாக குறிப்பிட்டார். 

10-20% செயல்திறனை மேம்படுத்த, அதிகபட்ச செயல்திறன் பயன்முறையில் சேவையகங்களை இயக்குவதை அவர்கள் கண்டுபிடித்தனர் மற்றும் பயாஸ் ஆற்றல் சேமிப்பு அமைப்புகளில் c-நிலையை முடக்கவும் அது பயனுள்ளதாக இருந்தது.

அதுவும் மாறியது NVMe இயக்கிகளைப் பயன்படுத்தும் போது, ​​லினக்ஸ் கர்னல் கணிசமான நேரத்தைச் செலவிடுகிறது IOMMU மேப்பிங் புதுப்பிப்பு செயல்பாட்டின் போது ஸ்பின் பூட்டுகளை செயலாக்க. கர்னலில் IOMMU ஐ முடக்குவது குறிப்பிடத்தக்க செயல்திறன் அதிகரிப்பை ஏற்படுத்தியது 4 MB தொகுதியில் 4 KB தொகுதிகளை எழுதும் போது செயல்திறன் சிக்கல்களை முழுமையாக தீர்க்கவில்லை என்றாலும், சோதனைகளை படிக்கவும் எழுதவும்.

என்ன நடக்கிறது என்பதைக் கண்டுபிடித்துக்கொண்டிருக்கும்போது, ​​பொறியாளர்கள் ஜென்டூ மற்றும் உபுண்டு திட்டங்களுக்குச் சொந்தமான Ceph பில்ட் ஸ்கிரிப்ட்களில் திருத்தங்களைக் கண்டறிந்தனர், இதில் RelWithDebInfo விருப்பத்துடன் தொகுத்தல் அடங்கும், ஏனெனில் தேர்வுமுறை பயன்முறை அதனுடன் பயன்படுத்தப்பட்டது. -O2” GCC இல், இது Ceph செயல்திறனை கணிசமாக அதிகரிக்கிறது.

TCMalloc நூலகத்துடன் தொகுத்தலும் செயல்திறன் வீழ்ச்சியை ஏற்படுத்தியது. தொகுத்தல் கொடிகளை மாற்றுதல் மற்றும் TCMalloc இன் பயன்பாட்டை நீக்குதல் ஆகியவை சுருக்க நேரத்தில் மூன்று மடங்கு குறைப்பு மற்றும் சீரற்ற 4K பிளாக் ரைட்களுக்கான செயல்திறனில் இருமடங்கு அதிகரித்தது.

கூடுதலாக, ரீஃப் ராக்ஸ்டிபி உள்ளமைவு மற்றும் வேலை வாய்ப்புக் குழுக்களுக்கான சரிசெய்தல் ஒட்டுமொத்த கணினி மேம்படுத்தலுக்கு பங்களித்தது.

தி கணினி விவரக்குறிப்புகள் கீழே காட்டப்பட்டுள்ளன:

முனைகள் 68 x டெல் பவர்எட்ஜ் R6615
யூ.பி.சி 1 x AMD EPYC 9454P 48C/96T செயலி.
நினைவக DDR5 192 ஜிபி
ரெட் 2 x 100GbE Mellanox ConnectX-6
NVMe 10 x டெல் 15,36TB Enterprise NVMe Read Intensive AG
OS பதிப்பு உபுண்டு 20.04.6 (ஃபோகல்)
செஃப் பதிப்பு Quincy v17.2.7 (அப்ஸ்ட்ரீம் டெப் தொகுப்புகள்)

முடிவுகள் சுவாரஸ்யமாக உள்ளன: 4 மில்லியன் தொகுதிகளின் தொடர்ச்சியான வாசிப்பு செயல்பாடுகளின் செயல்திறன் 1025 GiB/s ஐ எட்டியது, அதே சமயம் எழுதுவதற்கு இது 270 GiB/s ஆகும்.

4 KB தொகுதிகளின் சீரற்ற வாசிப்பு செயல்பாடுகளில், செயல்திறன் வினாடிக்கு 25.5 மில்லியன் வாசிப்பு செயல்பாடுகளையும் 4.9 மில்லியன் எழுதும் செயல்பாடுகளையும் எட்டியது. குறியாக்கத்தை இயக்குவது வாசிப்பு செயல்திறனை தோராயமாக 750 GiB/s ஆகக் குறைத்தது.

இந்தச் சாதனை கிளைசோவுக்கான தொழில்நுட்ப மைல்கல்லைப் பிரதிநிதித்துவப்படுத்துவது மட்டுமல்லாமல், பகிர்ந்தளிக்கப்பட்ட சேமிப்பக திறன்களின் தொடர்ச்சியான பரிணாமம் மற்றும் முன்னேற்றத்தையும் எடுத்துக்காட்டுகிறது.

செப்டம்பரில், CERN ஆனது EOS விநியோகிக்கப்பட்ட சேமிப்பு மற்றும் XRootD நெறிமுறையின் அடிப்படையில் அதன் எக்ஸாபைட் சேமிப்பக கிளஸ்டரில் இதேபோன்ற மைல்கல்லை எட்டியது என்பது குறிப்பிடத்தக்கது.

இறுதியாக நீங்கள் இருந்தால் அதைப் பற்றி மேலும் அறிய ஆர்வமாக, நீங்கள் விவரங்களை சரிபார்க்கலாம் பின்வரும் இணைப்பு.


உங்கள் கருத்தை தெரிவிக்கவும்

உங்கள் மின்னஞ்சல் முகவரி வெளியிடப்பட்ட முடியாது. தேவையான புலங்கள் குறிக்கப்பட்டிருக்கும் *

*

*

  1. தரவுக்கு பொறுப்பு: மிகுவல் ஏஞ்சல் கேடன்
  2. தரவின் நோக்கம்: கட்டுப்பாட்டு ஸ்பேம், கருத்து மேலாண்மை.
  3. சட்டபூர்வமாக்கல்: உங்கள் ஒப்புதல்
  4. தரவின் தொடர்பு: சட்டபூர்வமான கடமையால் தவிர மூன்றாம் தரப்பினருக்கு தரவு தெரிவிக்கப்படாது.
  5. தரவு சேமிப்பு: ஆக்சென்டஸ் நெட்வொர்க்குகள் (EU) வழங்கிய தரவுத்தளம்
  6. உரிமைகள்: எந்த நேரத்திலும் உங்கள் தகவல்களை நீங்கள் கட்டுப்படுத்தலாம், மீட்டெடுக்கலாம் மற்றும் நீக்கலாம்.