HPC

[pez]

.
Η εν των ων ουκ άνευ αναδρομική αναζήτηση δίνει - μέχρι στιγμής:

PelicanHPC 5.1_arg
Debian 12.9 + PelicanHPC 5.1
PelicanHPC 4.1-3.0
PelicanHPC 2.9-2.4
ParallelKnoppix
Knoppix
Debian + openMosix

όπου ο πυρήνας -θα λέγαμε- είναι το openMosix, που περιγράφεται ως ένα "Tool", μια extension του Linux Kernel, για Linux Cluster.

Η αναζήτηση συνεχίζεται.
.

[pez]

.

(15) PelicanHPC-ή-CUDA ; - Post 09 Feb 2025, 18:34

Ας ξεκινήσουμε να παρουσιάζουμε "τα δικά μας επιτεύγματα" : ) στο δικό μας project PelicanHPC_arg ρίχνοντας μια ματιά στο πόσο κάνει σήμερα (2025), δεύτερο χέρι στο ebay, η ιστορική (2017) "The First Tensor Core GPU" [1] CUDA [2], ως SXM2 -wikipedia : SXM- γυμνή ή ως PCI-E καλυμμένη - με ψύκτρα;
:

.
Καίγεται και κλαις - εμείς οπωσδήποτε.
.
[1] https://www.nvidia.com/en-gb/data-center/tesla-v100/
[2] https://en.wikipedia.org/wiki/CUDA
.

[pez]

...μόλις προ ολίγου:
.

.
https://www.op4.eu/fora/hlektronika.com/20250401/44a-16.jpg
.

[pez]

.
Με βάση τα προηγούμενα πειραματικά πρακτικά αποτελέσματα:



https://www.op4.eu/fora/hlektronika.com/20250402/uuSuper-44-First.png
.

Με θεωρητική Παραβολή Τελείων "Ελαχίστων Τετραγώνων": 
 
y = a * x^2 + b * x + c

και με Mathematica 7, αντί Maxima 47, "διότι βιαζόμαστε", έχουμε:

-17.9533 * x^2 + 1,873.16 * x + 2,372.75

Στο Σχήμα : Η Κόκκινη Γραμμή. 

Προσεγγιστικά:

a ~=   -18 
b ~= 1,873
c ~= 2,373

y ~= -18*x^2 + 1873*x + 2373

a < 0 => Μέγιστο ymax στην θέση xmax = - b / (2*a) ~= 52 => ymax ~= 51,100, πες ymax ~= 51,000

.
Και ζωγραφιστά:



https://www.op4.eu/fora/hlektronika.com/20250402/uuSuper-theoritika-a.png
.
= Άρα;

- Άρα "χρειαζόμαστε" ακόμα 8, πες 12, cores για να ελέγξουμε πρακτικά την θεωρητική "πρόβλεψη" του θεωρητικού Μεγίστου της Απόδοσης των 51 GFlops από το θεωρητικά Ωφέλιμο Μέγιστο Πλήθος των 52 cores:



https://www.op4.eu/fora/hlektronika.com/20250402/both.png

= Και μετά;

- Μετά Τέρμα - θεωρητικά μιλώντας βεβαίως.

= Μα "αξίζει" τον κόπο;

- Με τα δεδομένα της στιγμής αυτής; Όχι - πρακτικά μιλώντας βεβαίως.

: )
.

[pez]

σημείωση : εργαστήριο ανεξάρτητο ιδρύουν μόνον εκείνοι που το παίρνουν απόφαση πως για να το συντηρούν πάντοτε θα πληρώνουν αποκλειστικώς και μόνον από το υστέρημά τους - ό,τι μπορούν
-
14, 9, 8, 6, 5 Απριλίου 2025 : Αναδιατυπώσεις-Προσθήκες-Διορθώσεις - Για την Πληρέστερη Απόδοση της Πραγματικότητας
.
Αν και τα σχετικά, με τα αμέσως παρακάτω αναφερόμενα, θέματα τα έχουμε προ πολλού εξαντλήσει εδώ, ας πούμε εν συντομία ότι : "Εκείνοι" έπιασαν να "τελειώσουν" -μέχρι τις 14 Οκτωβρίου 2025- ΚΑΙ τα Windows 10, κι "όλοι" οι Φουκαράδες -εκτός από εμάς- έπιασαν να ξεπουλάνε τα "τελειωμένα", όπως "Εκείνοι" τα θέλουν, μηχανήματά τους, μεταξύ των οποίων και το Dell OptiPlex 7010 Server, το οποίο, το είχαν 'Εκείνο" ήδη "τελειώσει" "(End of Life)" από τις 26 Οκτωβρίου 2016, όπως φαίνεται από την επίσημη καταγραφή και επίσημη κατοχύρωσή που κάναμε στην Dell για κάθε έναν από αυτούς που τελικά τα καταφέραμε και τους μαζέψαμε:


https://www.op4.eu/fora/hlektronika.com/20250403/EndOfLife.png
-
με ξελιγωμένη μπαταρία 2032, χωρίς σκληρό δίσκο ή SSD, αλλά με x86_64 cpu i7-3770 στα 3.4 Ghz μαζί με την ψύκτρα και τον ανεμιστήρα της, motherboard με PCI, PCI-Ex1, PCI-Ex16, PCI-Ex16/4, 4 Χ υποδοχές DDR3 RAM των 8 GB εκάστη, με συνολικά 16 GB RAM επάνω τους σε συνδυασμούς 2Χ8GΒ ή 4Χ4GB τσιπάκια (ενώ παρά τα θρυλούμενα περί δήθεν ορίου μεγίστης συνολικής μνήμης 16 GB RAM, δοκιμάστηκαν επιτυχώς εκεί 4χ8 = 32 GB RAM), ενσωματωμένη VGA, ενσωματωμένη NIC 1 Gigabit, 4b+2f = 6 x USB3.0, ένα άχρηστο πια για το PelicanHPC 5.1 -αφού αυτό παίζει και από pen/stick σε USB 3.0- DVD RW βάρους ~3/4 kg, τροφοδοτικό όχι "ειδικό" αλλά "κλασσικό", άρα εύκολα αντικαταστάσιμο, sound "card" η οποία, αν δεν έχουμε συνδέσει stereo ζεύγος μεγαφώνων, παίζει mono με εσωτερικό μεγαφωνάκι, και Mini Tower ΜΤ κουτί 10 κιλά, κουρσούμι, με 4 οπές για κάρτες full-height, με καπάκι που ανοίγει πανεύκολα σαν ντουλαπάκι, αλλά και με τρία (3), για εμάς δυσάρεστα, μειονεκτήματα, αν και όταν το cluster "θα" δουλεύει παρατεταμένα "σε full load" : - (α) - από την άποψη της συγκρότησης "ευκολο-αεριζόμενου" cluster - (α1) - το ότι το "κατά τα λοιπά" "γεροδεμένο" κουτί είναι περτσινωμένο (μετρήσαμε 21 εξωτερικά περτσίνια αλουμινίου), κι έτσι θα πρέπει να καταβάλουμε μεγάλη προσπάθεια για να το διαλύσουμε, αφήνοντας μόνον τον σκελετό του, "για να αερίζεται", κι αν παρουσιαστεί πρόβλημα ηλεκτρομαγνητικής θωράκισης, τοτε να το επανασυναρμολογήσουμε με ελαφρύτερα υλικά, π.χ. με αλουμινόχαρτο - (α2) - το ότι υπάρχει μια μάλλον μικρή σχάρα εξαερισμού πάνω στο καπάκι, που φρακάρει βέβαια όταν πας και -πλην του ακριανού- παρατάξεις τα μηχανήματα κολλητά, το ένα με το άλλο, και - (β) - από την άποψη της "ευκολο-δυνατότητας" αλλαγής της i7-3770 cpu, αν και όταν αυτή καεί, το ότι επειδή έχει και αυτή το κουσούρι, που έχουμε αναφέρει αλλού εδώ:

19 - Η Άνευ Προηγουμένου Διαδικασία Αναβάθμισης του BIOS - Post 12 Oct 2024, 23:08 :
"αντί να έχει ποδαράκια, έχει πατούσες, που πατάνε επάνω σε "ευέλικτα" ποδαράκια τα οποία προεξέχουν προς τα επάνω, από την στερεωμένη στο motherboard βάση της, πηγαίνοντας "κι-από-δω-κι-από-κει", κι έτσι και πας να την βγάλεις και να την ξαναβάλεις την cpu, έχεις σχεδόν σίγουρο το βραχυκύκλωμα ή το ανοικτοκύκλωμα, δηλαδή "πάει και τελείωσε" η cpu σου!"

, ένα μηχάνημα που από windows, για όποιον ενδιαφέρεται φυσικά αλλά όχι πια κι εμείς, υποστηρίζει από τα κλασσικά XP (ίσως και τα 2000, αφού υπάρχει μία σχετική νύξη στο dell.com) μέχρι και τα "ανεπίσημα" Windows 11, όπως και "επισήμως" το Ubuntu Linux 16.04, με BIOS upgradable στο τελευταίο Α29/2018.07.18 με GPT και MBR Legacy Mode, κλπ-κλπ-κλπ, μηχάνημα το οποίο, τέλος πάντων, έχει όλα όσα αναφέρονται εδώ:

http://downloads.dell.com/Manuals/all-products/esuprt_desktop/esuprt_optiplex_desktop/optiplex-7010_Owner%27s%20Manual4_en-us.pdf
-
τα οποία μηχανήματα πιάσαμε να τα αγοράζουμε εμείς ένα-ένα "χτυπώντας" δημοπρασίες ή προσφέροντας ("ζητούσαν-δεν-ζητούσαν-όσα-κι-αν-ζητούσαν", στους πωλητές τους με Μ ό ν ο ν Δωρεάν Μεταφορικά Εντός της Ευρωπαϊκής Ένωσης) συστηματικά κάτω από (κι εδώ ήταν που βγάλαμε τεφτέρι : για δεύτερο χέρι όλα = cpu (από ali-express με δωρεάν τα μεταφορικά της, παρά από τα απίστευτα του ebay) πες 30, συν ψύκτρα με ανεμιστήρα πες 5, συν κουτί πες 15, συν motherboard πες 15, συν τροφοδοτικό πες 15, συν dvd rw πες 5, συν RAM 16 GB DDR3 πες 15, συν καλώδια τροφοδοσίας και οθόνης πες 5, συν ετικέτα windows πες 5, χωρίς δίσκο αλλά με δύο ποιοτικά καλώδια sata2 και sata3 πες 5, συν μεταφορικά δέκα κιλών πες 15, το όλον 130 ευρώ, κι άρα, για να συμφέρει : τα μισά, το πολύ) 65 ευρώ το ένα, μέχρι να τα κάνουμε οκτώ 8, για να καταφέρουμε να τα συγκεντρώσουμε ύστερα από δεκαπέντε 15 μέρες, και με απώλεια μόνον ένα καμένο τσιπάκι 8GB RAM, να στήσουμε και πάλι (μετά το προ δεκαπενταετίας (15-ετίας) "ξεπερασμένο" αλλά και εν πολλοίς αποσυναρμολογημένο εν τω μεταξύ, και ουσιαστικά ουδέποτε χρησιμοποιηθέν "mini-Super Computer" μας του 2009 με τα 6 GFlops), ένα υπερεπαρκέστατο για τους δικούς μας τους σκοπούς σήμερα "κλαστεράκι":


https://www.op4.eu/fora/hlektronika.com/20250403/final-256-50-8X.png

το οποίο και βαφτίσαμε -για λόγους που τους εντοπίσαμε στην Διεθνή Εθελοντική Λίστα Συμμετοχής Δημοσίως Γνωστών Υπέρ-Υπολογιστών "Top 500":

"πίκο", πες "μίκρο-μίκρο", "Super Computer" ή συντομογραφικά-συμβολικά με τους "πλησιέστερους" ASCII χαρακτήρες:

uuSuperComp

του οποίου την συμπεριφορά είδαμε για πρώτη φορά και αμέσως μετά την παρουσιάσαμε στα μόλις προηγούμενα δύο 2 μηνύματα.
.
6 Απριλίου 2025 - Kαι ολοκληρώνουμε το θέμα με μια κατά το παρελθόν πορεία της τιμής πώλησης καινούριων τέτοιων τότε servers - με 1 TB HDD αλλά μόνον 8 GB RAM, και που από το 2015 δεν πωλούνται άλλα πια με αυτήν την i7-3770 cpu
:

https://www.op4.eu/fora/hlektronika.com/20250406/7010-poreia-timhs.jpg

https://geizhals.at/dell-optiplex-7010-mt-7010-4339-a803467.html
.
Σημείωση : Δεν συνυπολογίζουμε το κόστος απόκτησης των απαραίτητων παρελκομένων : unmanaged switch 1Gigabit+ με τουλάχιστον 8xPorts, αντιστοίχως 8+ καλώδια NIC RJ45 CAT6+, τουλάχιστον 1χVGA/m-VGA/m Cable, τουλάχιστον 1χVGA monitor, τουλάχιστον 1 πολύπριζο με τουλάχιστον 9+ σούκο πρίζες.
.
ενώ για να αρχίσουμε σιγά-σιγά να προετοιμαζόμαστε κι εμείς "για όλα" από το Φο-ΜΠιζού : ) πήγαμε και γραφτήκαμε στο -κάπως buggy ακόμα, αλλά αυτό διόλου δεν μας πειράζει μιας και το παλαιό-αλλά-όχι-καλό Φο-Μπιζού εξακολουθεί να είναι super buggy- bsky και τα links αυτών που γράφουμε εδώ τα αναδημοσιεύουμε κι εκεί:

https://bsky.app/profile/petros-ez.bsky.social/post/3lm5nuzj3vc2u
.
8 Απριλίου 2025 : Δεν λέω να το βγάλω από το μυαλό μου... Αφενός, έχουμε "από παλαιά" πάρει και τις κατάλληλες λεπτές ντίζες, να τις περάσουμε μέσα από τις αντίστοιχες τρύπες των motherboards, να τα παρατάξουμε "στον καθαρό αέρα" : ) , κι αφετέρου:

https://www.thelab.gr/forums/topic/40298-πως-βγαινουν-τα-πριτσινια/ ;

όπου, χε! χε! τα διάβασα όλα αυτά και -γελώντας πολύ!- θυμήθηκα πως πριν από πενήντα πέντε χρόνια είχα καθίσει να το σκεφτώ το πράγμα, αφού μετά από πολλές και διάφορες, "δοκιμαστικές" τελικά όλες τους, καταστροφές, όπου ακόμα κι αν ξηλωνόταν το περτσίνι, όλο και κάτι άλλο θα χαλούσε, οπότε έτσι ήταν που συμπέρανα πως ο καλύτερος τρόπος ήταν πράγματι να τα ξηλώσω με ένα μαλακό τρυπανάκι, όταν μπορούσε να τα φτάσει, χωρούσε στην τρύπα, και δεν έσπαζε βέβαια, βαλμένο σε εκείνο "ΤΟ" "μ ο ν α δ ι κ ό τ α τ ο" πρασινομπλέ δράπανό μου -που έφτασε μέχρις εδώ για να καεί -πενήντα ολόκληρα χρόνια μετά- ένα από τα πρώτα-πρώτα, το φθηνότερο, ας πούμε "μικρό", που είχα βρει βέβαια, μπλακ-και-ντέκερ, με σούκο πρίζα -τότε "φορητά με μπαταρίες" δεν υπήρχαν, "για εμάς" τουλάχιστον- κι από τότε μέχρι σήμερα άλλο σαν εκείνο δεν ματαξανασυνάντησα...
.

[pez]

.
ύστερα από μακρά αναζήτηση, μέσα σε έναν κυκεώνα από ετερόκλητα links και περιεχόμενα, τελικά τα καταφέραμε, και ξετρυπώσαμε τα Π Λ Η Ρ Η tutorials σε PDF ή/και σε html[/u][/i][/color], για τα οποία και ανεβάσαμε εδώ:

2008 - PelicanHPC-v1.5.1 - σε pdf μόνον :
https://archive.org/details/PelicanHPC-Tutorial-2008

2011 - PelicanHPC-v1.9 - σε pdf και html :
https://archive.org/details/PelicanHPC-Tutorial-2011

2015 - PelicanHPC-vX.X - σε pdf και html :
https://archive.org/details/PelicanHPC-Tutorial-2015

όπου vX.X ασαφώς, καθότι αν και και περιέχεται στις iso images των v4.1 και v5.1, οπωσδήποτε 'Ο Χ Ι για αυτές, όπως προκύπτει "συμπερασματικά" τόσο από τις ημερομηνίες των versions που υπάρχουν εδώ : https://en.wikipedia.org/wiki/PelicanHPC, όσο και από την δοκιμαστική εφαρμογή τους στην πράξη, άρα για κάποια version οπωσδηποτε μετά την v1.9 και πριν την v4.1.

Συμπέρασμα : Δεν υφίσταται επακριβές tutorial για την τελευταία version PelicanHPC-v5.1, οπότε η χρησιμότητα των ως άνω Tutorials "περιορίζεται" σε χρήσιμες υποδείξεις για τον ανεξαρτήτως εκδόσεως τρόπο χειρισμού του PelicanHPC, παρά για έναν Κατά Γράμμα χειρισμό του τρέχουσας έκδοσης PelicanHPC-v5.1. Δυστυχώς.
.

[pez]

.
Χρόνια Πολλά!

Ας μού επιτραπεί η επομένη -φαινομενικά μόνον, ως καθόλα σχετική προς το θέμα μας : HPC- "παρέκβαση".

Λοιπόν.

Πρώτα-πρώτα να σας πω ότι το Φο-Μπιζού ρομπότ, με πέταξε έξω από την... "κοινότητα" των Φο-Μπιζού διότι, λέει, οι ενέργειές μου εκεί μέσα δεν συμβιβάζονταν με τις... " Α ρ χ έ ς " της "κοινότητας" των Φο-Μπιζού", έτσι λέει, κι εγώ βλέπω είτε τις διατυμπανιζόμενες από αυτό το ίδιο κερδοσκοπικές "αρχές" είτε τις ζηλοφ(θ)ονικές "αρχές", μιας και στην πραγματικότητα είσαι εκεί μέσα εντελώς απροστάτευτος στο έλεος του κάθε ανώνυμου "εύθικτου" απατεώνα ψευταρά... Όμως, μου "επέτρεψε" να ζητήσω τα δεδομένα "μου" -τα δήθεν προσωπικά "μου"- και πράγματι με άφησε και τα κατέβασα - ας είναι πάντα καλά το Φο-Μπιζού, το ρομπότ.

ΩΡΑΙΑ. ΠΙΟ ΤΙΜΗΤΙΚΟ ΔΩΡΟ ΠΑΣΧΑΛΙΑΤΙΚΟ ΔΕΝ ΜΟΥ ΕΧΟΥΝ ΚΑΝΕΙ ΠΟΤΕ.

Κι επειδή πρακτικά αρνήθηκα να υποβάλλω αμέσως ή εν πάση περιπτώσει εντός των επομένων 180... ημερών, λέει,... αίτηση μετανοίας μου ΜΑΖΙ ΜΕ ΜΙΑ ΦΩΤΟΓΡΑΦΙΑ ΜΟΥ -προς το Φο-Μπιζού ρομπότ, παρακαλώ- για την... επανεξέταση της... υπόθεσής μου, αυτό επανήλθε την αμέσως επομένη ημέρα, σήμερα, ανήμερα του Πάσχα 2025, και χωρίς να το ρωτήσω, επέμενε να μου... εξηγήσει... - Ναι. Έτσι. Όπως τα γράφω.

Το λοιπόν, πήγα κι εγώ στο σχετικό email, που "έχω" ακόμη στο τόσο πρόθυμο άλλο ρομπότ, το gmail, χαρακτήρισα εκεί κάθε μήνυμα που έχει αποστολέα το Φο-Μπιζού ρομπότ, ως "spam", με ρώτησε, το πρόθυμο gmail ρομπότ, αν επιθυμεί να με διαγράψει από το Φο-Μπιζού ρομπότ, του είπα "ναι", το έκανε, κι αμέσως μετά με ρώτησε το πρόθυμο gmail ρομπότ αν θέλω και να μπλοκάρει για πάντα το Φο-Μπιζού ρομπότ, οπότε χάρηκα πάρα πολύ και του είπα "ναι" - και το έκανε κι αυτό.

Ναι, έτσι. Φθάσανε τα πράγματα για εμάς τους Ανθρώπους εκεί ακριβώς που "προβλέπαμε" -τα ολοφάνερα, δηλαδή- πως θα πάνε, ενόσω βεβαίως και έπονται οπωσδήποτε τρισχειρότερα από ρομπότ terminators μας. Καθότι, δεν μας χρειάζεται η τεχνητή μας Απονοημοσύνη για να αντιληφθούμε ότι ίσχυε-ισχύει-και-πάντα-θα-ισχύει πως : Όποιος ανακατεύεται με τα πίτουρα, τον τρώνε οι κότες

- Πέρας Πειραματικής Απόρριψης άλλου ενός Θεωρήματος κοινωνικής πειθαρχίας ανθρώπων υπό την επιτήρηση ρομπότ αλγορίθμων πιθανοτήτων της τεχνητής Απονοημοσύνης μας -

Χρόνια Πολλά!
.

[GeorgeVita]

Χρόνια πολλά!
(παρακάμπτω τα περί fb μιας και δεν έχω λογαριασμό)

Σχετικά με το HPC και δηλώνοντας άσχετος με το θέμα, έχω αρκετές φορές προβληματιστεί με την δυσκολία να "σπάσεις" ένα πρόβλημα σε τμήματα ώστε να καταφέρεις να εκμεταλλευτείς διαδικασίες Parallel Programming. Φυσικά, μια καλή εφαρμογή εδώ στις συζητήσεις μας, ήταν ο Δίγλωσσος εμπλουτισμός σαρωμένων αρχείων pdf με δυνατότητα αναζήτησης κειμένου (pdfocr, tesseract OCR). Εκεί, μπορούσες να χρησιμοποιήσεις διαφορετικό thread της CPU για κάθε σελίδα του pdf.

Συμμεριζόμενος την διασφάλιση της συμβατότητας με παλαιότερα λειτουργικά συστήματα και την επιλογή "το φτιάχνω με αυτά που ξέρω", αναρωτιέμαι για το πόσο δύσκολη και ενεργοβόρα διαδικασία είναι η υλοποίηση Cluster με παλιούς υπολογιστές.

Δεν είναι ανταγωνιστικό, ως ιδέα τουλάχιστον, ένα φθηνό/φτιαχτό σημερινό σύστημα με Ryzen 7 5800X (8 cores, single thread rating=3445, TDP=105W) ή Ryzen 7 5700G (8 cores, single thread rating=3284, +Graphics, TDP=65W);