ik heb autokernel open-source gemaakt -- autoresearch voor GPU-kernels je geeft het een willekeurig pytorch-model. het profileert het model, vindt de knelpunten in de kernels, schrijft triton-vervangers en voert experimenten 's nachts uit. bewerk één bestand, benchmark, houd vast of keer terug, herhaal voor altijd. dezelfde cyclus als @karpathy autoresearch, toegepast op kerneloptimalisatie 95 experimenten. 18 TFLOPS → 187 TFLOPS. 1.31x vs cuBLAS. volledig autonoom 9 kerneltypes (matmul, flash attention, fused mlp, layernorm, rmsnorm, softmax, rope, cross entropy, reduce). de wet van Amdahl bepaalt wat als volgende geoptimaliseerd moet worden. 5-fasen correctheidscontroles voordat enige versnelling telt de agent leest program.md (de "research org code"), bewerkt, voert uit en houdt of keert terug. ~40 experimenten/uur. ~320 's nachts wordt geleverd met zelfvoorzienende GPT-2, LLaMA en BERT-definities, zodat je niet de transformers-bibliotheek nodig hebt om te beginnen.

Macrohard of Digital Optimus is een gezamenlijk xAI-Tesla-project, dat voortkomt uit de investeringsovereenkomst van Tesla met xAI. Grok is de meesterconductor/navigator met een diep begrip van de wereld om Digital Optimus te sturen, die de afgelopen 5 seconden van real-time computerschermvideo en toetsenbord/muisacties verwerkt en uitvoert. Grok is als een veel geavanceerdere en verfijndere versie van navigatiesoftware met stapsgewijze aanwijzingen. Je kunt het zien als Digital Optimus AI die Systeem 1 (de instinctieve kant van de geest) is en Grok die Systeem 2 (de denkende kant van de geest) is. Dit zal zeer concurrerend draaien op de supergoedkope Tesla AI4 ($650) in combinatie met relatief spaarzaam gebruik van de veel duurdere xAI Nvidia-hardware. En het zal het enige real-time slimme AI-systeem zijn. Dit is een grote zaak. In principe is het in staat om de functie van hele bedrijven na te bootsen. Daarom wordt het programma MACROHARD genoemd, een grappige verwijzing naar Microsoft. Geen enkel ander bedrijf kan dit nog doen.