De la 2.500 de cereri la 24: Reconstruirea istoricului de stele fără observatori

GitHub a optimizat cu succes funcționalitatea sa de istoric al stelelor, reducând drastic numărul de cereri necesare pentru generarea acestor date de la 2.500 la doar 24. Această optimizare semnificativă a fost realizată prin schimbarea fundamentală a modului în care este calculat și stocat istoricul stelelor. În loc să se bazeze pe datele în timp real ale observatorilor, care s-au dovedit a fi intensive din punct de vedere al resurselor, echipa de inginerie a optat pentru o metodă mai eficientă, de procesare în loturi.

Schimbarea tehnică principală implică trecerea de la o numărătoare live a observatorilor la un sistem care procesează evenimentele de stele în loturi. Acest lucru permite GitHub să agregeze și să stocheze datele istorice ale stelelor mai eficient, reducând suprasolicitarea computațională asociată cu actualizarea constantă a numărului. Noua arhitectură utilizează joburi în fundal pentru a actualiza periodic istoricul stelelor, asigurând că datele rămân rezonabil de actuale, fără presiunea constantă asupra sistemului.

Această re-arhitectură are implicații substanțiale pentru performanță și scalabilitate, demonstrând o soluție ingenioasă la o provocare comună a aplicațiilor web. Prin decuplarea istoricului stelelor de activitatea live a utilizatorilor, GitHub nu numai că și-a îmbunătățit eficiența propriei infrastructuri, dar a stabilit și un precedent pentru gestionarea agregării datelor istorice la scară largă într-un mod mai sustenabil. Următorii pași implică probabil rafinarea ulterioară a intervalelor de procesare în loturi și, potențial, aplicarea unor strategii similare de optimizare altor funcționalități.