Rubyfmt bilan 25 million satirli kod bazasini bir kechada formatlash sirlari

Katta kod bazalarini bir kechada formatlash har bir dasturchi yoki texnik rahbar uchun orzu bo’ladi. Ammo bu orzu Stripe kompaniyasining Ruby dasturchilari uchun haqiqatga aylandi. Ular Rubyfmt deb nomlangan avtomatik kod formatlash vositasini yaratib, 25 million satirli kod bazasini bir kechada toza va bir xil uslubda qayta yozdilar. Ushbu maqolada bu jarayon, ishlatilgan texnikalar va natijalar batafsil ko'rib chiqiladi.

Muammo: Katta kod bazasida uslubiy notekislik

Stripe kabi yirik platformalarda Ruby kod bazasi yillar davomida turli jamoalar, turli stil yo'riqnomalari va shaxsiy afzalliklar asosida rivojlandi. Natijada, bir xil funksiyani bajaruvchi kodlar turli formatlarda, bo'sh joylar, indentatsiya va satr uzunligi bo'yicha farq qilardi. Bu nafaqat o'qish qiyinligini oshiradi, balki CI/CD pipeline'larda lint tekshiruvlari va kod tahlili vositalarining samaradorligini pasaytiradi.

Yechim: Rubyfmt yaratish

Rubyfmt - bu Ruby kodini avtomatik tarzda formatlaydigan, formatter bo'lib, open source loyihasi sifatida ishlab chiqilgan. U quyidagi asosiy xususiyatlarga ega:

• Fast parsing – kodni AST (Abstract Syntax Tree) ga tezda o'zgartiradi.
• Deterministik natija – har bir fayl bir xil formatga keladi, takroriy ishlar yo'q.
• Parallel processing – bir nechta CPU yadrolarini bir vaqtning o'zida ishlatadi, bu esa katta hajmdagi fayllarni bir necha soatda formatlash imkonini beradi.

Jarayon: Bir kechada 25 million satirni formatlash

Stripe jamoasi quyidagi bosqichlarni amalga oshirdi:

1. Infrastrukturani tayyorlash – 64 yadroli serverlar klasteri yaratildi, har bir yadroga 2 GB RAM ajratildi.
2. Fayllarni segmentlash – kod bazasini 10 000 ga yaqin kichik paketlarga bo'ldi, har bir paket alohida jarayonda ishladi.
3. Rubyfmt ni parallel ishga tushirish – har bir paket uchun maxsus skript yozildi, bu skript Rubyfmt ni chaqiradi va natijani vaqtinchalik faylga yozadi.
4. Natijalarni birlashtirish – barcha paketlar formatlanganidan so'ng, GitHub Actions yordamida avtomatik pull request (PR) yaratiladi.
5. Kod tekshiruvi – CI pipeline orqali lint, test va security skanerlari o'tkazildi, xatoliklar aniqlansa, PR qayta ko'rib chiqildi.

Bu jarayonni amalga oshirish uchun umumiy vaqt 8 soat atrofida bo'ldi. Aslida, Rubyfmt ning samaradorligi tufayli, kodni o'qish va tahlil qilish vaqtida 30 % ga yaqin kamayish kuzatildi.

Natijalar va foyda

Formatlashdan keyin quyidagi ijobiy natijalar paydo bo'ldi:

• Kod o'qish qulayligi – yangi dasturchilar bir necha daqiqada kod strukturasini tushunishadi.
• CI/CD tezligi – lint va test bosqichlari o'rtacha 20 % tezlashdi.
• Versiya nazorati soddaligi – bir xil format tufayli diff fayllari kichikroq bo'ldi, kod ko'rib chiqish jarayoni ancha samarali bo'ldi.
• Jamoaviy madaniyat – kod standartlariga rioya qilish odatiga ega bo'ldi, bu esa umumiy sifatni oshirdi.

Kelajakda Rubyfmt va katta kod bazalari

Rubyfmt hozirda Ruby 3.x versiyalarini to'liq qo'llab-quvvatlaydi, lekin jamoa uni boshqa tillar, masalan, Python yoki JavaScript uchun ham kengaytirish rejasini ko'rib chiqmoqda. Bundan tashqari, incremental formatting (ya'ni, faqat o'zgartirilgan fayllarni formatlash) funksiyasi ham qo'shilishi kutilmoqda, bu esa kichik o'zgarishlarda ham tezkor natija beradi.

Umuman olganda, Stripe ning Rubyfmt bilan amalga oshirgan tajribasi katta kod bazalarini avtomatlashtirilgan tarzda tozalash imkoniyatini ko'rsatdi. Bu yondashuv har qanday yirik dasturiy loyiha uchun foydali bo'lib, kod sifati, jamoa unumdorligi va texnik qarzlarni kamaytirishga xizmat qiladi.