Porovnanie so SQLite
Čo Base robí dnes v porovnaní so SQLite a ako je rýchla. Predbežné, a ukazujeme aj prípady, keď je Base pomalšia.
Predbežné. Base je pred vydaním. Tieto čísla sa menia s každým zostavením. Sú to momentka, nie sľub.
Rýchlosť
Čas na operáciu ako percento SQLite (SQLite = 100 %). Pod 100 % je Base rýchlejšia, nad 100 % je Base pomalšia. Každá operácia sa meria dvakrát: počtom inštrukcií procesora (stabilné) a skutočným časom.
| Prípad | Výpočtová náročnosť (započítané inštrukcie procesora) | Skutočný čas |
|---|---|---|
| Bodové čítanie podľa kľúča | 72 % (o 28 % rýchlejšie) (Base rýchlejšia) | 87 % (o 13 % rýchlejšie) (Base rýchlejšia) |
| Hromadné vkladanie | 89 % (o 11 % rýchlejšie) (Base rýchlejšia) | 98 % (o 2 % rýchlejšie) (Približne rovnako) |
| Skenovanie rozsahu | 57 % (o 43 % rýchlejšie) (Base rýchlejšia) | 41 % (o 59 % rýchlejšie) (Base rýchlejšia) |
| Úprava | 99 % (o 1 % rýchlejšie) (Približne rovnako) | 63 % (o 37 % rýchlejšie) (Base rýchlejšia) |
| Mazanie | 104 % (o 4 % pomalšie) (Približne rovnako) | 72 % (o 28 % rýchlejšie) (Base rýchlejšia) |
| Spojenie | 95 % (o 5 % rýchlejšie) (Približne rovnako) | 55 % (o 45 % rýchlejšie) (Base rýchlejšia) |
| Agregácia | 67 % (o 33 % rýchlejšie) (Base rýchlejšia) | 30 % (o 70 % rýchlejšie) (Base rýchlejšia) |
| Zmiešaná záťaž skutočnej aplikácie | 98 % (o 2 % rýchlejšie) (Približne rovnako) | – |
| Vyhľadávanie podobností | 109 % (o 9 % pomalšie) (Base pomalšia) | – |
SQLite = 100 %
- Rýchlejšie ako SQLite v tomto meraní (skutočný čas): Bodové čítanie podľa kľúča, Skenovanie rozsahu, Úprava, Mazanie, Spojenie, Agregácia.
Vyhľadávanie podobností
Dopyt na položky najpodobnejšie k danej (10 000 položiek, každá s tromi termami), spustený nástrojom príkazového riadka. Čas na dopyt v milisekundách. Počet inštrukcií na dopyt: Base 87,6 mil., SQLite 80,4 mil..
Tu je vypovedajúca iba výpočtová náročnosť.
Veľkosť súboru
Veľkosť súboru databázy pre tie isté údaje ako percento SQLite (SQLite = 100 %). Čerstvý: zapísaný v jednej transakcii. Po VACUUM: oba súbory zhutnené. Nad 100 % je Base väčšia.
Súbory Base sú väčšie ako súbory SQLite pri všetkých štyroch súboroch údajov. Stromy fulltextového indexu katalógu sú ešte v staršej, väčšej podobe.
Porovnanie funkcií
Stĺpec Base: stav repozitára so zdrojovým kódom. Stĺpec SQLite: referenčná verzia SQLite 3.54.1 použitá pri testoch.
| Funkcia | PSOrvia Base | SQLite |
|---|---|---|
| Jeden súbor, bez servera | Áno | Áno |
| Transakcie a obnova po páde | Áno | Áno |
| Viac procesov na jednom súbore | Áno | Áno |
| Kontrolný súčet pri každom čítaní stránky Voliteľné rozšírenie v SQLite |
Áno | Čiastočne |
| Prísny režim SQL popri režime kompatibilnom so SQLite Tabuľky STRICT v SQLite |
Áno | Čiastočne |
| Pohľady, triggery, spoločné tabuľkové výrazy, oknové funkcie | Áno | Áno |
| Funkcie JSON Obe s JSONB a podtypom JSON |
Áno | Áno |
| Fulltextové vyhľadávanie Base zostaví index katalógu za 27 % a odpovie na jeho dopyty za 62 % času SQLite; všetky štyri tokenizéry, rank/bm25, highlight, snippet |
Áno | Áno |
| Vyhľadávanie vektorovej podobnosti Base to má ako rozhranie Rustu |
Čiastočne | Nie |
| Viac súborov databáz v jednom pripojení (ATTACH) | Áno | Áno |
| Virtuálne tabuľky a index R*Tree Base: rtree a generate_series zabudované, ďalšie moduly v Ruste; žiadne moduly v C |
Čiastočne | Áno |
| Vstavané šifrovanie SQLite iba cez samostatné rozšírenia |
Plánované | Nie |
| Funguje v existujúcich programoch so SQLite bez úprav Base ponúka približne 86 % volaní programového rozhrania SQLite v samostatnej knižnici vrátane prístupu po častiach k veľkým hodnotám a databázy ako jedného bajtového obrazu; žiadne zaveditelné rozšírenia |
Áno | Áno |
| Používateľské funkcie, porovnávania (collations) a hooky | Áno | Áno |
| Interaktívny príkazový riadok s bodkovými príkazmi a výstupnými režimami | Áno | Áno |
| Online záloha po krokoch, VACUUM a VACUUM INTO | Áno | Áno |
| Jazykové väzby Rust, C, C++, Python, PHP, Go, JavaScript, Java, C#, Dart a Ruby dnes; viac plánované na 1.0 |
Čiastočne | Áno |
| Zdokumentovaný formát súboru | Base 1.0 je zmrazený, nevydaný | |
| Licencia | Apache-2.0 pre Base; verejná doména pre SQLite | |
| Vyspelosť | Base je pred vydaním; SQLite má desaťročia a je veľmi široko testovaná | |
Metóda
- Výpočtová náročnosť: Callgrind počíta inštrukcie procesora jednej operácie (4 000 riadkov, iba fáza merania).
- Skutočný čas: benchmarkový program spustí ovládač Base a ovládač SQLite jeden po druhom na jednom pripnutom jadre procesora, 7 behov po 20000 riadkov s hodnotami po 100 bajtov, sync vypnutý, teplá cache, pevný seed. Rátá sa iba pomer k SQLite nameraný v tej istej minúte.
- SQLite je pripnutý referenčný build s cache 64 MB, memory map 512 MB a exkluzívnym zamykaním, teda s rovnakou sémantikou jedného procesu, akú používa Base. S predvolenými nastaveniami SQLite vyzerá bodové čítanie veľmi odlišne, pozri poznámky.
- Program, nastavenia a surové výsledky sú v repozitári so zdrojovým kódom.
- Oba ovládače čítajú každú hodnotu stĺpca každého riadku výsledku, tak ako by to robil klientsky program. Čítanie všetkých stĺpcov je naša voľba metódy; program, ktorý potrebuje len niektoré stĺpce, by videl iné pomery.
Poznámky
- S predvolenými nastaveniami SQLite (zámok na čítanie na príkaz) trvá bodové čítanie v Base približne štvrtinu času, pretože sa líšia nastavenia, nie preto, že by bol engine rýchlejší. Ako férové používame vyššie uvedené porovnanie s exkluzívnym zamykaním.
- Veľkosť zmenšených benchmarkových programov vrátane malého ovládača: 512 184 bajtov pre Base a 1 377 568 bajtov pre SQLite.
- Kompatibilita sa kontroluje voči referenčnej implementácii SQLite s verejným korpusom sqllogictest: prejde celý korpus 622 súborov, 5 939 714 z 5 939 714 záznamov (100.00 percent; jeden súbor nemá použiteľné príkazy), za 379 sekúnd. Sada 1 500 náhodných diferenciálnych dotazov nepreukazuje žiadny rozdiel.
Namerané hodnoty z benchmarkových poznámok PSOrvia Base (verzia 78f3cc9). Reprodukovateľné programami v bench/ v repozitári so zdrojovým kódom.