[Перевод] Заменяем базу данных SQLite на 3 ГБ конечным автоматом‑преобразователем на 10 МБ

Примечание для любителей чисел: все значения в статье округлены до первого значимого разряда, потому что я фанат метода «zequals» Роба Истэуэя, который позволяет сразу переходить к сути при выполнении оценочных расчётов. Гораздо полезнее запомнить такую эвристику: «Один парень сократил потребление памяти в 300 раз, заменив самодельную базу данных на крошечную статическую специализированную структуру данных, которая делает именно то, что ему нужно

Первые 450 знаков материала. Читать далее у источника →

Читайте также

Похожие новости

[Habr] · Москва

Как я делаю защищенное файловое хранилище — 5: Безальтернативный SQLite

В пятой части я расскажу, почему перед сном всегда заглядываю под кровать, может ли база данных работать внутри FUSE-слоя и каких правил до…

27.10, 12:30 · 1 мин

[Habr] · Москва

Оценил по Сюю 500 запросов в секунду — замерил на ноутбуке: вот где сломалось

Посчитал нагрузку на сокращатель ссылок по главе 2 «System Design Interview» Алекса Сюя, записал ожидание (500 RPS, p95 ≈ 20 мс), собрал ст…

27.10, 15:29 · 1 мин

[Habr] · Забайкальский край

Anthropic заблокировала меня и я потерял подписку за $100, но сохранил год работы и собрал личную RAG-базу

Привет, Хабр! Кто нибудь уже получал такие письма счастья? Причина - страна, оно и понятно, я вообще почитал что они начали массово банить…

29.10, 16:06 · 1 мин

[Habr] · Москва

database is locked. Что на самом деле блокирует SQLite в Telegram-боте и как я это чиню

SQLite в небольшом боте выбирают за то, что не нужен отдельный сервер. А потом в логах раз в пару дней появляется sqlite3.OperationalError:…

27.10, 13:08 · 1 мин

[Habr] · Москва

TABLESAMPLE SYSTEM и LIMIT: выборка, которая не видит конец таблицы

Нам нужно было дёшево оценить, какая доля строк большой таблицы обладает некоторым свойством. В нашем случае свойство — «значение похоже на…

27.10, 00:19 · 1 мин