30 тысяч проверок в секунду на двух ядрах

Сколько строк в секунду способен проверить инструмент контроля качества данных? На первый взгляд, это простой вопрос. Берём набор данных, запускаем проверки, делим число строк на время и получаем показатель, который можно поставить рядом с результатами других продуктов. Но довольно быстро выясняется, что за словом «проверка» могут скрываться совершенно разные вычисления. В одном случае система считает долю пустых значений в колонке. В другом — проверяет контрольное число ИНН. В третьем — обходи…

Описание из RSS. Читать у источника →