Skip to content

Instantly share code, notes, and snippets.

Show Gist options
  • Save alexey-milovidov/b097ac3baa210b7743d046e438bf2831 to your computer and use it in GitHub Desktop.
Save alexey-milovidov/b097ac3baa210b7743d046e438bf2831 to your computer and use it in GitHub Desktop.
:) SELECT uniq(UserID) FROM hits_all WHERE EventDate = today()
SELECT uniq(UserID)
FROM hits_all
WHERE EventDate = today()
┌─uniq(UserID)─┐
│ 321993104 │
└──────────────┘
1 rows in set. Elapsed: 2.563 sec. Processed 14.74 billion rows, 147.43 GB (5.75 billion rows/s., 57.52 GB/s.)
:) SELECT uniq(UserID) FROM hits_all WHERE EventDate = today() SETTINGS distributed_group_by_no_merge = 1
SELECT uniq(UserID)
FROM hits_all
WHERE EventDate = today()
SETTINGS distributed_group_by_no_merge = 1
┌─uniq(UserID)─┐
│ 1426026 │
└──────────────┘
┌─uniq(UserID)─┐
│ 1430475 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3705350 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4084529 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3852397 │
└──────────────┘
┌─uniq(UserID)─┐
│ 1430619 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3870660 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3364462 │
└──────────────┘
┌─uniq(UserID)─┐
│ 1412519 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3411139 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4086859 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3105844 │
└──────────────┘
┌─uniq(UserID)─┐
│ 1443783 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3827098 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4101261 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3717317 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3711408 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4068747 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3697237 │
└──────────────┘
┌─uniq(UserID)─┐
│ 1416136 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3400217 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3415428 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3708168 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3350219 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6921538 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4439818 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3723586 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4464619 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3347352 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3106273 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3688749 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7574159 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8390419 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3709521 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8826494 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3857722 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8379900 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3326968 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3362576 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4459962 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3376623 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7721487 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3372371 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3127346 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6901733 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3364071 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4519374 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5662157 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4470051 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3399835 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3389307 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8873188 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7698014 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7707469 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4548024 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4477215 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6743757 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3125206 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6686248 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7459146 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5771384 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3390816 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8412517 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8015654 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4436021 │
└──────────────┘
┌─uniq(UserID)─┐
│ 10467227 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4528744 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6724018 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4433262 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7305306 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7272688 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8167682 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7661018 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8827620 │
└──────────────┘
┌─uniq(UserID)─┐
│ 10493582 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5659657 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5658645 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7479056 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3112345 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7456628 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8107045 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8186404 │
└──────────────┘
┌─uniq(UserID)─┐
│ 10424206 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7988354 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6271034 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7506610 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5770573 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8197748 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6852287 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3337034 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8143648 │
└──────────────┘
┌─uniq(UserID)─┐
│ 10431855 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7331522 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8086772 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7460829 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6951450 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5519104 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3104839 │
└──────────────┘
┌─uniq(UserID)─┐
│ 9426906 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8040079 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5509727 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8907923 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8835075 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8778851 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5784112 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5764873 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4449477 │
└──────────────┘
┌─uniq(UserID)─┐
│ 9271418 │
└──────────────┘
┌─uniq(UserID)─┐
│ 11586889 │
└──────────────┘
┌─uniq(UserID)─┐
│ 12634686 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5468125 │
└──────────────┘
┌─uniq(UserID)─┐
│ 11653247 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8815119 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8127501 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8897775 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6307342 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8592164 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6688443 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6968063 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6874191 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5791164 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7705644 │
└──────────────┘
┌─uniq(UserID)─┐
│ 11582319 │
└──────────────┘
┌─uniq(UserID)─┐
│ 5698364 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3117367 │
└──────────────┘
┌─uniq(UserID)─┐
│ 3375374 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7352670 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7919486 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6906182 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6301170 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6154316 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8869419 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4655597 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6108389 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6924449 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6134172 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8539230 │
└──────────────┘
┌─uniq(UserID)─┐
│ 22349099 │
└──────────────┘
┌─uniq(UserID)─┐
│ 12672226 │
└──────────────┘
┌─uniq(UserID)─┐
│ 9199006 │
└──────────────┘
┌─uniq(UserID)─┐
│ 10239192 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7503096 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6085108 │
└──────────────┘
┌─uniq(UserID)─┐
│ 10342110 │
└──────────────┘
┌─uniq(UserID)─┐
│ 9090437 │
└──────────────┘
┌─uniq(UserID)─┐
│ 9459892 │
└──────────────┘
┌─uniq(UserID)─┐
│ 12716508 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4447471 │
└──────────────┘
┌─uniq(UserID)─┐
│ 7548457 │
└──────────────┘
┌─uniq(UserID)─┐
│ 10364234 │
└──────────────┘
┌─uniq(UserID)─┐
│ 22496301 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8760880 │
└──────────────┘
┌─uniq(UserID)─┐
│ 21606084 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4653576 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8680212 │
└──────────────┘
┌─uniq(UserID)─┐
│ 21350134 │
└──────────────┘
┌─uniq(UserID)─┐
│ 22496019 │
└──────────────┘
┌─uniq(UserID)─┐
│ 6318042 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8333269 │
└──────────────┘
┌─uniq(UserID)─┐
│ 9084121 │
└──────────────┘
┌─uniq(UserID)─┐
│ 21467914 │
└──────────────┘
┌─uniq(UserID)─┐
│ 21289130 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8920274 │
└──────────────┘
┌─uniq(UserID)─┐
│ 8179051 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4626214 │
└──────────────┘
┌─uniq(UserID)─┐
│ 9382422 │
└──────────────┘
┌─uniq(UserID)─┐
│ 4660590 │
└──────────────┘
167 rows in set. Elapsed: 1.751 sec. Processed 14.74 billion rows, 147.45 GB (8.42 billion rows/s., 84.20 GB/s.)
:) SELECT sum(u) FROM (SELECT uniq(UserID) AS u FROM hits_all WHERE EventDate = today() SETTINGS distributed_group_by_no_merge = 1)
SELECT sum(u)
FROM
(
SELECT uniq(UserID) AS u
FROM hits_all
WHERE EventDate = today()
SETTINGS distributed_group_by_no_merge = 1
)
┌─────sum(u)─┐
│ 1163166772 │
└────────────┘
1 rows in set. Elapsed: 3.760 sec. Processed 14.75 billion rows, 147.47 GB (3.92 billion rows/s., 39.21 GB/s.)
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment