Ашықтық

Бұл бетте сайтта көрсетілетін қаралым саны қалай есептелетіні түсіндіріледі. Қаралым туралы деректер Cloudflare Analytics Engine қызметінен алынады.

Сайтқа кірген әр адам бір қаралым ретінде есептеледі. Бұл сан Workers Analytics Engine қызметінен алынады.

Workers Analytics Engine — санаттардың алдын ала бекітілген тізімімен шектелмей өсетін есептік деректерді сақтауға арналған Cloudflare қызметі. Cloudflare оны бірегей мәндер санына шектеу қоймайтын, ауқымды деректерді талдау қызметі деп сипаттайды. Worker кіріктірілген API арқылы дерек нүктесін жазады. Кейін сол есептік жазба бұл дерек нүктелерін HTTP SQL API арқылы SQL сұрауларымен оқиды. Мұнда қолданылатын SQL диалектісі Cloudflare қызметінің басқа Analytics SQL API интерфейсіндегі диалектіден бөлек.

Деректерді сақтау бірлігі — dataset. Cloudflare dataset ұғымын SQL кестесімен салыстырады: әр жол мен әр бағандағы деректердің мағынасы бірізді болуы керек. dataset атауы Worker баптауларында көрсетіліп, Worker қызметіне байланыстырылады. Кесте Worker дерек жаза бастағанда пайда болады. Бағандар бөлек қадамда жарияланбайды.

Бір дерек нүктесі — бір оқиға, бір жол. Worker оқиғаны тіркегенде, Cloudflare timestamp мәнін қосады. Қалған деректердің бәрін Worker береді және олар әр жолы бірдей ретпен берілуі керек. Cloudflare осы реттелген орындардың әрқайсысын өріс деп атайды.

Өріс — осы реттегі бір орын. Бірінші мәтіндік жол әрқашан бірінші мәтіндік өріске түседі. Екінші сан әрқашан екінші сандық өріске түседі. Дерекқор мәннің жанына атауын сақтамайды. Ол орнын сақтайды. Реті өзгерсе, өрістің мағынасы да өзгереді. Сұрауда бұл орындар бағандарға айналады. Мәтіндік өрістер blob1 мәнінен blob20 мәніне дейін, сандық өрістер double1 мәнінен double20 мәніне дейін аталады. Іріктеу кілті — index1. Әр жолда timestamp, dataset және _sample_interval өрістері де бар. Сұрауда нақты сол есеп үшін өріске басқа атау беруге болады, мысалы, blob1 AS city. Ал сақталған өрістің атауы blob1 болып қала береді.

Өрістердің үш түрі бар. Blob өрістерінде мәтіндік жолдар сақталады. Cloudflare оларды топтау мен сүзуге арналған өлшемдер деп атайды; басқа жүйелерде олар белгі деп аталады. Бір дерек нүктесінде жиырмаға дейін blob өрісі болуы мүмкін, олардың жалпы көлемі 16 килобайттан аспауы керек. Double өрістерінде сандар, яғни қосындысын немесе орташа мәнін есептеуге болатын өлшенген шамалар сақталады. Бір дерек нүктесінде жиырмаға дейін double өрісі болуы мүмкін. Индекс — ұзындығы 96 байттан аспайтын бір мәтіндік жол. Жазу кезінде тізім беруге болады, бірақ Cloudflare дерек нүктесін сол тізімде бір ғана индекс болғанда сақтайды. Екінші индекс болса, дерек нүктесі жазылмайды.

Дерек көлемі өте үлкен болғанда, сұраулар жылдам орындалуы үшін Analytics Engine деректерді іріктеп алады. Іріктеу жазу кезінде де, оқу кезінде де жасалуы мүмкін және индекске қарай жүргізіледі. Оқиғасы көп индекстің деректері іріктелуі мүмкін. Оқиғасы аз индекстің деректері іріктеусіз қалуы мүмкін. Әр сақталған жолда _sample_interval болады: бұл мән сол жол бастапқы оқиғалардың қаншасын білдіретінін көрсетеді. Жалпы сан _sample_interval мәндерін қосу арқылы есептеледі. Өлшенген шаманың қосындысын есептегенде, алдымен әр мән _sample_interval мәніне көбейтіледі. Орташа мәнді есептеу үшін салмақталған қосынды іріктеу аралықтарының қосындысына бөлінеді.

Worker бір рет шақырылғанда ең көбі 250 дерек нүктесін жаза алады. Деректер үш ай сақталады.