Деректер
Қайдан келеді, не болады және қалай пайдалануға болады.
Біз Қазақстан бойынша барлық қолжетімді көздерден ауа сапасы өлшемдерін жинаймыз — мемлекеттік станциялар, арзан сенсорлар, халықаралық агрегаторлар. Әр көз деректерді өзінше береді: әр түрлі бірліктер, әр түрлі форматтар, әр түрлі сенімділік деңгейі.
Біздің міндетіміз — мұның бәрін біріктіру, мұқият тазарту және адамдар шынымен сене алатын бірыңғай деректер жиынтығын жариялау. Міне, бұл қалай жұмыс істейді.
Деректер қайдан келеді
Біздің көздеріміз
Мемлекеттік желі
ҚазГидроМет (ҚГМТ)
Бүкіл Қазақстанды қамтитын ресми мемлекеттік мониторинг желісі. PM2.5, PM10, NO2, SO2, CO, O3, H2S және ауа райы деректерін береді.
Арзан сенсорлар
AirGradient
Жоғары жиіліктегі PM, CO2, TVOC, температура және ылғалдылық деректерін беретін арзан ауа сапасы сенсорларының тығыз желісі.
Халықаралық агрегатор
OpenAQ
Мемлекеттік және зерттеу мониторларынан PM2.5 және PM10 өлшемдерін жинайтын ғаламдық ашық ауа сапасы платформасы.
Халықаралық агрегатор
WAQI / aqicn.org
PM2.5, PM10, NO2, SO2, CO, O3 және метеопараметрлерді қоса мультипараметрлік деректер беретін Әлемдік ауа сапасы индексі жобасы.
Арзан сенсорлар
AirKaz
Алматы бойынша тарихи PM2.5 өлшемдерін беретін арзан сенсорлар желісі.
Процесс
Сенсордан ашық деректерге дейін
Әр өлшем сізге жетпес бұрын бірдей мұқият процестен өтеді. Ештеңе тыныш өзгертілмейді — біз түпнұсқаны сақтаймыз және жұмысымызды көрсетеміз.
Жинау
Біз төрт көзден де деректерді автоматты түрде аламыз. Әр API жауабы алынған күйінде сақталады — түпнұсқа ешқашан өзгертілмейді. Бір көзде мәселе болса, қалғандары жұмысын жалғастырады.
Гармонизация
Әр түрлі көздер әр түрлі бірліктер мен форматтарды қолданады. Біз бәрін бірыңғай стандартқа келтіреміз — барлық концентрациялар микрограмм/текше метрде, барлық уақыт белгілері сәйкестендірілген, барлық станциялар бірыңғай тізілімге келтірілген. Бастапқы мәндер әрқашан түрлендірілгендермен бірге сақталады.
Тазарту
Мұнда біз ең көп күш саламыз. Әр өлшем мәселелерге тексеріледі — мүмкін емес мәндер, қатып қалған сенсорлар, кенеттен секірулер, физикалық мағынасы жоқ көрсеткіштер. PM2.5 үшін біз тереңірек статистикалық талдау жүргіземіз. Әр мәселе ашық белгіленеді, ештеңе тыныш жойылмайды.
Валидация
Жарияланбас бұрын бүкіл деректер жиынтығы соңғы тексеру кезеңінен өтеді — автоматты тексерулер біз жіберіп алған нәрсені іздейді. Кез келген тексеру сәтсіз болса, мәселе шешілгенше ештеңе жарияланбайды. Нашар деректер жіберуден гөрі кешіктірген жақсы.
Жариялау
Тек барлық тексеруден өткен өлшемдер жарияланған деректер жиынтығына кіреді. Нәтиже ашық форматтарда қолжетімді — жүктеуге дайын, пайдалануға дайын, әр мәнді бастапқы көрсеткішке дейін бақылауға болады.
Деректер сапасы
Бұл деректерге неге сенуге болады?
Біз ауа сапасы деректері адамдар сенген жағдайда ғана пайдалы екенін білеміз. Сенсорлар бұзылады, көрсеткіштер себепсіз секіреді, аспаптар қатып қалады. Біз мұны жасырмаймыз — керісінше, ашық түрде жұмыс істейміз:
Сапаны тексерудің төрт деңгейі — деректер келген сәттегі базалық тексерулерден бастап сенсорлардың нәзік мәселелерін анықтайтын терең статистикалық талдауға дейін. Әр деңгей алдыңғысы жіберіп алуы мүмкін нәрсені ұстайды.
Әр өлшем белгіленген — таза, күдікті немесе жарамсыз. Біз нашар деректерді тыныш жоймаймыз. Нені және неліктен белгілегенімізді көре аласыз және нені қосуды өзіңіз шеше аласыз.
Толық бақылау мүмкіндігі — әр жарияланған мән бастапқы көрсеткішпен байланысты, түпнұсқа мән мен өлшем бірлігі сақталған. Біздің жұмысымызды тексере аласыз.
Сәтсіз тексерулер жариялауды блоктайды — валидация мәселе тапса, ол шешілгенше ештеңе жарияланбайды. Сенімсіз деректер жіберуден гөрі кешіктірген жақсы.
Не өлшейміз
Параметрлер
| Параметр | Сипаттама | Өлш. бірл. |
|---|---|---|
| pm25 | PM2.5 — ұсақ дисперсті бөлшектер | мкг/м3 |
| pm10 | PM10 — ірі дисперсті бөлшектер | мкг/м3 |
| pm1 | PM1.0 — ультра ұсақ бөлшектер | мкг/м3 |
| no2 | Азот диоксиді | мкг/м3 |
| so2 | Күкірт диоксиді | мкг/м3 |
| co | Көміртек тотығы | мкг/м3 |
| o3 | Озон | мкг/м3 |
| h2s | Күкіртсутек | мкг/м3 |
| co2 | Көмірқышқыл газ | ppm |
| tvoc | Ұшпа органикалық қосылыстар | ppb |
| temperature | Ауа температурасы | °C |
| humidity | Салыстырмалы ылғалдылық | % |
Ашық деректер
Деректерді жүктеу
Барлық деректер тегін және ашық. Өлшемдер жыл мен ай бойынша бөлінген. Тек сапа бақылауынан өткен деректер кіреді.