Yeni: Yapay zekâ güvenlik duvarı tüm platformu izliyor ve her olayı sade bir dille açıklıyor. Nasıl çalıştığını görün

Zaman serisi verilerinin downsampling’i: saatlik ortalama neyi gizler

Saatlik ortalama trendi korur ve önemli olan bir dakikalık ani yükselmeyi siler. Aralık başına min, max ve count saklamak ucuz bir çözümdür.

Zaman serisi verilerini örnek sayısını azaltarak (downsampling) özetlemek, çok sayıda ham okumanın her zaman aralığı (ör. dakika, saat veya gün) için tek bir özetle değiştirilmesi demektir. Uzun grafikleri hızlı, depolamayı küçük tutar; ancak saklanan özet neyin korunacağını belirler. Saatlik ortalama trendi korur ama kısa ani yükselmeleri siler; aralık başına min, max ve count ise bunları korur.

Her 10 saniyede bir okuma yapan bir basınç transmitteri saatte 360, yılda yaklaşık 3,15 milyon okuma gönderir; oysa bir grafik en fazla birkaç bin piksel genişliğindedir. Çizilmeden önce bu okumaların bir şekilde azaltılması gerekir.

Downsampling yaparken ortalama ile min max: hangisini saklamalısınız?

İkisini de saklayın. Ortalama, aralık boyunca sürecin nerede durduğunu; min ve max ise ne kadar saptığını gösterir.

Normalde 4,0 bar’da çalışan bir pompa basma hattını düşünün; 10 saniyede bir okuma yapılıyor. Bir vana çok hızlı kapanır ve basınç bir dakika boyunca 9,0 bar’a fırlar; bu, saatteki 360 okumanın altı tanesidir. Saatlik ortalama 4,08 bar çıkar; neredeyse hiç oynamayan bir hat gibi görünür. Saatlik maksimum ise 9,0 bar’dır ve bakım planlayıcısının ihtiyaç duyduğu sayı budur. Kısa bir pompa duruşu ise tersi yönde aynı şekilde çalışır ve bunu yalnızca min gösterir.

Count, en kolay atlanan değerdir. 360 yerine 120 okumalı bir saat, cihazın bu süre boyunca sustuğu ya da raporlama hızını düşürdüğü anlamına gelir; gelen verilerden hesaplanan bir ortalama ise normal görünür. Count’u saklarsanız, downsampling sonrasında da veri boşluğu görünür kalır.

Hermetry, saha cihazlarını canlı panolara, kurallara ve alarmlara bağlar: tek bir platformda IoT telemetrisi ve SCADA. Her cihazın her sayısal anahtarı için aralık başına beş değeri (sum, count, min, max ve last) bir dakika, bir saat ve bir gün çözünürlükte tutar. Bir grafik kartının Aggregate ayarı aynı anahtarı avg, min, max veya count olarak çizer. Hermetry’deki avg, sum’ın count’a bölünmesiyle elde edilir; zamana göre ağırlıklı değil, düz bir ortalamadır; bunu aggregates and rollups sayfası açıklar.

Zaman serisi verilerinde rollup nedir?

Rollup, ham okumalar yerine daha ince özetlerden oluşturulan daha kaba bir özettir: saatler dakikalardan, günler saatlerden. Sum, count, min ve max tam olarak birleştirilebilir; bir günün maksimumu, saatlik maksimumların en büyüğüdür. Ortalama ise böyle birleştirilemez; ortalamaların ortalamasını almak, bir rapor sorgusunda yapılması kolay bir hatadır.

Bir saatte 4,0 bar ortalamalı 360 okuma, bir sonraki saatte ise cihazın raporlama hızını düşürmesi nedeniyle 6,0 bar ortalamalı yalnızca 36 okuma olduğunu varsayın. İki ortalamanın ortalaması 5,00 bar eder; ancak 396 okumanın gerçek ortalaması 4,18 bar’dır. Aralık başına sum ve count değerlerini saklarsanız, doğru ortalamayı her seviyede yeniden hesaplayabilirsiniz.

Düzensiz raporlama söz konusuysa, iki sistemden gelen sayıları karşılaştırmadan önce bir raporun düz ortalama mı yoksa her değeri ne kadar süre geçerli kaldığına göre ağırlıklandıran zamana göre ağırlıklı ortalama mı kullandığını kontrol edin.

Uzaklaştırdığımda grafiğim neden farklı görünüyor?

Haftalar ya da aylar kapsayan bir grafik, daha kaba aralıklar çizmek ya da seyreltilmiş bir nokta kümesi kullanmak zorundadır; bu nedenle yakınlaştırdığınızda gördüğünüz okumalar artık ekranda yer almaz. Bir saat boyunca görünümü dolduran bir ani yükselme, saatlik ortalamada küçük bir kabarcığa dönüşür ve günlük ortalamada tamamen kaybolur.

Basınç ve sıcaklıklar için, kısa bir sapmanın bir yıllık yakınlaştırmada da görünmeye devam etmesi adına max değerini ikinci bir seri olarak ya da bir min ve max çifti olarak eklerim. Kısa ani yükselmelerin alarm tarafı için tek bir hatalı okumayı alarmlarınızın dışında tutmak yazısına bakın; okumaların nereden geldiği ise PLC programına dokunmadan PLC veri kaydı yazısında anlatılıyor. Sorunların kısa sürdüğü, grafiklerin ise aylarca kapsadığı pompa istasyonları pompa istasyonlarının uzaktan izlenmesi ve su endüstrisi sayfası ile ele alınıyor.

Sık sorulan sorular

Downsampling öncesinde bir sensör ne sıklıkla örneklenmelidir?

Görmeniz gereken en kısa olayın içine birkaç okuma sığacak kadar sık. Bir dakikalık bir olay önemliyse, beş dakikada bir okuma o olayı kaçırabilir; kaydedilmemiş bir değeri hiçbir özet geri getiremez. Olay için örnekleyin, sonra depolama ve grafikler için downsampling yapın.

Downsampling, sıkıştırma ile aynı şey midir?

Hayır. Kayıpsız sıkıştırma aynı okumaları daha az yerde saklar ve her birini geri verir. Downsampling ise ham okumaları atar ve yalnızca aralık başına değerleri tutar; bu nedenle aralığın kaydetmediği ayrıntılar, örneğin bir saat içindeki ani yükselmenin tam zamanı, kaybolur.

Downsampling sonrasında ham veriler silinmeli midir?

Bir olayı ayrıntılı incelemeniz gerekebilecek süre boyunca ham okumaları saklayın; ardından aralık değerlerini min, max ve count ile tutun. Daha eski bir ani yükselme, yalnızca ait olduğu aralığın maksimumu olarak yaşar; bu da yine de olduğunu ve kabaca ne zaman olduğunu gösterir.

Paylaş

Saha verilerinizi bu hafta canlı görün

Bölgenizde ilk cihazlarınızla bir deneme başlatın ya da bir demo ayarlayın ve kendi senaryonuzu getirin.