設備ログを集計するとき、空欄をゼロで埋めると計算自体は通ります。 しかしそのゼロは測定結果ではなく、集計処理が後から入れた値かもしれません。 「0を測定した」「値を取得できなかった」「その時刻は取得対象外だった」を分けてから計算します。
この記事では、一定間隔で取得する設備データを例に、平均値と欠測率の残し方を説明します。 ここでいう欠測は、取得する予定だった時刻に有効な値がない状態を指します。 異常判定や品質の合否を決める前に、使えるデータの範囲と、未確認のまま残っている区間を把握するための手順です。
数値の列だけでは、測定できたか分からない
表示が0でも、通信が途絶えた間の初期値や、変換処理が入れた値である可能性があります。 逆に、空欄の意味が通信失敗か、未設定か、集計対象外かは、表示だけでは確定しません。 集計する前に、収集側の仕様と処理履歴を確認します。 CSVを受け取った集計担当者だけで判断できないときは、収集システムの設定を管理している担当者(制御系・情報システムなど)に、どの条件でこの値や空欄が入るのかを確認します。
例えばOPC UAのDataValueは、値とともにStatusCode(状態コード)や時刻を持つ構造です。 仕様ではエラーを示すStatusCodeの場合、その値を無視し、サーバーはnullを設定する扱いを定めています。 このような品質情報が収集元にあっても、CSV出力で数値の列だけを切り出すと、判断材料が失われます。 自社で使っている接続で実際に何が保存されるかは、製品の仕様書と設定内容で確認してください。
次は、本記事が提案する集計前の区別です。
| 記録の状態 | 集計前の扱い |
|---|---|
| 有効な測定値として0を取得 | 0も値として扱う。測定対象と単位を確認 |
| 取得予定だったが値がない・無効 | 欠測として理由と区間を残す |
| 計画上、取得対象でない | 対象外として、対象にしない根拠を残す |
| 前回値・補間値などで補った | 原値と別に保持し、補間方法を明示 |
| 空欄や0の由来が不明 | 収集・変換仕様を確認するまで意味を確定しない |
機器の停止中でも温度や圧力を監視する設計なら、その時間も取得対象です。 「設備が止まっていたから対象外」と後から決めず、取得する期間と条件を先に定義します。 この定義は集計担当者だけで決めず、そのデータを監視や判定に使う部門と合わせておきます。
5点の仮定データで、平均値の違いを計算する
同じ温度タグを等間隔に5回取得する計画で、1回だけ取得できなかったと仮定します。 以下は計算を説明するための仮の数値で、実設備の記録や適正温度を示すものではありません。
| 取得枠 | 1 | 2 | 3 | 4 | 5 |
|---|---|---|---|---|---|
| 温度(℃) | 20 | 22 | 欠測 | 24 | 26 |
有効な4点の合計は、20+22+24+26=92℃です。 欠測の扱いを変えると、平均の分母と意味が次のように変わります。
| 処理 | 計算 | 読み取れること |
|---|---|---|
| 欠測を0で埋める | (20+22+0+24+26)÷5=18.4℃ | 0という仮の値を含む5点の平均 |
| 欠測を除いて計算する | 92÷4=23.0℃ | 取得できた有効4点の平均 |
18.4℃を、その期間に測定した温度の平均として扱うのは不適切です。 0℃を測定した事実はないためです。 一方、23.0℃も、欠測した1点の値が分かったことにはなりません。 欠測が高温の時間帯に起きていたなら、有効点だけの平均ではその状態を取り落とす可能性があります。
ここで23.0℃として求めたのは、有効な点の算術平均です。 不等間隔のデータの時間平均や、設備全体の代表温度へ、そのまま読み替えないでください。 取得時刻や間隔が揃っているかは、設備ログの時刻の確認と併せて調べます。
集計関数の分母を、実際の動作で確かめる
空欄をどう扱うかは、データ形式と使う関数によって変わります。
例えばPostgreSQL 18の集計関数では、AVGはnullでない入力値の平均、COUNT(列)はnullでない値の件数、COUNT(*)は行数を返します。
また、対象行がないSUMは0ではなくnullになります。
これはPostgreSQL 18の仕様であり、ほかの製品や表計算ソフトが同じ動作とは限りません。
欠測をnullで表し、その取得枠の行自体は残した5行の例なら、COUNT(*)は5行、COUNT(値)は4件となり、一致しません。
欠測した行そのものを保存していない設計では、COUNT(*)を数えても取得予定数にはなりません。
CSVの空文字や文字列「NULL」が、データベースのnullと同じ扱いになるかも、取り込み仕様次第です。
使う表計算ソフトや集計処理で、有効な0、空欄、エラー、欠落行を含む小さな確認用データを用意します。 期待する件数と平均を手計算してから、実際の出力と照合してください。 実運用データは原本をそのまま保持し、確認は複製したファイルで行います。
欠測率には、取得予定数と除外条件を添える
一定間隔の取得では、次の定義が使えます。 これは本記事の集計例の定義であり、全システム共通の規格値ではありません。
欠測率=取得予定だった枠のうち、有効な値がない枠数÷取得予定枠数×100
前節の例では、取得予定5枠、有効4枠、欠測1枠なので、欠測率は1÷5×100=20%です。 20%を許容できるかは、この計算だけでは判断できません。 監視・品質判定・改善比較などの用途と、欠測の発生条件を確認する必要があり、許容範囲はそのデータを判断に使う部門と決めます。 取得予定枠数が0なら割り算は定義できないため、欠測率0%とせず「対象なし」と表示します。
件数が同じでも、連続して抜けたか、特定の運転状態で抜けたかによって影響は変わります。 平均値と一緒に、対象期間、予定数、有効数、欠測数、連続した欠測区間を残します。 重複レコードがあっても有効枠を二重に数えず、タグ名・予定時刻などで同一と判断した方法と、重複のどちらを採用したかを記録してください。
値が変化したときだけ保存するイベント方式には、固定周期の予定数をそのまま当てはめられません。 記録が増えなかった理由が「値が変わらなかった」のか「収集できなかった」のかを、通信状態や収集仕様から確認します。 ここが集計側のデータだけでは分からない場合は、収集設定を管理する担当者に確認を依頼し、設定の変更は権限のある担当者が行います。
補間する場合は、原値・方法・使う目的を残す
前回値を引き継ぐ方法や、前後の点から直線で埋める補間は、値がどう変化したかについて仮定を置く処理です。 グラフが連続して見えても、失われた実測値が復元されたわけではありません。 前後に点がない区間や、急変を含む可能性のある区間を、見た目を整えるために埋めないようにします。
集計担当者は、原データ、品質状態、補間後の値、補間方法と対象区間、判断に使う範囲を分けて保持します。 補間した値を警報や品質の合否に使うなら、集計担当者だけで決めず、その用途を担当部門と合意し、検証した結果を残します。
報告の一例は「温度平均23.0℃、有効4/予定5枠、欠測1枠・20%、欠測は枠3、補間なし」です。 これは上の仮定データの要約です。 実際の報告ではタグ名、単位、期間、取得条件と欠測理由も対応させます。 比較する期間ごとに取得率や除外条件が違う場合は、その違いを明示して、工程の変化だけで平均値が変わったと断定しません。
データの収集から改善判断までを見直す場合は、MESデータの改善サイクルへ進み、必要な品質情報をどこで保持するかを担当者と決めます。