ファイル署名テーブル:マジックナンバーと回復制限

ファイル署名テーブル

A ファイル署名テーブル 認識可能なバイトパターン、その位置、およびそれらが特定するのに役立つファイル形式を一覧表示しています。これらのパターンは、しばしば ファイルのマジックナンバー, 、ソフトウェアがファイル名の拡張子に依存せずにコンテンツを認識できるようにします。ディレクトリエントリやその他のファイルシステムレコードが欠落している場合、復元ツールはこれらを利用して候補となるファイルを見つけることができます。.

これは、復元されたドキュメントの名前が不明な場合、写真が開かない場合、またはフォーマットされたドライブでフォルダ構造が失われた場合に重要になります。このガイドでは、一般的なファイルの署名、ファイルのヘッダーとフッター、および署名に基づくファイル復元の限界について説明します。確認手順は、Windows 10 および Windows 11 に適用されます。.

目次

ファイルのマジックナンバー、ヘッダー、フッター

シグネチャとは、ファイル内に含まれる識別可能なパターンのことです。ヘッダーとは、ファイルの先頭付近にあるより大きな構造体であり、シグネチャ、バージョン、サイズ、圧縮設定、その他のフィールドが含まれる場合があります。フッターまたはトレーラーとは、フォーマットで定義されている場合、ファイルの末尾付近に情報を提供するものです。.

これらの用語は関連する部品を表していますが、互いに置き換え可能というわけではありません:

用語

その内容

実用的な意味

ファイル名の拡張子

次のような接尾辞、例えば .png または .ジッパー

そのファイルをどのアプリケーションで開くべきかを提案します

ファイルの署名

定義済みまたは特定可能な位置にある識別可能なバイト

候補となるフォーマットの特定に役立ちます

ファイルヘッダー

初期の構造情報

その形式を特定し、その内容を説明できる場合がある

ファイルのフッターまたはトレーラー

終了構造が定義されている場合

終点を特定したり、その妥当性を確認したりするのに役立つ可能性があります

ファイルシステムのメタデータ

NTFS、FAT、またはその他のファイルシステムによって管理されるレコード

名前、ディレクトリ、サイズ、保存場所を記述できる

拡張子を変更しても、そのファイルの元の形式は変換されません。同様に、先頭バイトが認識されたからといって、ファイルの残りの部分が存在していることや、その内容が正しいことが保証されるわけではありません。.

ここでいう「署名」とは、フォーマットを識別するためのパターンを指します。暗号的なデジタル署名を指すものではありません。.

一般的な形式のファイル署名テーブル

以下の値はすべて、ファイル順の16進数バイト値です。オフセットは、対象ファイルの先頭から0を起点として測定されます。.

フォーマット

識別バイト

オフセットと条件

結末または検証の手がかり

PNG

89 50 4E 47 0D 0A 1A 0A

PNGデータストリームのオフセット0

IENDチャンクで終了する;チャンクの長さとCRCを検証する

ジェイペグ

FF D8 画像の開始マーカー。一般的な開始位置には次のようなものがあります。 FF D8 FF E0 そして FF D8 FF E1

オフセット 0;以降のマーカーは異なる

FF D9 これは画像終了マーカーです。画像のデコード処理において、さらに詳細なチェックが行われます。

PDF

25 50 44 46 2D, 、つまり %PDF-

オフセット 0 にある標準のファイルヘッダーの後に、バージョン情報が続き

%%EOF は終了を示すものですが、段階的な更新によって複数回発生する可能性があります

ジップ

50 4B 03 04

ローカルファイルのヘッダー。通常、空でない通常のアーカイブ内ではオフセット 0 にあります。

中央ディレクトリおよび中央ディレクトリ終了レコードを解析する

DOCX、XLSX、PPTX

一般的に 50 4B 03 04

通常の暗号化されていないZIP形式のOfficeパッケージ

パッケージの内容の種類、関係性、および内部構成要素を確認する

WebP

52 49 46 46 (RIFF) および 57 45 42 50 (WEBP)

オフセット 0 に RIFF、オフセット 8 に WEBP、バイト 4~7 にはサイズフィールドが含まれる

汎用的なフッターではなく、RIFFのサイズとチャンク構造を確認してください

Windows PE 実行ファイル

4D 5A (MZ), その後、他の場所では次のように続き、 50 45 00 00

オフセット 0 にある MZ;オフセットにあるフィールド 0x3C PE署名を指し示す

PEヘッダーおよびセクション情報を検証する。MZだけでは不十分である。

これは参照用の一覧であり、完全な復元ルール集ではありません。空のZIPアーカイブは、中央ディレクトリの終了レコードから始まる場合があり、自己解凍型アーカイブには、ZIPレコードの前に実行可能データが含まれている場合があります。.

ZIPの終了レコードは、次のように始まります。 50 4B 05 06, 、ただし、これら4バイトはレコード全体ではなく、必ずしも最後のバイトであるとは限りません。その後にフィールドと、オプションのアーカイブコメントが続きます。別の ZIPヘッダーガイド アーカイブの構造について、さらに詳しく説明しています。.

共有署名とファイルシステム署名

一致する署名は、特定の拡張子ではなく、フォーマットファミリーを特定する場合があります。.

たとえば、DOCX、XLSX、PPTX などは通常、ZIP 形式でパッケージ化されています。スキャナーが 50 4B 03 04 ZIPレコードの可能性が見つかりました。ただし、そのアーカイブがWord文書であるかどうかは、まだ確認されていません。コンテンツタイプや、次のような内部構成要素など、 word/document.xml 一般的なDOCXパッケージについては、追加の証拠を提出してください。.

WebPもその一例です: RIFF これだけでは不十分です。なぜなら、他のフォーマットでもRIFFコンテナが使用されているからです。その WEBP オフセット 8 にある識別子は、識別範囲を絞り込みます。.

体積シグネチャによって、別の物体が特定される

ヘックスエディタには、ファイルシステムに特有のシグネチャも表示されます。下のスクリーンショットにある「NTFS」という文字列は、個々の写真や文書のヘッダーではなく、ボリュームのブートセクタに属するものです。これを見つけたからといって、そのボリュームに保存されているユーザーファイルが特定されるわけではありません。.

体積シグネチャによって、別の物体が特定される

HxDの開発者が公開した、NTFSボリューム識別子を示すスクリーンショット。見やすさを考慮してトリミングし、枠線を引いています。.

署名ベースのファイル復元はどのように機能するのか

署名に基づくファイル復元, 、一般に「ファイルカービング」と呼ばれるこの手法は、読み取り可能な記憶媒体から、サポートされているファイル形式に関連するパターンを検索します。これにより、元のディレクトリレコードに依存することなく、コンテンツを特定することができます。.

彫刻家は通常、いくつかの作業を行う必要があります:

  1. 候補となる開始位置を特定する。. 予想されるシグネチャと、提案されたファイルの先頭に対するその位置を照合する。.
  2. 構造を確認してください。. フィールド、レコードのレイアウト、または書式固有の一貫性ルールを確認し、ありそうもない一致を排除します。.
  3. その程度を把握する。. 内部サイズ、解析済みレコード、終了構造、またはツール固有の終了ルールを指定します。.
  4. 候補者を保存して検証してください。. 別の保存先に書き出して、正しく解釈できるかどうかを確認してください。.

単純なファイルヘッダーに基づく復元ルールでは、ファイルの先頭部分しか認識できない場合があります。より高性能なパーサーであれば、フォーマットを解析してファイルの長さを特定し、有効性を判断することができます。いずれのアプローチも、断片化された保存場所の元のマップを自動的に提供することはありません。.

PhotoRecは、ファイルカーバーの代表的な例として知られています。そのカスタムシグネチャ定義には、拡張子、オフセット、およびバイトパターンが含まれています。このようなルールを追加することで認識精度が向上しますが、それによって完全なパーサーが自動的に追加されたり、断片化の問題が解決されたりすることはありません。.

署名ベースのファイル復元はどのように機能するのか

シグネチャ復元とメタデータ復元の比較

主な違いは、ファイルの位置を特定し、組み立てるために使用される情報にあります。.

メタデータの復元では、残存しているファイルシステムレコードを解析します。NTFSでは、 マスターファイル表 ファイルデータの名前、属性、およびマッピングを格納できます。FAT ベースのボリュームでは、ディレクトリエントリと ファイルアロケーションテーブル その情報のさまざまな部分を提供する。.

回復への懸念

メタデータの復元

署名の復元

主な証拠

ファイルシステムのレコードと割り当て情報

ファイルの内容パターンとフォーマット構造

元の名前とフォルダ

関連する記録が引き続き利用可能な状態であれば、存続する可能性がある

通常、彫刻だけでは得られないもの

ファイルの長さ

明示的に記録される場合がある

推論または解析が必要である

断片化されたファイル

残存するマッピングによって、個別のエクステントを特定できる

再構築は、フォーマットやツールに大きく左右されます

ファイルシステムレコードが見つかりません

再構築を制限できる

見覚えのあるコンテンツが見つかる可能性もあります

上書きされた内容

置換されたバイトを再現できません

置換されたバイトを再現できません

これらのアプローチは互いに補完し合うことができます。復元アプリケーションでは、1回のスキャンで両方の手法による結果を表示できる場合があります。.

“「ディープスキャン」とは、そのツールがシグネチャのみを使用することや、断片化されたファイルをすべて復元できることを保証する、標準化された約束ではありません。その意味はプログラムによって異なります。.

Windows でファイルヘッダーを確認する方法

読み取り可能なファイルについては、Windows PowerShell 5.1 には以下が含まれています。 フォーマット-16進数. 正常なストレージ上のコピーを確認してください。ファイルが完全に消えてしまった場合、このコマンドでは以前のパスからそのファイルを見つけることはできません。.

以下の例のパスを、コピーしたファイルの実際の保存場所に置き換えてください:

  1. Format-Hex -LiteralPath ‘E:\Inspection\「sample.bin」 |
  2. Select-Object -First 4

これにより、ファイルを変更することなく、出力の最初の4行が表示されます。.

出力は次のように読み取ってください:

  • 左の列には16進数のオフセット値が表示されています。.
  • 16進数の2桁の組み合わせは、1バイトを表します。.
  • テキスト領域には印刷可能な文字が表示されます。ドットは印刷不可能なバイトを表す場合があります。.

例えば、こうだ、, 25 50 44 46 2D ~に相当する %PDF-. ファイル名の先頭にこれがあると、拡張子が .bin.

WebPファイルと疑われる場合は、オフセット0のRIFFとオフセット8のWEBPの両方を確認してください。最初の4バイトのみを確認しても、コンテナの種類は特定できません。.

16進エディタを使用すれば、コピーしたファイルの他の箇所や末尾を確認することができます。可能であれば、読み取り専用モードを使用してください。単にテーブルと一致させるためだけに先頭のバイトを上書きしないでください。ヘッダーを編集しても、欠落している内容を補完したり、正しい形式に整えたりすることはできません。.

認識されたファイルが開けないことがある理由

一致の照合は候補を特定するものであり、完全な復元を意味するものではありません。.

断片化により、単純な連続領域の分割が妨げられる

1つのファイルは、隣接していない複数のグループを占有する場合があります。 ストレージクラスタ. 有効なマッピングがない場合、カーバーは最初のフラグメントを復元した後も、無関係なデータへと処理を進めてしまう可能性があります。.

例 動画はある領域から再生が始まりますが、その次のフラグメントは別の場所にあります。冒頭の構造を特定しても、その次のフラグメントがどこから始まるかはわかりません。特定の断片化されたフォーマットを再構築できるツールもありますが、その対応はフォーマットごとに異なります。.

短い一致や埋め込みファイルが余分な検索結果を生み出す

短いバイトシーケンスは、偶然発生したり、別のファイル内に含まれていたりすることがあります。大きな文書に埋め込まれたJPEGサムネイルは実際の画像コンテンツですが、それを復元できたからといって、その文書自体が復元されたということにはなりません。.

これにより、一見重複しているように見える画像や、予想外にファイルサイズが小さいもの、あるいは個別の元のファイルと一致しない結果が生じる理由が説明できます。.

終了マーカーには文脈が必要

ファイルのヘッダーとフッターは、構造的に一貫性のあるオブジェクトに属していなければなりません。最初に目についた終了パターンで処理を停止すると、候補が切り捨てられる可能性があります。逆に、処理をやりすぎると、無関係なデータが追加されてしまう可能性があります。.

PDFの増分更新には、この問題が如実に表れています:以前の %%EOF マーカーは、後に保存されるバージョンにも残ったままになることがあります。一方、PNGでは、単に「IEND」というテキストが任意の場所に現れるだけでなく、IENDで終わる有効なチャンクシーケンスが必要です。“

一部のオリジナルデータは現在利用できません

上書きを行うと、対象となる箇所の以前の内容が消去されます。SSDでは、, トリム また、その後のコントローラの動作によって、削除されたコンテンツが通常の読み取り操作では利用できなくなる場合もあります。.

暗号化によって、新たな境界が生まれます。暗号化されたボリュームの暗号文を解析するスキャナーは、通常、元の平文ファイルのヘッダーを特定することはできません。まず、権限のある者による復号化、あるいはロック解除された状態で閲覧する必要があります。.

回復アプローチの選択と結果の検証

重要なファイルが欠落している場合は、そのデバイスへの書き込みを中止してください。データを保護する前に、そのファイルシステムの再フォーマットや修復を行わないでください。繰り返し接続が切断されたり、読み取りエラーが発生したり、異常な機械音がしたりするドライブについては、繰り返しスキャンを行う前に状態の確認が必要です。.

安定性が高く、読み取りやすいストレージを実現するには、次の順序で設定してください:

  1. バックアップと無傷のコピーを確認してください。.
  2. 残存しているファイルシステムレコードに基づいて、復旧結果を確認する。.
  3. 記録が不十分である場合や、特定のファイルが依然として見つからない場合は、ファイル署名の復元機能を使用してください。.
  4. 復元された候補を別の物理ドライブに保存します。.
  5. 復旧が完了したとみなす前に、内容を検証してください。.

メモリーカードの場合、 フォーマット済みのSDカードのデータ復元ガイド この区別を、実際の回収方法の選択に適用する。.

検証は指定された形式に準拠している必要があります。ドキュメントを開いてページを確認し、画像をフル解像度で表示し、アーカイブの解凍をテストし、動画の再生をいくつかの箇所で確認してください。大容量のファイルの場合、サムネイルや最初のフレームだけでは十分な確認材料とはなりません。.

信頼できる元のファイルが存在する場合、それに対応する暗号ハッシュは、バイト単位での同一性を示すより強力な証拠となります。復元後にのみ計算されたハッシュでは、復元されたファイルが失われた元のファイルと一致していることを証明することはできません。.

よくあるご質問

すべてのファイル形式には固有のマジックナンバーがあるのでしょうか?

いいえ。フォーマットによっては署名が共通しているものもあり、プレーンテキストファイルには信頼できる識別用ヘッダーがない場合もあります。識別には、複数のフィールドや内部構造、あるいは文脈からの手がかりが必要になることがあります。.

復元したZIPファイルの名前をDOCXに変更すれば、文書を復元できますか?

ファイルにすでに有効なWordパッケージが含まれており、拡張子が問題となっている場合に限ります。ファイル名を変更しても、欠落しているZIPレコード、XMLパーツ、またはドキュメントの内容を復元することはできません。.

復旧には、必ずファイルのフッターが必要なのでしょうか?

いいえ。フォーマットによっては、固定のフッターがなくてもパーサーが追跡できる長さや構造を備えているものもあります。また、リカバリの挙動はツールの実装によっても異なります。.

署名の復元によって、写真の日付は保持されますか?

残存しているExif情報などの埋め込みメタデータには、撮影日が記録されている場合があります。これは、元のファイルシステムのタイムスタンプ、ファイル名、またはフォルダ内の保存場所を復元することとは異なります。.

ファイルカービングによって、上書きされたファイルを復元することはできますか?

上書きされてしまったバイトを復元することはできません。残存している断片や別のコピー、あるいはバックアップがあれば役立つ可能性はありますが、シグネチャを認識したとしても、上書きされた状態を元に戻すことはできません。.

プレビューが正常に表示されるということは、ファイル全体が無傷であることを意味するのでしょうか?

いいえ。プレビューでは、ファイルの一部しか表示されない場合や、埋め込まれたサムネイルが表示される場合があります。その候補を別途保存し、実際の内容を確認してから、それを信頼するようにしてください。.

Jasonは、15年以上の実務経験を持つデータ復旧およびテクニカルサポートの専門家です。 彼は第一線のユーザーと幅広く連携し、困難なデータ損失事例のトラブルシューティングを行うとともに、誤削除、ドライブのフォーマット、ファイルシステムの破損、パーティションの消失、システム障害、その他の緊急の復旧事態に対して、実用的な復旧ソリューションを提供してきました。また、バックアップと復元、ファイル修復、災害復旧にも精通しており、安全かつ信頼性が高く、技術的に正確な指導を特に重視しています。.