장애가 났을 때 필요한 것은 대개 마지막 몇 분의 로그입니다. 파일 전체를 훑는 대신 필요한 구간의 시작 위치를 먼저 찾도록 Sift를 고쳤습니다. 코드가 대부분인 메모입니다.

쓰는 모습#

--since는 상대 시간과 절대 시각을 모두 받습니다. --until을 생략하면 파일 끝까지 읽습니다.

Shell
sift app.log --since 10m --grep "timeout"sift app.log --since 2026-11-02T09:00:00 --until 2026-11-02T09:15:00sift /var/log/service/*.log --since 1h --grep "connection reset by peer" --context 3 --format json
TEXT실행 결과
app.log  09:14:02.118  WARN  upstream timeout after 3000ms (attempt 2/3)app.log  09:14:05.131  ERROR upstream timeout after 3000ms (attempt 3/3), giving up2 lines matched in 38ms (scanned 1,204 of 4,812,330 lines)

옵션 선언#

상대 시간과 절대 시각을 하나의 타입으로 받고, 해석은 실행 시점에 한 번만 합니다.

src/cli.rs
use clap::Parser;use std::path::PathBuf;​#[derive(Parser, Debug)]#[command(name = "sift", version, about = "시간 범위와 키워드로 로그를 걸러 냅니다")]pub struct Args {    pub files: Vec<PathBuf>,​    /// 10m, 2h 같은 상대 시간 또는 RFC 3339 시각    #[arg(long, value_parser = parse_instant)]    pub since: Option<Instant>,​    #[arg(long, value_parser = parse_instant)]    pub until: Option<Instant>,​    #[arg(long, short = 'g')]    pub grep: Option<String>,​    #[arg(long, default_value_t = 0)]    pub context: usize,}​#[derive(Clone, Debug)]pub enum Instant {    Relative(std::time::Duration),    Absolute(chrono::NaiveDateTime),}

시작 위치를 이분 탐색으로 찾기#

로그는 시간순으로 쌓이므로 파일의 가운데로 건너뛴 뒤, 다음 줄바꿈까지 밀어서 온전한 한 줄의 시각을 읽으면 됩니다. 시각이 없는 줄(스택 트레이스의 이어지는 줄)은 건너뜁니다.

src/seek.rs
use std::fs::File;use std::io::{self, BufRead, BufReader, Seek, SeekFrom};​/// `target` 이상인 첫 줄의 바이트 위치를 돌려준다.pub fn seek_to(file: &mut File, target: Timestamp, format: &Format) -> io::Result<u64> {    let mut low = 0u64;    let mut high = file.metadata()?.len();​    while high - low > BLOCK {        let middle = low + (high - low) / 2;        let mut reader = BufReader::new(&mut *file);        reader.seek(SeekFrom::Start(middle))?;​        let mut skipped = String::new();        let offset = middle + reader.read_line(&mut skipped)? as u64;1​
  1. 1
    가운데 지점은 줄 중간일 수 있으므로 다음 줄 시작까지 밀어 둡니다.15행

바뀐 것#

src/main.rs
 let mut file = File::open(&path)?;-let reader = BufReader::new(file);+let start = match args.since {+    Some(since) => seek::seek_to(&mut file, since.resolve(now), &format)?,+    None => 0,+};+file.seek(SeekFrom::Start(start))?;+let reader = BufReader::new(file);

4.8백만 줄 파일에서 마지막 십 분을 읽는 시간이 2.1초에서 38밀리초로 줄었습니다. 읽은 줄 수를 결과 끝에 함께 적어, 건너뛴 구간이 있다는 사실이 보이도록 했습니다.

s
이 글과 이어지는 소프트웨어

Sift — 로그 필터링 도구