AI 요약
데이터플로우 모델 논문은 발표 11년 후 VLDB Test of Time Award를 수상하며 자신들의 연구 성과를 재평가했다. 저자들은 이벤트 타임(event time)의 우선성, 완전성 대기의 무용함, 강한 일관성 유지 등 핵심 기반은 견고했다고 평가했지만, 윈도우잉과 트리거에 대한 과도한 강조, 스트림 중심 세계관의 한계 등 분석 인터페이스 설계에서 중요한 실수를 인정했다. 궁극적으로 스트림과 테이블은 동일 객체의 두 표현이며, SQL·증분 뷰 유지·명시적 신선도 계약을 가진 구체화된 뷰가 더 나은 방향이었음을 시인했다. 또한 워터마크와 스냅샷 일관성 새로고침으로 분화된 완전성 원칙, 배치 대 스트리밍 논쟁의 의미론적 본질 등을 탐구했다.
핵심 포인트
- 11년 전 발표된 데이터플로우 모델 논문이 VLDB Test of Time Award 수상
- 이벤트 타임, 완전성 대기의 무용함, 강한 일관성 등 핵심 기반은 유효하다고 평가
- 윈도우잉·트리거의 과도한 강조와 스트림 중심 세계관의 한계를 인정
- SQL, 증분 뷰 유지, 구체화된 뷰가 궁극적 해법이었다고 결론
- 워터마크(스트림 유지)와 스냅샷 일관성 새로고침(비가시적)으로 완전성 원칙이 분화
향후 전망
- 분석 영역을 넘어 스트리밍 기술 자체가 점차 사라질 가능성 제기
- 데이터베이스 커뮤니티가 시작했지만 완성하지 못한 "분석 스트리밍의 복잡성 제거"가 핵심 과제로 부상