Query Variation | GEO Experiments System

Experiment: Query Variation

Query Variation Experiment menguji bagaimana perubahan struktur, wording, urutan kata, dan framing query mempengaruhi retrieval outcome, ranking, serta konsistensi jawaban AI.

Experiments | Retrieval Patterns Metric

Hypothesis

Semakin besar variasi struktur query dengan makna yang sama, semakin tinggi variasi output AI, menunjukkan sensitivitas sistem terhadap framing linguistik.

Semantic Consistency Framework

Framing Sensitivity Analysis

Mengukur seberapa besar perubahan jawaban ketika intent sama tetapi struktur kalimat berbeda.

Retrieval Friction Framework

Lexical vs Semantic Drift

Menganalisis apakah perubahan kata (lexical) atau perubahan makna (semantic) lebih berpengaruh terhadap perubahan output model.

AI Ground Truth Framework

Entity Preservation Under Variation

Menguji apakah entity tetap dikenali secara konsisten meskipun query mengalami perubahan struktur signifikan.

Entity Signal Framework | Entity Consistency Metric

Cross Model Query Robustness

Perbandingan ketahanan masing-masing model AI terhadap variasi query dengan makna yang sama.