AI Governance untuk Agency dan Client: Siapa Pemilik Evidence dan Measurement

Agency selesai kontrak.

Client meminta semua data AI visibility.

Agency mengirim PDF report.

Client bertanya:

“Raw query-nya mana?”

Agency bilang itu methodology internal.

Client bertanya:

“Screenshot evidence?”

Agency bilang tersimpan di workspace agency.

“Correction log?”

Ada di Notion yang tidak ikut handover.

“Measurement history?”

Tidak diekspor.

Seketika project enam bulan berubah menjadi dua puluh halaman PDF yang tidak bisa direplikasi.

Ini bukan masalah teknis.

Ini governance failure.

Dalam kerja AI Search, GEO, AI optimization, atau AI visibility monitoring, agency dan client harus menentukan sejak awal siapa pemilik evidence, siapa pemilik methodology, siapa boleh mengubah measurement, dan apa yang wajib diserahkan ketika kerja sama selesai.

Kalau tidak, dependency muncul diam-diam.

Client merasa membeli capability.

Ternyata yang dimiliki hanya summary.

Mulai dari membedakan empat aset

Pertama, client data.

Informasi yang berasal dari client.

Website.

Product data.

Internal facts.

CRM extract.

Pricing.

Policy.

Business information.

Pada umumnya governance atas data tersebut harus mengikuti hak dan kontrak client.

Kedua, observed evidence.

Screenshot.

AI answer capture.

Citation.

Query result.

Timestamp.

Error log.

Source map.

Ini biasanya dihasilkan dalam project client.

Ownership perlu ditetapkan secara eksplisit dalam contract.

Ketiga, methodology.

Scoring rubric.

Query framework.

Taxonomy.

Software workflow.

Template.

Agency mungkin memiliki intellectual property atas framework generik.

Tetapi client tetap perlu cukup detail untuk memahami bagaimana angka mereka dihitung.

Keempat, derived insight.

Analisis.

Recommendation.

Prioritization.

Strategy.

Ini hasil professional service.

Hak penggunaan dan ownership mengikuti contract.

Kalau empat kategori dicampur, konflik hampir pasti.

Evidence bukan milik orang yang kebetulan mengambil screenshot

Agency bisa menjadi processor atau collector.

Tidak berarti evidence tentang client otomatis menjadi private asset agency.

Misalnya agency menguji:

“konsultan pajak jakarta”

dan menemukan client muncul di ChatGPT dengan citation tertentu.

Screenshot tersebut dibuat menggunakan resource agency.

Tetapi evidence-nya merepresentasikan observation project.

Client perlu akses.

Paling tidak:

Query.

Platform.

Date.

Answer.

Source.

Condition.

Classification.

Kalau agency hanya memberi score tanpa raw evidence, client tidak bisa audit.

Itu berbahaya.

Measurement score harus traceable.

Agency boleh punya proprietary framework.

Tetapi angka client harus tetap explainable.

Methodology IP bukan alasan membuat measurement black box

Agency mungkin memiliki formula internal:

Visibility score.

Trust index.

Entity score.

Citation quality score.

Tidak masalah.

Yang harus dilarang adalah:

“Score Anda 78. Formula rahasia.”

Client kemudian membuat keputusan budget berdasarkan angka 78 tanpa tahu unitnya.

Professional standard yang lebih sehat:

Agency menjelaskan:

Metric components.

Definition.

Denominator.

Weighting principle.

Sample.

Limitations.

Version.

Agency tidak harus memberikan seluruh source code.

Tetapi client harus mampu memahami meaning.

Kalau tidak, score lebih mirip oracle daripada measurement.

Query panel sebaiknya client-owned atau jointly governed

Query adalah salah satu aset paling strategis.

Ia merepresentasikan buyer questions.

Problem.

Category.

Comparison.

Brand.

Price.

Trust.

Jika agency menentukan query sepenuhnya, bias bisa masuk.

Agency mungkin memilih query yang mudah dimenangkan.

Client mungkin memilih query terlalu branded.

Solusinya joint governance.

Client memberi business relevance.

Agency memberi search/AI methodology.

Bersama menentukan core panel.

Core panel dibekukan.

Experimental query boleh berubah.

Retirement dicatat.

Handover menyertakan query history.

Dengan cara ini, agency berikutnya bisa melanjutkan trend.

Tidak harus mulai nol.

Evidence ledger wajib portable

Minimum field:

Evidence ID.

Query.

Platform.

Date/time.

Locale.

Session condition.

Observed answer.

Citation/source.

Brand mention.

Classification.

Severity.

Reviewer.

Screenshot/file path.

Correction link.

Retest result.

Tidak perlu format rumit.

CSV cukup.

TXT.

Database export.

Yang penting portable.

Jangan membuat evidence hanya bisa dibaca tool proprietary yang mati ketika subscription berakhir.

Client harus punya export right.

Measurement governance juga harus punya version

Agency mengubah methodology.

Client harus tahu.

Contoh:

v1:
mention dihitung per answer.

v2:
mention dihitung per query.

Score berubah.

Kalau report tidak memberi version, client mengira performance berubah.

Agency responsibility:

Document methodology change.

Explain impact.

Keep old data.

Avoid retroactive rewrite kecuali clearly restated.

Client responsibility:

Approve material methodology changes jika score dipakai untuk KPI.

Governance berarti kedua pihak tidak boleh mengubah rule setelah melihat result tanpa mencatat.

Siapa owner correction log?

Idealnya client.

Karena correction menyangkut factual truth organisasi.

Agency bisa operate log.

Client harus memiliki record.

Contoh:

AI salah menyebut CEO.

Agency detect.

Client corporate secretary verifies.

Website updated.

PR contacts media.

Agency retests.

Semua step masuk correction log.

Kalau agency pergi, client tetap punya history.

Correction history adalah institutional memory client.

Bukan agency collateral.

Agency tidak boleh menentukan truth sendirian

Ini boundary penting.

Agency menemukan alamat berbeda.

Jangan langsung edit website.

Verifikasi ke client owner.

Agency menemukan product capability di competitor comparison.

Jangan membuat claim baru tanpa product approval.

Agency menemukan AI mengatakan brand punya ISO tertentu.

Jangan publish correction bahwa brand punya ISO kalau tidak ada evidence internal.

Agency adalah observer dan executor.

Source of truth tetap domain owner client.

Contract harus menulis approval matrix.

Evidence yang berasal dari public web tetap perlu provenance

Walaupun public, capture context.

Article date.

Source URL.

Publisher.

Claim.

Access date.

Screenshot jika material.

Agency jangan copy artikel pihak ketiga ke report tanpa source.

Client perlu tahu origin.

Public tidak berarti source irrelevant.

External source bisa berubah.

Handover harus menyimpan enough context.

Siapa pemilik dashboard?

Client sebaiknya punya access atau export.

Agency boleh menggunakan internal dashboard untuk operation.

Tetapi KPI yang menjadi dasar monthly report harus dapat diekspor.

Kalau client berhenti berlangganan agency, historical measurement tidak boleh hilang.

Bayangkan finance data hilang karena consultant contract berakhir.

Tidak acceptable.

AI measurement juga menjadi business record.

Retention policy perlu disepakati.

Raw evidence berapa lama disimpan?

Screenshot?

Chat transcript?

Public source capture?

Client data?

Personal data?

Jangan simpan selamanya default.

Tentukan:

Retention.

Deletion.

Archive.

Legal hold.

Privacy.

Security.

Agency tidak boleh menyimpan sensitive client data setelah contract jika tidak punya basis.

Client juga tidak perlu menerima semua prompt experimentation yang tidak relevan.

Risk-based retention.

Agency methodology bisa tetap milik agency

Governance bukan berarti client harus memiliki semua IP agency.

Agency boleh punya:

Framework generik.

Software.

Templates.

Taxonomy library.

Automation code.

Benchmark methodology.

Training material.

Tetapi project-specific data harus dipisah.

Contoh:

Agency punya “AI Visibility Framework v4”.

Client memiliki:

Query panel mereka.

Raw results.

Score history.

Correction history.

Source map.

Client-specific configuration.

Final reports.

Contract bisa memberi agency hak menggunakan aggregate/anonymized learning sesuai izin.

Jangan assume.

Write it.

Benchmark lintas client butuh privacy

Agency suka bilang:

“Anda top 10 persen dibanding client kami.”

Apa basis?

Apakah client lain setuju datanya digunakan?

Apakah anonymized?

Apakah category comparable?

Sample berapa?

Period?

Jangan membuat benchmark marketing dari confidential data.

Governance harus menentukan allowed aggregation.

Minimum cohort.

De-identification.

No competitor disclosure.

Period.

Method.

Client harus tahu benchmark limitation.

Conflict of interest harus dibuka

Agency bisa sekaligus menangani dua competitor.

Boleh tergantung contract.

Tetapi evidence dan strategy harus terisolasi.

Jangan memakai confidential query panel Client A untuk Client B.

Jangan memindahkan unpublished research.

Jangan copy internal correction.

Access control.

Separate workspace.

Team conflict policy.

AI tools menambah risk karena prompt history atau shared knowledge base bisa bocor.

Agency governance harus meliputi data isolation.

Measurement reviewer sebaiknya tidak sepenuhnya sales-driven

Kalau account manager yang harus renew contract menentukan classification “success”, bias tinggi.

Pisahkan setidaknya rubric.

Analyst score berdasarkan rule.

Account team menjelaskan result.

Client punya sample audit.

Untuk high-value project, client bisa melakukan independent review sebagian evidence.

Tidak perlu semua.

10 persen sample cukup untuk melihat apakah classification consistent.

Client juga punya responsibility

Governance bukan semua beban agency.

Client harus:

Memberi current source of truth.

Menunjuk owner.

Approve factual claim.

Memberi feedback tepat waktu.

Memberi akses yang memang dibutuhkan.

Tidak meminta manipulation.

Tidak menekan agency menghapus limitation.

Menjaga credential.

Menentukan business priority.

Kalau client memberi data stale, agency tidak bisa menjamin output correct.

Shared responsibility harus visible.

SLA correction perlu dibagi

Agency detect high-risk error.

Berapa lama client verify?

Siapa update?

Siapa external outreach?

Siapa retest?

Contoh:

Detection: agency.

Verification: client within internal SLA.

Owned source correction: client or agency with approval.

External source correction: PR/client.

Retest: agency.

Closure: joint.

Tanpa flow, ticket stuck.

Agency menunggu.

Client mengira agency memperbaiki.

AI tetap salah.

Handover checklist harus wajib

Saat contract selesai:

Core query panel.

Experimental query history.

Raw evidence ledger.

Methodology version.

Metric dictionary.

Correction log.

Open issues.

Source map.

Current baseline.

Last report.

Dashboard export.

File index.

Client-specific prompt/config if contract includes.

Access revoke.

Data deletion confirmation.

Outstanding limitation.

Dengan handover ini, client bisa pindah vendor tanpa kehilangan memory.

Agency juga terlindungi karena scope sudah jelas.

Siapa pemilik evidence dan measurement?

Jawaban paling sehat:

Client harus memiliki atau setidaknya memiliki hak penuh atas project-specific evidence dan historical measurement yang dibeli dalam engagement.

Agency dapat mempertahankan IP pada framework, software, dan methodology generik sesuai contract.

Tetapi methodology yang dipakai menghitung KPI client harus cukup transparan agar angka dapat dipahami dan diaudit.

Truth owner tetap di client.

Observer bisa agency.

Measurement operator bisa agency.

Evidence custodian bisa shared.

Final rule harus tertulis.

Bukan dibahas ketika contract mau berakhir.

AI governance agency-client sebenarnya mirip tata kelola data profesional lainnya.

Ownership.

Access.

Method.

Audit.

Retention.

Security.

Handover.

Conflict.

Correction.

Kalau semua disepakati di awal, agency bisa fokus pada value.

Client bisa percaya measurement tanpa harus memiliki semua source code.

Dan ketika enam bulan kemudian seseorang bertanya:

“Kenapa visibility score bulan Maret turun?”

jawabannya tidak hilang bersama akun Notion mantan agency.

Evidence masih ada.

Method masih diketahui.

Version masih bisa dilacak.

Itulah governance yang membuat AI optimization menjadi capability organisasi, bukan dependency permanen pada vendor.