數據治理

AI 時代的分析工程師:角色重塑

分析工程師這個崗位為打通資料工程與 BI 而生;對話式 AI 正在拆掉這座橋,並圍繞另一項資產——語義層——和另一門手藝——讓機器生成的答案值得信任——把它重建。

關鍵資料: dbt Labs《State of Analytics Engineering》年度調查(2024)顯示,約半數分析工程師將大量時間花在臨時請求與需求方支援上——這正是對話式 AI 最先吸收的工作;Gartner(2024)估計到 2027 年,自然語言介面將處理大部分常規自助查詢;IDC(2024)估計資料專業人員 30–50% 的時間耗在維護而非新能力上;LinkedIn(2024)職位資料顯示「分析工程師」自 2021 年以來持續增長,語義層與 LLM 評測技能開始出現在任職要求中。

分析工程師作為一個明確崗位,歷史大約七年。它的誕生對應一個具體痛點:資料工程師建管道,產出的是沒人能用的表;BI 分析師做看板,隨手就把模型改壞;中間那一層——建模、測試、文件化、版本化管控轉換邏輯——不屬於任何人。dbt 這類工具給了這個崗位武器,到 2024 年,它已是資料組織裡增長最快的頭銜之一(LinkedIn,2024)。這個崗位的核心承諾是槓桿效應:模型建一次,下游自助服務自然發生。

但這個承諾只兌現了一半。自助服務確實發生了,臨時需求佇列卻從未縮短,只是換了地方。業務方仍需要有人幫忙寫「再補一個查詢」、對齊「再核一個指標」、解釋看板為什麼和財務報表對不上。瓶頸從來不是 SQL 產能,而是「人的問題」與「受治理的資料」之間的介面——而這正是對話式 AI 分析要替代的東西。所以這個崗位正在被重新設計,而不是被取消。

對話式 AI 分析到底改變了什麼

對話式分析——在 Teams、企業微信、飛書或 Slack 裡用自然語言提問,拿回帶治理、帶出處的答案——把分析工程師的日常工作重排成三個行為迥異的桶:

任務類別AI 之前的時間佔比(典型)AI 帶來的變化對角色的含義
SQL 救火(一次性查詢、取數、「給個數」)30–50%大部分被對話層吸收大幅收縮;不要讓自己變成救火的監督員
看板搭建與維護20–30%部分被吸收;自然語言答案替代扁平報表檢視下降;看板工作聚焦真正需要視覺化的決策
建模、語義定義、質量與測試20–30%被放大——AI 答案的質量上限就是這一層的質量增長,併成為角色的重心
解答「這個指標怎麼算的」10–15%被暴露給 AI 的文件吸收轉型為維護機器可讀的定義

規律是一致的:從受治理的模型到人的提問之間的所有環節——SQL、圖表、透視表——正在被自動化,而受治理模型之下的所有環節變得更值錢,因為它現在每週要服務成千上萬次機器中介的提問,而不是幾個分析師。過去誤導一個看板讀者的錯誤,現在會誤導全公司每個聊天參與者。精確性變成了承重牆。

「SQL 救火減少」的一個提醒

團隊不應在慶祝工單消失時忘記接盤者。沒被吸收的邊緣案例——橫跨三個系統的查詢、沒人定義過的對賬——依然會出現,只是現在以「AI 答錯了」的形式上報,而不是「請幫我寫這個查詢」。這對分析工程師是升格而非降格:您被要求去修模型和定義,而不是當查詢打字員。把這些上報當成模型缺陷來處理(診斷、在語義層修復、補一條評測用例)的團隊會持續複利;悄悄手寫答案的團隊,等於用更差的埋點重建了一條工單佇列。

四項新的核心職責

一、語義層的所有權

語義層——業務術語(營收、活躍客戶、流失率、GMV)與物理資料之間的受治理對映——從「錦上添花的文件」升級為「第一產品」。在 AI 中介的分析棧裡,語義層是模型查詢的物件而非原始表,也是防止 LLM 自由發揮定義的關鍵。所有權具體意味著:指標只定義一次,邏輯和粒度無歧義;編碼同義詞與消歧規則(哪個「營收」?下單、開票還是確認?);以機器可讀形式記錄邊界情況;並裁決「活躍使用者」定義之爭這種遲早會來的政治問題。部署對話式 BI 的公司——包括以 MCP 架構在 IM 渠道對受治理模型作答的 Beehive Strategy 這類平臺——普遍發現答案質量有七到八成取決於這一層,而不是 LLM。

二、評測工程

人寫查詢時,正確性逐條評審。LLM 寫查詢時,正確性必須按總體度量。由此誕生了一門兩年前幾乎不存在的手藝:建立並維護一套有標準答案的代表性業務問題評測集;對每一次語義層變更和每一次模型升級跑回歸測試;跟蹤答案準確率、拒答質量(該說「我不知道」時它說不說?)與幻覺率;並把評測分數下滑當作生產事故來對待。行業實踐仍在成型,但新出現的標準是:50–300 道來自真實需求方的「黃金問題」,按季重新整理,每次釋出自動跑一遍。這是把軟體工程紀律應用到語言上——也是這個崗位最新穎、最稀缺的技能。

三、嵌入式治理

對話式介面改變了治理的暴露面。當三千名員工都能用手機向資料提問,許可權模型、PII 範圍與行級訪問就必須在檢索和查詢路徑內強制執行,而不是依賴 BI 工具的介面。分析工程師要成為那個人:實現許可權感知的查詢路由,定義哪些指標可以在哪些邊界內聚合,並審計「誰向哪些資料問了什麼問題」——這份日誌第一次讓公司擁有了自身資料需求的完整記錄,而它本身就是下一批該建模內容的路線圖。

四、歧義翻譯

這是被低估的技能。需求方不會提結構良好的問題;他們問「為什麼銷售下滑了」——這句話至少有五種都站得住腳的拆法。分析工程師的工作從「回答問題」轉向「讓系統提出更好的澄清問題」:把最常見的三種解讀編入語義層,設計追問策略,透過產品本身教會業務方哪些資料有定義、哪些沒有。這是分類學、產品管理與同理心熔於一爐的職能。

一個例項:切換前後的那一週

抽象的角色討論需要一個具體的日曆。以一家 60 人規模的零售集團為例,資料團隊有兩名分析工程師,對照在 IM 渠道部署對話式分析前後的一週。

之前: 週一處理積壓——23 張工單,其中 14 張是「拉一下各門店各品類上週銷量」。週二,其中兩張演變成對賬爭議,因為分析師的取數和看板對退貨的處理不一致。週三,某個上游表結構變更無人通知,全天在修看板。週四,CFO 辦公室要一個品類的毛利橋,而毛利邏輯從未建模,只能在表格裡手工拼裝。週五,兩位工程師終於碰了建模積壓——釋出了一個帶測試的模型。全周約 65% 的工時消耗在需求響應上;dbt Labs(2024)的調查顯示,這一畫像接近行業常態。

之後: 週一那 14 張門店品類取數工單根本不會出現——它們已在聊天中對受治理模型直接作答,工單日誌裡可查。週二的爭議依然存在,但變成了一條有據可查的定義缺陷:評測用例補上,「退貨」獲得唯一定義並記錄邊界情況,這類爭議被永久終結,而不是本週終結。週三的結構變更被 CI 測試在答案出錯之前攔截。週四的毛利橋變成與財務認真討論如何建模毛利的契機——因為快答案已經免費,手工拼數的動機隨之消失。週五照常釋出一個帶測試的模型,外加兩條新評測用例。花在響應需求上的工時降到兩成至兩成五,花在定義、測試和語義層上的工時翻倍。

這套算術成立的前提是:團隊把每一次上報的答案當作需要根除的缺陷。在 AI 層之上繼續手工「打補丁」的團隊,會同時收穫兩樣最糟的東西:原來的工單佇列,外加一條新的答案質量投訴佇列。

崗位放在哪裡,團隊長什麼樣

角色重塑也是組織設計問題。分析工程師通常彙報給資料分析職能,但 AI 時代的版本需要更強的橫向連線:對財務(指標定義)、對安全與合規(查詢路徑治理)、對內部平臺團隊(部署與可觀測性)。中型企業部署中觀察到的健康配比:每覆蓋 1.5–2.5 個業務域的語義層配一名分析工程師;對話式分析上線後,每 300–600 名活躍提問使用者配一名。低於這個配比,團隊最先放棄的 ritual 一定是評測閉環——它最容易跳過,停掉的代價也最貴。

有兩個結構性選擇比頭銜更重要。第一,語義層是「有名有姓的負責人共同產品」還是「人人可改的公地」——公地模式不出兩個季度必然產生定義漂移。第二,上報案例是進入分析工程師名下的佇列,還是誰有空誰處理;前者積累組織記憶,後者培養救火英雄。不動這兩個結構就去重塑崗位的公司,通常會發現重塑沒有落地。

重新畫好的招聘畫像

2026 年還按老一套招人的公司會招錯人。舊技能棧——SQL 熟練、dbt、一家雲數倉、一款視覺化工具——如今是 AI 隨叫隨到的入場券,面試篩它,篩出來的是貶值最快的技能。真正該看的畫像:

能力項面試中怎麼探強訊號
語義建模「給一個年費制訂閱業務定義『流失』」追問粒度、邊界情況、誰在消費這個定義
評測與測試思維「您怎麼知道 AI 給的營收答案是錯的?」提出黃金問題集、迴歸套件、驗收標準
資料治理「這五個問題裡哪些系統應當拒答?」從許可權邊界和聚合策略思考,而非只看對錯
需求方翻譯「CFO 說看板是錯的,講講您第一個小時做什麼」先查定義和血緣,而不是直接看 SQL
工程習慣評審候選人的模型倉庫測試、文件、命名、CI——讓 AI 時代的變更變安全的習慣

一個實用的篩選直覺:聊起「如何永久終結一場指標之爭」會眼睛發亮的候選人,才是 AI 時代需要的;聊起「一條聰明的查詢」會眼睛發亮的候選人仍有價值,但他們在為這份工作正在萎縮的一半做最佳化。頭銜五花八門——分析工程師、語義層工程師、指標平臺工程師——但實質正在全行業收斂。

職業路徑:這個崗位往哪裡走

晉升階梯正在實時重建,但輪廓已可辨認。高階層(入行該角色約 1–3 年):負責一到兩個業務域的語義層,執行評測週期,閉環處理上報案例。Lead / Staff 層:跨域負責指標平臺,制定評測與治理標準,有權威地裁決定義之爭,並與 CDO 一起解讀需求訊號(問題日誌)以決定公司下一步建模什麼。再往上,兩條都成立的分叉:平臺方向——指標平臺、資料契約、AI 可觀測性工具,可以說是當今資料領域最有未來的基礎設施賽道;業務方向——對營收、成本或風險指標的深度定義權,會自然轉化為財務或產品分析方向的領導崗位。薪酬資料尚不充分,但 dbt 社群活動(2024–2025)的非正式訪談顯示,有生產級 LLM 評測經驗的工程師存在明顯溢價——這個技能的供給遠低於需求。

對從業者本人,實用建議很直白:在 AI 偽造不了的那一層做到頂尖。LLM 會寫查詢,但它無法以組織認可的正當性決定「活躍客戶」的定義,無法為一個數字的可信度背書,更不會在董事會看到錯誤數字時承擔責任。這份問責才是這個職業耐久的核心,而迄今每一波自動化都在讓它進一步集中。

常見質疑,正面回答

圍繞這次角色重塑,幾乎所有團隊討論都會冒出三個質疑,每個都值得直答。

「業務方不會像信任看板那樣信任聊天答案。」 現在不該信任。信任的積累機制與看板相同:時間上的一致性,加上可見的出處。區別在於,聊天答案可以在每一條回覆裡附上指標定義與來源系統的引用——這是看板從未做到的。只要錯誤答案被公開修復,已部署對話式 BI 的採納率通常從第一週的懷疑,爬升到第三個月覆蓋大多數常規提問。

「AI 都寫 SQL 了,初級分析師怎麼成長?」 學徒制變了,階梯沒變。過去初級靠寫查詢瞭解業務;未來他們靠覆盤評測失敗案例、追溯錯誤答案到定義缺口、認領語義層的小塊業務域來了解業務。可以說,這比替需求方把口頭需求轉錄成 SQL 兩年,更快通向判斷力。企業必須做的是有意識地設計這條學徒路徑——它不再會自然發生。

「我們已有帶自助分析的 BI 工具,為什麼還要對話層?」 自助看板仍然要求有人預判問題、預先搭好檢視。對話式分析覆蓋的是長尾——沒人預料到、只問一次、發生在工作渠道里的問題。兩者是互補關係:看板服務重複出現的視覺化決策,對話覆蓋其餘一切。分析工程師的技術棧應同時包含兩者,語義層墊在底下。

團隊未來六個月該做什麼

  • 盤點問題佇列。 把最近 500 條臨時需求分類。通常 60–70% 可以透過自然語言從建模良好的語義層直接作答——這就是您的對話式 BI 立項依據,而且是用您自己的工單資料算出來的。
  • 把語義層當產品經營。 指定負責人、定義路線圖、釋出變更日誌。定義若存在三個人腦子裡,AI 就會收穫三個互相矛盾的答案。
  • 搭一個最小評測閉環。 從真實需求方收集 50 道黃金問題,按月評審。沒有這個就不要規模化上線對話式分析;也別讓供應商勸您放棄這一步。
  • 重新設計上報路徑。 「AI 答錯了」就是缺陷報告。分診、修定義、把案例補進評測集。公開發布修復——看得見的模型守護,是建立業務方對 AI 答案信任的關鍵。
  • 用有邊界的範圍做試點。 一個渠道(Teams 或企業微信)、一個業務域、兩週、固定價格——Beehive Strategy 兩週付費試點(HKD 25k)正是這個模式——先度量答案採納率與上報數,再考慮擴大。
  • 讓看板工程師轉型。 工作最容易被自動化的分析師,應當現在就轉向語義建模與評測,而不是等變化被迫發生。技能是相鄰的,變數只是時機。

這個崗位沒有萎縮,它在向棧的深處移動——從寫查詢,轉向治理企業數字的含義。先完成這次移動的分析工程師,會發現自己站上了現代資料組織裡最守得住的位置。

常見問題

不會,它正在被重新設計。對話式 AI 吸收了 SQL 工單和常規看板需求,但讓語義層、評測工程和資料治理更有價值——因為 AI 答案的可信度取決於底層的模型與定義。多數團隊的體會是:角色重心從寫查詢轉向治理指標含義與答案質量。
語義層所有權(指標定義、粒度、消歧)、評測工程(黃金問題集、AI 答案迴歸測試)、嵌入式資料治理(許可權感知查詢路由、聚合策略)以及需求方歧義翻譯。SQL 與 dbt 仍是入場券,但面試應考察建模判斷力與評測紀律,而不是寫查詢的速度。
指系統化度量 AI 答案質量的實踐:維護 50–300 道有標準答案的真實業務問題,作為迴歸測試在每次語義層或模型變更時自動執行,並跟蹤準確率、拒答質量與幻覺率。評測分數下滑應按生產事故的級別來處置。
大部分常規需求——一次性查詢、取數、「給個數」——由對話層對受治理模型直接作答,工單佇列明顯收縮。仍需升級的請求會以「AI 答錯了」的缺陷報告形式到達,團隊應在語義層修復並把案例補入評測集,而不是重建一條手工查詢佇列。
預約個人化示範

準備好讓數據變得可審計了嗎?

了解 Beehive Strategy 的對話式治理平台,如何把目錄與血緣變成你的團隊能用自然語言查詢的答案。

預約示範 探索解決方案
30%
審計準備更快
25%
事件成本更低
40%
修復時間更短
2 週
上線一個目錄