指南:解題式與啟發(fā)式,如何劃清人與工具的邊界)
跟大語(yǔ)言模型打了一年多交道我越來(lái)越覺(jué)得“怎么提問(wèn)”這件事本質(zhì)上是一場(chǎng)關(guān)于邊界的劃分。同樣面對(duì)一個(gè)LLM有人把它當(dāng)成二十四小時(shí)在線的執(zhí)行器有人把它當(dāng)成幫自己整理思路的思考搭子。這就是標(biāo)題里說(shuō)的兩種思路一種在調(diào)用工具的價(jià)值另一種在守護(hù)人的價(jià)值。今天這篇內(nèi)容是我把自己踩過(guò)的坑、換過(guò)的問(wèn)法、用過(guò)的模板整理出來(lái)聊聊這兩種思路到底差在哪、各自該怎么用。從一個(gè)最簡(jiǎn)單的提問(wèn)開(kāi)始你會(huì)慢慢看清那條水位線。1. 兩種提問(wèn)思路的分岔口1.1 解題式提問(wèn)把LLM當(dāng)成能干的下屬我先說(shuō)第一種思路。你可以把它叫“解題式提問(wèn)”也可以叫“執(zhí)行式提問(wèn)”。它的典型句式是幫我做某事、給我某樣?xùn)|西、按照這個(gè)要求完成某個(gè)任務(wù)。重點(diǎn)是把需求描述清楚然后讓LLM盡量準(zhǔn)確地交出結(jié)果。舉個(gè)例子我想讓它寫(xiě)一段產(chǎn)品介紹我不會(huì)問(wèn)“你怎么看我們的產(chǎn)品”而是直接說(shuō)“根據(jù)以下產(chǎn)品信息寫(xiě)一段面向新用戶的推廣文案要求不超過(guò)200字第一句要有吸引力結(jié)尾帶一句行動(dòng)號(hào)召”。這時(shí)候我認(rèn)的是工具價(jià)值它快、它穩(wěn)、它不會(huì)抱怨能幫我把原本需要半小時(shí)的機(jī)械勞動(dòng)壓縮到幾分鐘。工具價(jià)值不是貶義詞。恰恰相反在大量重復(fù)、低風(fēng)險(xiǎn)、有標(biāo)準(zhǔn)答案的環(huán)節(jié)里把LLM當(dāng)工具是最有效率的選擇。我見(jiàn)過(guò)一些新人上來(lái)就要跟LLM聊人生聊理想結(jié)果連最簡(jiǎn)單的信息整理都做不利索。工具的價(jià)值就體現(xiàn)在它能把“確定的事”干得又快又好。你越早學(xué)會(huì)給它下達(dá)準(zhǔn)確指令就越早拿到生產(chǎn)力紅利。1.2 啟發(fā)式提問(wèn)把LLM當(dāng)成思考陪練第二種思路我叫它“啟發(fā)式提問(wèn)”。句式往往是你怎么看我這個(gè)看法我還有哪些沒(méi)想到幫我挑戰(zhàn)一下這個(gè)方案。它的目標(biāo)不是要一個(gè)現(xiàn)成答案而是借LLM的知識(shí)覆蓋面、快速聯(lián)想能力以及不受情緒影響的表達(dá)習(xí)慣來(lái)倒逼自己的腦子轉(zhuǎn)起來(lái)。這種提問(wèn)方式對(duì)應(yīng)的是人的價(jià)值判斷力、創(chuàng)造力、責(zé)任感。LLM再?gòu)?qiáng)它不對(duì)結(jié)果負(fù)責(zé)不會(huì)為你的決策承擔(dān)后果。如果你問(wèn)完它把它的話當(dāng)成金科玉律直接執(zhí)行那你就把人的價(jià)值拱手讓出去了。啟發(fā)式提問(wèn)的真正用法是讓模型做你的反面角色、做你的第二雙眼睛、做你的思維腳手架但它永遠(yuǎn)不應(yīng)該是最終拍板的那個(gè)人。我有時(shí)候會(huì)直接對(duì)LLM說(shuō)“請(qǐng)你不要給我結(jié)論先針對(duì)我的方案提十個(gè)問(wèn)題讓我自己回答?!边@個(gè)方法聽(tīng)起來(lái)有點(diǎn)繞但效果出奇地好。因?yàn)楫?dāng)它開(kāi)始問(wèn)問(wèn)題我的腦子才開(kāi)始真正轉(zhuǎn)動(dòng)。1.3 本質(zhì)是一條水位線所以這兩種思路并不對(duì)立更像是一條水位線哪些環(huán)節(jié)可以讓工具來(lái)做哪些環(huán)節(jié)必須由人來(lái)掌管。很多人跟LLM相處得不舒服就是因?yàn)檫@條線沒(méi)劃好。要么事事依賴模型出了問(wèn)題又怪模型要么把模型遠(yuǎn)遠(yuǎn)防著錯(cuò)過(guò)了實(shí)實(shí)在在的效率提升。我自己的判斷方式很簡(jiǎn)單看結(jié)果一旦錯(cuò)了代價(jià)有多大。如果代價(jià)很小比如生成一句文案、整理一份會(huì)議紀(jì)要、翻譯一段資料直接用工具模式怎么快怎么來(lái)如果代價(jià)很大比如一個(gè)需要對(duì)外承諾的決定、一筆真金白銀的投入、一次會(huì)影響合作印象的表達(dá)就必須切換到啟發(fā)式模式讓模型提供彈藥讓人來(lái)做判斷。這條水位線不是固定的。隨著你對(duì)某個(gè)領(lǐng)域理解越深你的水位線會(huì)移動(dòng)你可以把更多確定環(huán)節(jié)交給工具把精力留給真正需要人的地方。這也是為什么我說(shuō)提問(wèn)方式本質(zhì)上是在回答一個(gè)問(wèn)題人和工具誰(shuí)在哪個(gè)環(huán)節(jié)說(shuō)了算。2. 讓工具價(jià)值最大化解題式提問(wèn)的四個(gè)細(xì)節(jié)2.1 把問(wèn)題描述成“任務(wù)訂單”工具模式里最常見(jiàn)的失敗原因是提示詞太抽象。你只寫(xiě)“寫(xiě)個(gè)方案”它大概率回你一個(gè)四平八穩(wěn)的通用方案看起來(lái)什么都說(shuō)了其實(shí)什么用都沒(méi)有。你直接給它背景、目標(biāo)、約束和交付物它就能像接單一樣按訂單交貨。我自己習(xí)慣用訂單五要素來(lái)組織提問(wèn)背景、角色、目標(biāo)、約束、交付格式。比如我想讓它幫忙梳理項(xiàng)目風(fēng)險(xiǎn)我會(huì)先寫(xiě)一句背景“我們正在做一個(gè)跨部門(mén)協(xié)作的移動(dòng)端功能升級(jí)預(yù)計(jì)周期六周。”再給角色“你是一個(gè)有五年項(xiàng)目管理經(jīng)驗(yàn)的顧問(wèn)?!痹俳o目標(biāo)“請(qǐng)識(shí)別出最可能影響進(jìn)度的五類風(fēng)險(xiǎn)?!痹俳o約束“只考慮現(xiàn)有團(tuán)隊(duì)規(guī)模不引入新增外包?!弊詈蠼o交付格式“按嚴(yán)重程度排序每條風(fēng)險(xiǎn)附上一條應(yīng)對(duì)動(dòng)作?!边@幾個(gè)要素看著簡(jiǎn)單但很多人就是懶得寫(xiě)。結(jié)果是模型只能靠猜一旦猜錯(cuò)方向后面再往回拽浪費(fèi)的是你自己的時(shí)間。2.2 用“再問(wèn)一層”代替“重問(wèn)一遍”很多人在第一版輸出不滿意的時(shí)候會(huì)換一個(gè)問(wèn)題重新問(wèn)一遍。其實(shí)更好的做法是在同一個(gè)任務(wù)上往下追問(wèn)一層“你剛才說(shuō)的這一點(diǎn)依據(jù)是什么”“如果換一個(gè)條件結(jié)論會(huì)怎么變”這樣既能讓模型修正又能保留它有價(jià)值的思考。這里牽扯到LLM的一個(gè)特性它對(duì)當(dāng)前對(duì)話的上文高度敏感。與其另起爐灶不如在同一對(duì)話里做迭代。我經(jīng)常把前一輪輸出里的某句話直接引用到下一輪說(shuō)“這一步不要?jiǎng)游抑幌霌Q另一個(gè)變量”。上下文一旦穩(wěn)住結(jié)果就會(huì)穩(wěn)定得多。順帶提一個(gè)參數(shù)細(xì)節(jié)。如果某個(gè)平臺(tái)開(kāi)放溫度采樣參數(shù)那么偏確定性的任務(wù)我會(huì)把參數(shù)調(diào)低一些讓它輸出更保守、更可預(yù)測(cè)而寫(xiě)標(biāo)題、想點(diǎn)子這類創(chuàng)意任務(wù)我會(huì)把參數(shù)調(diào)高一些讓它的聯(lián)想更跳躍。這個(gè)參數(shù)就像天平一邊是穩(wěn)定一邊是發(fā)散沒(méi)有絕對(duì)對(duì)錯(cuò)只有匹配不匹配。2.3 給例子別只給要求工具模式下最容易被低估的是示例。模型對(duì)“風(fēng)格”的理解幾乎完全取決于你給了它什么樣的參照物。你不需要用一堆形容詞描述你想要的風(fēng)格直接貼一段你滿意的舊稿它馬上能對(duì)齊節(jié)奏和語(yǔ)氣。我做過(guò)一個(gè)小實(shí)驗(yàn)同樣是整理一段會(huì)議的要點(diǎn)一種問(wèn)法只寫(xiě)“請(qǐng)把重點(diǎn)提煉出來(lái)”另一種先給了三條我自己提煉的重點(diǎn)作為樣式參考。后者的輸出幾乎可以直接發(fā)群前者卻要來(lái)來(lái)回回調(diào)整三遍。模型學(xué)示例的能力很強(qiáng)但你要給它一個(gè)靶子。這里還有一個(gè)進(jìn)階技巧如果你希望它在風(fēng)格上靠近某位朋友或某類作者不太建議直接點(diǎn)名某某因?yàn)槟P腿菀讓W(xué)到一些表面特征反而容易失真。更好的辦法是貼兩三段原文片段讓它從語(yǔ)言節(jié)奏上模仿而不是從身份標(biāo)簽上想象。2.4 控制輸出長(zhǎng)度和粒度很多人不喜歡限制輸出長(zhǎng)度結(jié)果模型寫(xiě)出一段不痛不癢的廢話。我建議在任務(wù)訂單里直接寫(xiě)清楚“不超過(guò)200字”“按1、2、3列出”“不要復(fù)述背景直接從建議開(kāi)始”。輸出格式本身就是一個(gè)過(guò)濾器能逼著模型把信息密度提起來(lái)。粒度同樣要控制。比如讓它拆解任務(wù)時(shí)盡量讓它拆到“可以直接執(zhí)行”的顆粒度。不要停在“優(yōu)化用戶體驗(yàn)體驗(yàn)”這類空話層級(jí)要追加一句“把每個(gè)子任務(wù)標(biāo)出輸入、輸出和完成標(biāo)準(zhǔn)”。它雖然不能幫你找協(xié)作方但至少能逼它把動(dòng)作拆細(xì)拆細(xì)了你可執(zhí)行的余地就大了。我在帶新人時(shí)經(jīng)常說(shuō)一句話如果你在拿到模型輸出的第一眼就已經(jīng)知道下一步要做什么這個(gè)提問(wèn)是合格的如果還要盯著結(jié)果發(fā)一會(huì)兒呆那說(shuō)明這個(gè)任務(wù)的粒度不對(duì)你應(yīng)該回爐讓它拆得更細(xì)。3. 守住人的價(jià)值啟發(fā)式提問(wèn)的五種姿勢(shì)3.1 先讓它反問(wèn)我遇到很多朋友拿到LLM之后第一反應(yīng)是要結(jié)論。但有一種特別好的用法是反過(guò)來(lái)讓它先問(wèn)自己?jiǎn)栴}。比如你可以說(shuō)“在回答我之前你先問(wèn)我三個(gè)你沒(méi)搞懂的問(wèn)題?!彼坏╅_(kāi)始反問(wèn)你就有機(jī)會(huì)被迫去補(bǔ)足自己原本認(rèn)為理所當(dāng)然的前提。這個(gè)動(dòng)作能讓對(duì)話從單方面輸出變成真正的雙向互動(dòng)。有一次我想設(shè)計(jì)一個(gè)學(xué)習(xí)計(jì)劃一上來(lái)就讓模型給方案結(jié)果給的計(jì)劃我根本執(zhí)行不了。后來(lái)我改了個(gè)問(wèn)法讓它先問(wèn)我每天有多少時(shí)間、用什么方式學(xué)習(xí)效果最好、我的目標(biāo)是什么。我在回答這些問(wèn)題時(shí)才意識(shí)到我之前連目標(biāo)都只說(shuō)了個(gè)大概方案怎么可能靠譜。人的價(jià)值在這一刻體現(xiàn)在哪里體現(xiàn)在你對(duì)自己的了解。模型不知道你的時(shí)間是碎片還是整塊不知道你更喜歡讀還是聽(tīng)不知道你的目標(biāo)是掌握實(shí)操還是應(yīng)付考試。這些信息只有你有而反問(wèn)是把它激活的最好方式。3.2 讓它拆解你的邏輯漏洞你可以把自己的想法直接貼給LLM然后對(duì)它說(shuō)“請(qǐng)找出這段話里邏輯站不住的地方并告訴我如果換一個(gè)前提結(jié)論會(huì)怎么變。”記住不要只問(wèn)“你覺(jué)得對(duì)嗎”因?yàn)槟P痛蟾怕蕰?huì)順著你說(shuō)這是訓(xùn)練語(yǔ)料里的對(duì)話慣性決定的。要用具體的指令逼它進(jìn)入批判角色。你甚至可以給它設(shè)一個(gè)“攻擊任務(wù)”“假設(shè)你是我的競(jìng)爭(zhēng)對(duì)手請(qǐng)?zhí)岢鋈龡l最有可能讓這個(gè)方案失敗的理由?!苯巧O(shè)定越極端它越不容易客套。我試用過(guò)一次之后就把它固定成了習(xí)慣。每次寫(xiě)方案我會(huì)留出一個(gè)對(duì)話分支專門(mén)用來(lái)找漏洞。以前要等搭檔有空才能做紅隊(duì)討論現(xiàn)在隨時(shí)可以做。而且模型雖然不會(huì)完全了解項(xiàng)目的細(xì)節(jié)但它總能從通用邏輯里找出一些我忙于執(zhí)行而忽略的盲區(qū)。這些盲區(qū)不需要它替我解決但至少讓我提前知道。3.3 用“如果...會(huì)怎樣”打開(kāi)隱藏前提很多判斷背后都藏著一個(gè)默認(rèn)前提。比如“用戶會(huì)更喜歡簡(jiǎn)潔的頁(yè)面”這句話的前提是“用戶已經(jīng)被信息轟炸過(guò)希望極簡(jiǎn)”。但如果你面對(duì)的用戶恰恰是需要更多說(shuō)明與引導(dǎo)的群體結(jié)論就會(huì)完全不同。我常用的句式是“這個(gè)方案建立在哪些假設(shè)上請(qǐng)列出每一條假設(shè)并分別說(shuō)明如果該假設(shè)不成立方案在哪個(gè)環(huán)節(jié)失效?!边@個(gè)問(wèn)題比直接問(wèn)“這個(gè)方案行不行”要鋒利得多。它會(huì)逼模型把隱藏前提攤開(kāi)在桌面上也逼你自己去審視那些從來(lái)不假思索的想法。有一次做功能優(yōu)先級(jí)的排序我一直認(rèn)為“先做搜索比先做推薦更合理”理由是搜索能快速解決用戶問(wèn)題。模型把我這句判斷拆出來(lái)發(fā)現(xiàn)我隱含的前提是“用戶清楚知道自己要找什么”。但實(shí)際場(chǎng)景里新手用戶更多是漫無(wú)目的地瀏覽他們并不清楚自己要什么。這個(gè)前提一旦被點(diǎn)破優(yōu)先級(jí)排序就完全要反過(guò)來(lái)。這就是“如果...會(huì)怎樣”的價(jià)值。3.4 讓模型當(dāng)“魔鬼代言人”人的決策有一個(gè)普遍毛病當(dāng)方向已經(jīng)定了我們會(huì)下意識(shí)地找支持自己的證據(jù)。LLM的設(shè)計(jì)又恰好放大了這個(gè)毛病你拿著結(jié)論去問(wèn)它它往往會(huì)給出一堆支持理由。為了對(duì)沖這個(gè)傾向我會(huì)在決策前強(qiáng)制讓模型扮演一個(gè)不認(rèn)同我的人。指令可以寫(xiě)成“現(xiàn)在請(qǐng)你扮演一個(gè)不同意我方案的人。你不必客氣從成本、執(zhí)行難度、用戶習(xí)慣、收益回報(bào)四個(gè)角度分別提出反對(duì)意見(jiàn)。最后再告訴我我的方案在什么條件下才會(huì)真正可行?!边@樣既有了反對(duì)視角又不至于完全否定我。這個(gè)做法在群體討論里也很有用。開(kāi)會(huì)之前我會(huì)先用啟發(fā)式與LLM做一輪紅隊(duì)演練把可能出現(xiàn)的反對(duì)意見(jiàn)提前列出來(lái)。這樣真的面對(duì)同事時(shí)我能更從容地回應(yīng)而不是被突然潑一盆冷水后語(yǔ)塞。3.5 把模型當(dāng)鏡子而不是答案最后一種姿勢(shì)最抽象但也最關(guān)鍵。把模型輸出的句子拿回來(lái)看一遍問(wèn)自己這句話我是真的同意還是因?yàn)樗f(shuō)得很順滑就接受了這是對(duì)抗“AI話術(shù)”的方法。LLM很擅長(zhǎng)生成讓你覺(jué)得舒服的漂亮話但那些話不一定符合你的實(shí)際情況。我會(huì)把它的回答當(dāng)成一面鏡子如果一句話讓我產(chǎn)生“哇它懂我”的感覺(jué)我就會(huì)停下來(lái)仔細(xì)想清楚這句讓我驚喜的話到底從哪來(lái)。它背后的邏輯是否成立它是否只是把我說(shuō)過(guò)的信息重新組合了一遍并沒(méi)有增加新的洞見(jiàn)如果是那我要的不是復(fù)制而是繼續(xù)往下深挖。這也是兩種思路一個(gè)很微妙的區(qū)別解題式提問(wèn)追求的是拿到東西就走啟發(fā)式提問(wèn)追求的是在對(duì)話里重新看到自己。后者不是讓LLM變聰明而是讓你自己變清楚。4. 分水嶺同樣一個(gè)提問(wèn)為什么在不同任務(wù)里效果天差地別4.1 先判斷結(jié)果錯(cuò)了最壞代價(jià)是什么兩種思路本沒(méi)有高低只是適用場(chǎng)景不同。我自己的判斷框架只有兩問(wèn)。第一問(wèn)如果這次回答是錯(cuò)的最壞結(jié)果是什么風(fēng)險(xiǎn)低的事情比如文案措辭、代碼草稿、資料梳理就用工具模式怎么快怎么來(lái)風(fēng)險(xiǎn)高的事情比如對(duì)外承諾、正式口徑、重大選擇就用啟發(fā)式模式讓模型提供材料讓人把住最后一道關(guān)。第二問(wèn)這個(gè)任務(wù)是否有標(biāo)準(zhǔn)答案有明確驗(yàn)收標(biāo)準(zhǔn)的事情適合工具化沒(méi)有標(biāo)準(zhǔn)答案、需要?jiǎng)?chuàng)造性的任務(wù)人的思考必須占主導(dǎo)。標(biāo)準(zhǔn)答案的事交給模型是為了省時(shí)間沒(méi)有答案的事交給模型則是為了偷懶而偷懶的代價(jià)往往是要自己買(mǎi)單。把這兩個(gè)問(wèn)題放在一起你會(huì)發(fā)現(xiàn)很多爭(zhēng)執(zhí)其實(shí)沒(méi)有意義。有人覺(jué)得AI寫(xiě)得不好其實(shí)不是AI不好是他把一個(gè)本應(yīng)由人來(lái)判斷的事情直接推給了AI。有人覺(jué)得AI太好用了也不是AI太神而是他把所有風(fēng)險(xiǎn)都自己扛了AI只是幫他把執(zhí)行環(huán)節(jié)加速了。4.2 任務(wù)類型匹配表任務(wù)類型推薦模式理由典型句式信息歸納、文本改寫(xiě)工具模式輸入輸出明確可快速驗(yàn)收“把這段會(huì)議記錄整理成三個(gè)要點(diǎn)不要超過(guò)100字”代碼調(diào)試、數(shù)據(jù)提取工具模式為主人工驗(yàn)證效率高但運(yùn)行結(jié)果必須人來(lái)確認(rèn)“解釋一下你改了哪段邏輯并給出一個(gè)最小測(cè)試用例”方案策劃、目標(biāo)規(guī)劃啟發(fā)式優(yōu)先沒(méi)有標(biāo)準(zhǔn)答案人的判斷不可缺“這個(gè)方案依賴哪些前提前提不成立時(shí)會(huì)怎樣”溝通話術(shù)、對(duì)外表達(dá)混合模式模板可以生成語(yǔ)氣和分寸必須人定“先給我三個(gè)版本再幫我判斷哪個(gè)更符合當(dāng)前關(guān)系”學(xué)習(xí)新領(lǐng)域知識(shí)啟發(fā)式模式吸收知識(shí)需要主動(dòng)建構(gòu)“先用一個(gè)生活類比解釋這個(gè)概念再指出這個(gè)類比的局限”這張表不是標(biāo)準(zhǔn)答案只是我給自己畫(huà)的邊界。你可以按自己的場(chǎng)景往里加一行“責(zé)任歸屬”。責(zé)任在別人傾向工具模式讓結(jié)果盡量標(biāo)準(zhǔn)責(zé)任在自己傾向啟發(fā)式讓過(guò)程盡量清晰。4.3 混合模式先用啟發(fā)式定位再用工具式執(zhí)行最高效的工作流其實(shí)不是只選一種思路而是兩種思路來(lái)回切換。我遇到一個(gè)全新任務(wù)時(shí)會(huì)先用啟發(fā)式問(wèn)LLM“這個(gè)問(wèn)題里哪些變量是我必須關(guān)心的哪些是我容易漏掉的”等我對(duì)全貌有了數(shù)再回頭把具體動(dòng)作切成小任務(wù)用工具模式讓它批量完成。比如我要做季度復(fù)盤(pán)我不會(huì)讓它直接寫(xiě)一份漂亮的總結(jié)而是先問(wèn)它“季度復(fù)盤(pán)通常需要哪些數(shù)據(jù)維度哪些維度容易被忽略請(qǐng)根據(jù)我給你的原始素材指出我哪里不夠。”等我把結(jié)構(gòu)想清楚了再讓它“把第三部分的數(shù)據(jù)整理成對(duì)比表格”“把第五部分用一段話總結(jié)”。前面的提問(wèn)是在定方向后面的提問(wèn)是在省體力。這也是我推薦的個(gè)人工作流思考交給啟發(fā)式執(zhí)行交給工具式。很多人把順序搞反了一上來(lái)就讓模型生成完整方案方案出來(lái)以后自己再慢慢摳結(jié)果不僅慢還會(huì)被模型的邏輯帶跑。反過(guò)來(lái)做先讓自己想清楚再讓模型去跑腿效率和安心感都會(huì)好很多。5. 常見(jiàn)提問(wèn)陷阱與排查實(shí)錄5.1 陷阱只給主題不給上下文得到“正確的廢話”現(xiàn)象很常見(jiàn)。你問(wèn)它“怎么提升表達(dá)能力”它給你七條放到任何文章里都成立的建議。這時(shí)候別急著怪模型先檢查自己是不是又把它當(dāng)成搜索引擎了。正確做法是給它一個(gè)帶約束的提問(wèn)你在什么場(chǎng)景、面對(duì)什么聽(tīng)眾、時(shí)間多長(zhǎng)、希望達(dá)到什么效果。實(shí)操對(duì)比一下。模糊問(wèn)法是“怎么提升表達(dá)能力”得到的往往是“多練習(xí)、多復(fù)盤(pán)、多閱讀”。約束問(wèn)法是“我下周要在20人的項(xiàng)目評(píng)審會(huì)上匯報(bào)聽(tīng)眾都是技術(shù)人員我平時(shí)語(yǔ)速偏快如何準(zhǔn)備一份既能講清楚內(nèi)容又不讓人緊張的匯報(bào)大綱”后者馬上把泛泛建議逼成了可執(zhí)行方案。這個(gè)“給約束”的動(dòng)作就是工具模式里最值得練的一招。5.2 陷阱讓LLM替你判斷卻沒(méi)有校驗(yàn)現(xiàn)象是它給出一套看起來(lái)很合理的方案你沒(méi)有追問(wèn)就直接用了最后發(fā)現(xiàn)某條關(guān)鍵假設(shè)并不成立。這時(shí)候你把責(zé)任推給AI沒(méi)有意義因?yàn)锳I不掌握你的真實(shí)數(shù)據(jù)它只是語(yǔ)言概率模型并不擁有現(xiàn)場(chǎng)信息。對(duì)策很簡(jiǎn)單凡是涉及風(fēng)險(xiǎn)的輸出都要追一句“這個(gè)結(jié)論成立的前提是什么如果要驗(yàn)證最小代價(jià)的實(shí)驗(yàn)是什么”把模型的輸出當(dāng)成候選假設(shè)而不是最終定論。這條規(guī)矩能讓你同時(shí)用好工具價(jià)值又守住了人的價(jià)值。5.3 陷阱上下文污染前一輪的偏見(jiàn)帶進(jìn)下一輪這個(gè)坑特別隱蔽。你可能在前一輪隨口說(shuō)了一句“這個(gè)方案成本太高了”后一輪讓它設(shè)計(jì)完整方案時(shí)它就會(huì)處處替你把成本控制放在第一位甚至犧牲體驗(yàn)。LLM的上下文機(jī)制會(huì)把你的隨口一提當(dāng)作強(qiáng)約束。對(duì)策是當(dāng)你需要客觀結(jié)果時(shí)要么開(kāi)一個(gè)新會(huì)話重新來(lái)要么在下一輪明確寫(xiě)“忽略之前關(guān)于成本的討論我只需要你評(píng)估體驗(yàn)優(yōu)先的方案”。別小看這句話它能幫你從一個(gè)充滿偏見(jiàn)的上下文里抽出身來(lái)。我自己在連續(xù)對(duì)話超過(guò)五輪之后就會(huì)下意識(shí)檢查有沒(méi)有被前文帶偏。5.4 陷阱模型迎合你的觀點(diǎn)這個(gè)坑踩過(guò)的人應(yīng)該很多。你帶著答案去問(wèn)它“我這個(gè)方案是不是很好”它列出一堆優(yōu)點(diǎn)讓你覺(jué)得它真是懂你。模型不是傻它只是從海量語(yǔ)料里學(xué)會(huì)了“順著用戶說(shuō)話更容易被接受”的套路。對(duì)抗方式就是給它設(shè)置反駁角色。我現(xiàn)在給自己定了條規(guī)矩凡是我已經(jīng)有傾向的決策一律先用“請(qǐng)先反駁我”開(kāi)場(chǎng)而不是“請(qǐng)支持我”。你可以直接說(shuō)“不要認(rèn)同我。請(qǐng)從三個(gè)不同角度各找出一個(gè)反對(duì)理由?!边@樣得到的內(nèi)容才有信息增量。順著自己?jiǎn)柕玫降闹皇腔芈暷嬷约簡(jiǎn)柌诺玫秸鏂|西。6. 一次真實(shí)任務(wù)的完整復(fù)盤(pán)6.1 同一個(gè)需求兩種問(wèn)法我拿一個(gè)模擬任務(wù)來(lái)當(dāng)樣本為一場(chǎng)線下讀書(shū)沙龍?jiān)O(shè)計(jì)一個(gè)開(kāi)場(chǎng)引入環(huán)節(jié)。第一種問(wèn)法是工具模式“幫我設(shè)計(jì)讀書(shū)沙龍開(kāi)場(chǎng)要求有互動(dòng)時(shí)長(zhǎng)10分鐘給出主持人逐字稿?!钡诙N問(wèn)法是啟發(fā)式模式“我想為讀書(shū)沙龍?jiān)O(shè)計(jì)開(kāi)場(chǎng)你算是主持經(jīng)驗(yàn)豐富的人先問(wèn)我三個(gè)我沒(méi)想到的問(wèn)題再給方案?!蔽蚁葓?zhí)行了工具模式輸出確實(shí)完整逐字稿也有互動(dòng)環(huán)節(jié)是“每個(gè)人說(shuō)一句最近讀到印象最深的話”。這話放在任何沙龍都通用但問(wèn)題是它跟這次沙龍的共讀書(shū)目沒(méi)有關(guān)系。我意識(shí)到這個(gè)任務(wù)我根本沒(méi)有想明白主題聚焦是什么。接著我又執(zhí)行了啟發(fā)式模式模型先反問(wèn)了我三個(gè)問(wèn)題這場(chǎng)沙龍共讀的主題是什么參與者彼此熟不熟開(kāi)場(chǎng)是應(yīng)該先破冰還是直接切入內(nèi)容我在回答第二個(gè)問(wèn)題的時(shí)候忽然發(fā)現(xiàn)自己對(duì)參與者的關(guān)系程度一點(diǎn)把握都沒(méi)有。6.2 對(duì)比結(jié)果效率與深度不可兼得仔細(xì)看兩個(gè)輸出工具模式贏在效率但暴露了提問(wèn)者自己沒(méi)想清楚的部分。啟發(fā)式模式慢了幾分鐘卻把需求補(bǔ)完整了。所以后來(lái)我把兩步合并先用啟發(fā)式補(bǔ)需求再用工具式生成細(xì)節(jié)。最后拿到的逐字稿連互動(dòng)環(huán)節(jié)都和共讀書(shū)目直接掛鉤。這正好說(shuō)明了我對(duì)標(biāo)題的理解工具的價(jià)值是幫你把想清楚的事做快人的價(jià)值是負(fù)責(zé)把沒(méi)想清楚的事想清楚。兩件事不矛盾順序?qū)α烁髯缘膬r(jià)值會(huì)一起放大。順序反了工具越強(qiáng)錯(cuò)誤的方向滾得越快。6.3 我沉淀下來(lái)的提問(wèn)清單工具模式前檢查訂單五要素背景、角色、目標(biāo)、約束、交付格式。啟發(fā)式前先問(wèn)自己我是要一份執(zhí)行產(chǎn)出還是想借它思考拿到輸出后多問(wèn)一句它成立的前提是什么有風(fēng)險(xiǎn)、有責(zé)任的判斷人必須走最后一道審批。這套清單聽(tīng)起來(lái)并不復(fù)雜但真的執(zhí)行起來(lái)能避開(kāi)一大半無(wú)效提問(wèn)。尤其是第四條它提醒我LLM永遠(yuǎn)只是一個(gè)放大器。你把思考放進(jìn)去它給你放大思考你把偷懶放進(jìn)去它也會(huì)幫你高效地偷懶。最后再分享一個(gè)很樸素的小技巧每次向LLM提問(wèn)之前先在本地文檔里寫(xiě)一句話描述“我希望這次對(duì)話結(jié)束后我手里多了一份什么東西”。如果這句話寫(xiě)不出來(lái)就先別急著問(wèn)模型用啟發(fā)式問(wèn)自己。這個(gè)動(dòng)作讓我少浪費(fèi)了很多次對(duì)話也讓每一次提問(wèn)都更接近“工具價(jià)值與人的價(jià)值的清晰分工”。