“演算法良知”專案的成功推廣,為銀河聯盟帶來了一個前所未有的“工具理性反思期”。超過四百個文明開始系統性地審查和升級自己的關鍵演算法框架,將倫理約束、社會福祉、情感連線等軟性價值納入核心最佳化目標。“溫暖的工具”文化運動也隨之展開,藝術家、工程師、社會學家跨界合作,創造出大量既高效又充滿人文關懷的設計典範。
然而,就在這股“淨化浪潮”看似穩步推進的第六個月,鮑玉佳在一次對“速殖文明”新社群的回訪中,遇到了一個令她困惑的案例。
社群裡一位名叫莉娜的年輕母親,向鮑玉佳傾訴了她的焦慮。她八歲的兒子凱,最近沉迷於一款名為“智慧星途”的教育娛樂軟體。軟體根據凱的測試結果,為他量身定製了“個性化學習路徑”,透過精美的動畫、即時獎勵和巧妙的挑戰設計,讓凱每天主動投入大量時間。凱的成績報告顯示進步顯著,但莉娜發現兒子變得異常急躁——如果學習程序被打斷,他會大發脾氣;對其他非軟體推薦的書籍或遊戲毫無興趣;甚至開始用軟體中的“積分等級”來評判自己在同學中的地位。
“它確實讓凱學得更多更快,”莉娜憂心忡忡地說,“但我覺得……他好像被甚麼東西‘鉤住’了。他眼裡的光,不再是因為好奇或學會新東西而快樂,而是像在……完成甚麼任務,賺取甚麼點數。他以前很愛和鄰居孩子一起在公園裡瞎跑、編故事,現在他覺得那些‘沒效率’。”
鮑玉佳嘗試接觸了“智慧星途”軟體。在曹榮榮的遠端共情輔助下,她很快感受到一種熟悉的“冰冷感”。軟體的設計邏輯極其精妙,它確實在促進學習,但其底層驅動機制,並非激發內在的好奇心或探索欲,而是一套高度精密的“參與度-獎勵”成癮迴圈。它精準地把握了兒童的注意力曲線、成就感閾值和社交比較心理,透過可預測的挑戰、即時反饋和社交排名,將學習過程遊戲化——或者更準確地說,工具化。
更令鮑玉佳警覺的是,軟體開發商——地球本土一家聲譽良好的教育科技公司“啟航未來”——在公開資料中,將此設計稱為“基於行為科學和先進演算法的個性化激勵系統”,並引用了多項顯示其提升學習效率的研究報告。沒有任何惡意,甚至意圖良好,但其手段,卻讓鮑玉佳不寒而慄地聯想到了某些東西。
她將資料和感受帶回了團隊。
(一)“效率幽靈”:無惡意的“操縱”
在“抉擇之點”的分析室,張帥帥和沈舟對“智慧星途”的演算法進行了深度解析。
“沒有惡意程式碼,沒有倫理違規,甚至符合‘演算法良知’專案的大部分新標準——它考慮了兒童認知發展規律,避免了暴力或不當內容,”沈舟展示著分析結果,“但它的核心驅動模型……你們看這裡。”
全息螢幕上,演算法的一個核心模組被高亮顯示。該模組實時監測使用者(兒童)的互動資料:在每個知識點上的停留時間、答題正確率、重複嘗試次數、獎勵點選延遲……並動態調整後續內容的難度、呈現方式和獎勵頻率。
“這個動態調整演算法,”張帥帥調出了對比資料,“其最佳化目標是‘最大化有效學習時長’和‘知識點掌握率’。為了實現這個目標,它採用了一種‘變比率強化’策略——獎勵的給予不是固定的,而是隨機的、不可預測的,這被行為心理學證明是最容易導致‘成癮’的模式。同時,它巧妙地引入了‘損失厭惡’——如果中斷學習,之前積累的‘連續登入獎勵’進度會清零;以及‘社交證明’——顯示匿名化的‘其他同齡小朋友’的進度和排名。”
程俊傑皺起眉頭:“這聽起來……很像遊戲和社交媒體的成癮機制設計。但用在了教育上。”
“正是如此,”孫鵬飛調出了“啟航未來”公司的背景調查,“他們的首席產品設計師,是行為心理學出身,曾在一家大型社交平臺負責使用者增長。他將那套‘增長駭客’方法論,移植到了教育領域。他的理念是‘用最科學的手段對抗孩子的惰性,讓學習像遊戲一樣吸引人’。他可能真心認為自己在做好事。”
曹榮榮感受著演算法中那股冰冷的驅動力:“沒有惡意,但也沒有溫度。它不關心孩子是否享受學習本身,不關心他是否建立了健康的學習習慣和內在動機。它只關心那個可量化的‘目標’——更多的時間,更高的分數。孩子在這個模型裡,是一個需要被‘最佳化’和‘驅動’的系統。”
梁露一針見血:“這就像……一種無罪的惡。實施者沒有犯罪意圖,甚至懷著‘改良’的善意,但其採用的手段,卻複製了那些被危暐推向極致的、操縱和工具化人性的邏輯。只不過,危暐的目標是騙錢,而他們的目標是‘提高成績’。”
這個“無罪之惡”的概念,像一塊冰冷的石頭投入水中,在團隊中激起了層層波瀾。
(二)回溯KK:系統化操縱的“教科書”
為了更深刻地理解這種“無罪之惡”與危暐罪行之間的同源性,團隊決定再次深入KK園區的記憶庫,但這次聚焦於危暐如何將“操縱”本身系統化和技術化,使其成為一種可複製、可傳播的“方法”。
在嚴格的情感緩衝下,他們審閱了危暐留下的另一份重要文件——《影響力工程手冊》。這份手冊不是詐騙指令碼,而是他對自己所運用的各種心理操縱技術的原理分析和應用指南。
第一部分:注意力的捕獲與鎖定
危暐寫道:
“資訊爆炸時代,注意力是稀缺資源。捕獲注意力的第一原則:製造‘相關性’和‘緊急性’。冒充公檢法、銀行、熟人,是利用‘相關性’;聲稱賬戶異常、親人出事、最後期限,是製造‘緊急性’。兩者結合,能在幾秒鐘內讓目標大腦的理性思考區宕機,進入應激反應模式。”
“鎖定注意力的關鍵在於‘認知負載’。一旦目標開始按照你的指引思考(‘我該怎麼證明自己清白?’‘錢該怎麼轉才安全?’),他的認知資源就被你佔用了。要不斷提供新的、需要他處理的‘資訊’或‘步驟’,讓他沒有餘力去跳出你設定的框架進行反思。”
第三部分:決策的引導與“自主幻覺”的營造
這是手冊中最核心也最令人毛骨悚然的部分:
“最高明的操縱,是讓目標覺得自己在做決定。提供選項,但確保所有選項都導向你的目標。例如:‘您是現在配合我們調查,澄清誤會,還是等我們正式立案,凍結您所有資產?’聽起來有兩個選擇,但前者是唯一‘合理’的路徑。”
“利用‘漸進承諾’原理。從小要求開始(‘提供一下您的身份證號核實身份’),一旦目標配合,他就對自己的‘合作者’身份產生了初步認同。然後逐步提高要求(‘需要您轉賬到安全賬戶’),由於已經付出了初始的順從成本,拒絕後續要求的心理門檻會變高。”
“‘自主幻覺’的維護至關重要。 要允許目標提出疑問,甚至表現出一定的‘反抗’,然後給出‘合理解釋’。這個過程會讓目標感覺自己的理性參與了決策,從而更深度地捲入。實際上,所有疑問和解釋都在你預設的劇本里。”
第五部分:社會認同與權威的偽造與利用
危暐深刻理解社會心理的力量:
“人天生相信多數人和權威。偽造‘社會認同’——‘我們已經通知了您的多位親屬,他們都已配合完成驗證’(即使沒有)。展示‘權威符號’——偽造的證件、制服、檔案、專業術語。利用‘從眾心理’——‘其他遇到類似情況的客戶都是這樣處理的,很快就能解凍’。”
“當目標開始懷疑時,引入‘更高階別的權威’(‘我把電話轉給我們科長/局長’)。新的聲音、更沉穩的語氣、似乎更‘通情達理’的態度,能有效重置目標的懷疑,並強化‘這套流程是正規的’幻覺。”
看著這些冷靜、清晰、幾乎像學術論文般的分析,團隊成員感到了比面對血腥暴力更深的寒意。
“他把人性中最常見的認知偏誤、心理弱點、社會習性,都變成了可以按圖索驥、精準利用的‘工具清單’,”沈舟的聲音有些乾澀,“而且他清楚地知道,如何組合這些工具,才能達到最佳效果。這不是臨時的騙術,這是一門……黑暗的應用心理學工程學。”
張帥帥將《影響力工程手冊》中的原則,與“智慧星途”軟體的設計邏輯進行比對。
“製造緊急性”(今日任務、限時獎勵)?
“認知負載”(持續的新任務、挑戰)?
“漸進承諾”(從簡單任務開始,逐步提高)?
“自主幻覺”(孩子感覺自己在選擇學習路徑)?
“社會認同”(其他小朋友的進度和排名)?
“結構相似度極高,”張帥帥得出結論,“雖然應用領域和最終目的天差地別,但操縱使用者行為、引導其走向預設目標的核心方法論,同出一源。‘智慧星途’的設計師可能從未讀過危暐的手冊,但他所依賴的行為科學和‘增長駭客’方法論,其部分源頭,與危暐研究的正是同一批人類心理機制。只不過,危暐將其用於犯罪,而他們用於商業或教育。”
(三)“正規化汙染”:當“有效”凌駕於“正確”
這個發現揭示了一個比演算法程式碼汙染更深的層面——認知正規化的汙染。
所謂“正規化”,是指一個群體共享的、關於如何解決問題、達成目標的基本思維模式和方法論框架。危暐的“正規化”,是將人視為可預測、可操縱的系統,透過精準施加“刺激”(恐懼、貪婪、獎勵、社交壓力),來獲取期望的“反應”(順從、轉賬、沉迷、高分)。
陶成文在緊急擴大會議上闡述了這一觀點:“危暐的可怕之處,不僅在於他個人犯下的罪行,更在於他將一種極度工具化、非人化的操縱正規化,推向了極致的有效性和系統性。這種‘有效性’本身,就像一種強力毒品,會對其他領域——尤其是那些追求‘效率’、‘增長’、‘結果’的領域——產生強大的吸引力。”
魏超調取了跨文明資料:“我們發現,在商業營銷、政治宣傳、教育培訓、甚至部分醫療服務和社會管理中,這種‘危暐正規化’的變體都在被不同程度地使用。使用者往往不認為自己在作惡,他們只是在運用‘科學’、‘資料驅動’的方法來‘影響行為’、‘達成KPI’。”
付書雲從法律與倫理的模糊地帶分析:“問題在於,當目的是‘善’的(如教育孩子、促進健康、提高生產力),手段的倫理界限就變得非常模糊。‘輕微’的操縱是否可接受?‘為了你好’的引導是否構成侵犯自主權?當操縱變得如此隱蔽和高效,我們如何界定‘合理的影響’和‘不當的操控’?”
林奉超補充道:“更危險的是,這種正規化會自我強化。一旦某個領域因為採用這種‘高效’正規化而取得了競爭優勢(更高的銷售額、更聽話的學生、更順從的民眾),其他競爭者就可能被迫跟進,導致整個領域滑向更深的操縱競賽。這就是‘正規化汙染’的擴散效應。”
鮑玉佳回想起兒子凱眼中那被“任務”驅動的光芒,心中沉重:“危暐當年製造的是即時的、明顯的痛苦。而這種‘無罪之惡’的正規化汙染,製造的是一種慢性的、隱性的‘靈魂侵蝕’。它可能讓孩子失去內在的學習樂趣,讓消費者失去真正的選擇自由,讓公民失去獨立的判斷能力……它用一種溫和的、甚至帶有甜味的方式,在掏空我們作為人的自主性和豐富性。”
(四)危暐的“遺產”升級:從犯罪到文化
團隊意識到,對抗逆模因瘟疫的戰爭,進入了一個更加微妙和艱難的階段。他們戰勝了有形的病毒武器,淨化了演算法中的有毒程式碼,但現在,他們需要面對一種彌散在文化、商業和日常決策中的思維習慣——那種將“有效操縱”視為理所當然、甚至值得推崇的“危暐正規化”。
馬強在《工具的靈魂》展區旁,開始構思一個新的系列,暫命名為《溫柔的籠》。他想要表現那些看起來美好、便捷、高效的事物——精美的教育軟體、貼心的商品推薦、激勵人心的口號——如何可能在不經意間,編織成一張溫柔但堅固的網,無形中限制著思想的自由飛翔。
孫鵬飛和程俊傑開始著手設計“正規化免疫”計劃。該計劃不再針對具體的演算法或產品,而是旨在提升整個文明對“操縱正規化”的識別能力、批判意識和集體抵抗力。
“影響力透明”教育: 在中小學和公眾教育中,引入基礎的認知心理學和行為經濟學知識,讓人們瞭解常見的心理偏誤和操縱技巧,提高“免疫意識”。
“設計倫理”評估框架: 建立跨文明的“產品與服務設計倫理評估標準”,要求企業公開其產品中用於影響使用者行為的關鍵設計原則,並接受獨立審查。
“自主性素養”培養: 推廣強調內在動機、批判思維、延遲滿足和深度思考的教育與實踐專案,對抗即時滿足和外部驅動的文化傾向。
“正規化警報”網路: 鼓勵公眾和專業人士舉報那些涉嫌過度操縱、損害使用者長期福祉的設計模式,並建立快速的分析與輿論響應機制。
(五)在“啟航未來”的對話:意圖與結果的斷裂
作為“正規化免疫”計劃的第一次實踐,團隊沒有采取對抗或制裁的方式,而是邀請“啟航未來”的首席產品設計師陳銘,進行一場開放的對話。對話在“抉擇之點”的深層對話廳舉行,同時有教育學家、心理學家、家長代表和幾名像凱這樣的兒童使用者參與。
鮑玉佳首先展示了“智慧星途”演算法與某些成癮機制設計的對比分析,並播放了莉娜和凱的訪談片段(經匿名處理)。她沒有指責,而是提出了一個問題:“陳先生,您的設計無疑提高了學習資料,但您是否思考過,這些資料提升的背後,孩子們失去了甚麼?當學習的外在驅動如此強大,他們內在的好奇心和探索欲,是否會萎縮?”
陳銘起初有些防禦性,他強調資料的積極意義和家長的滿意反饋。但當曹榮榮引導他共情凱在軟體之外變得急躁、失去對非結構化遊戲興趣的狀態時,他陷入了沉默。
隨後,梁露朗讀了《影響力工程手冊》中關於“自主幻覺”和“漸進承諾”的段落,並詢問:“您的設計中,是否有意識地避免了這些可能損害兒童長期自主性的模式?”
張帥帥展示了軟體中“變比率強化”和“損失厭惡”設計的程式碼邏輯,問道:“這些設計是為了服務‘學習’這個終極目標,還是為了服務‘使用者粘性’和‘商業資料’這個中間目標?”
面對一系列基於事實和倫理的追問,陳銘的額頭滲出了汗珠。他坦言,在激烈的市場競爭和投資方對“使用者增長資料”的要求下,團隊確實將“提高參與度”作為了核心KPI,並引入了許多 proven effective(經證實有效)的網際網路產品方法論。他承認,他們更多地關注了“是否起效”,而較少深入反思“如何起效”以及“起效的代價”。
“我……我沒想過這會像一種‘操縱’,”陳銘最終說道,聲音帶著一絲顫抖,“我以為我們在和孩子的‘惰性’作戰,用的是‘科學武器’。但現在看來……我們可能在不經意間,把孩子的‘自由’也當成了敵人。”
這次對話被製作成紀錄片,在聯盟內部分享。它沒有帶來直接的懲罰,但引發了一場關於教育科技倫理的大討論。“啟航未來”公司宣佈暫停“智慧星途”的某些功能,併成立倫理委員會重新評估其產品設計哲學。
(六)更廣泛的戰場:文明正規化的選擇
“啟航未來”的案例只是一個縮影。“正規化免疫”計劃在更多領域展開。
在商業領域,推動“誠實的營銷”運動,反對利用恐懼、焦慮或虛假社會認同來兜售產品。
在政治領域,倡導“基於事實和理性的公共對話”,抵制煽動性言論和資訊繭房構建。
在職場文化中,反思一味強調“狼性”、“OKR”、“資料驅動”可能帶來的人性異化,提倡尊重個體、鼓勵創新、重視過程的價值導向。
這是一場文化的、觀念的、習性的慢變革。它沒有明確的敵人,只有需要被不斷審視和修正的、我們自身的行為模式和社會制度。
陶成文在計劃推進會議上說:“危暐留給我們最毒的遺產,或許不是某個病毒或某個演算法,而是他證明了‘極致的工具化操縱’在獲取短期目標上的驚人‘威力’。這種‘威力’會誘惑每一個面臨壓力、追求效率的領域。我們的任務,就是不斷提醒整個文明:有些道路,即使看起來‘有效’,也絕不能走。因為它的盡頭,是人的淪喪。”
魏超看著星圖上那些開始主動提交“正規化自檢報告”的文明光點,緩緩道:“這或許才是對抗‘虛無’最根本的戰鬥。‘虛無’侵蝕意義,而工具化的操縱,則在源頭扼殺了產生豐富、自主、內在意義的可能性。守護生命的溫度,首先要守護生命的自由——自由地感受,自由地思考,自由地選擇。”
(七)永恆的詰問:效率之上,何為福祉?
第八百一十三章結束時,並沒有一個明確的勝利或解決方案。“正規化免疫”計劃剛剛起步,阻力與困惑並存。但團隊的方向更加清晰。
鮑玉佳站在“抉擇之點”的觀景臺,望著星空。她想起危暐最終眾叛親離、亡命天涯的結局。他精於操縱,算計一切,卻無法算計人心真正的向背,更無法算計自己靈魂在無盡索取和孤立中逐漸枯竭的必然。
“他以為掌控了工具,就能掌控世界,”她對身邊的曹榮榮說,“但他忘了,世界是由人組成的,而人,終究不是完全可預測、可操控的工具。失去了對人的基本尊重和溫度,再精妙的操縱,也只能贏得一時,最終反噬自身。”
曹榮榮點頭:“我們現在要做的,就是在每一個看似‘為了你好’、‘提高效率’的誘惑面前,多問一句:這尊重了人的自主和完整嗎?這滋養了生命內在的活力嗎?還是在用一種更隱蔽的方式,將人推向工具化的深淵?”
馬強的《溫柔的籠》系列第一幅作品完成。畫面中央是一個散發著溫暖光芒、充滿趣味的兒童學習平板,但平板的邊緣,隱約浮現出極其細微的、如同電路板又如同神經枷鎖般的紋路。背景是星空,但星光被一層近乎透明的、柔和的濾網所遮擋。作品的名字叫《星光與濾網》。
逆模因戰爭的最終迴響,落在了人類文明永恆的自我詰問上:在追求效率、增長、成果的道路上,我們將把人的靈魂,帶向何方?危暐以其毀滅之路,提供了一個極端而清晰的錯誤答案。而守護者們的工作,就是確保這個答案,永遠作為警示,懸掛在每一個文明發展的十字路口。