微軟釋出【Copilot for Security 的隨機對照試驗研究報告】，透過隨機對照試驗，證明了AI驅動的安全解決方案在提升效率和準確率方面的卓越表現，無論是資深專家還是新手，Copilot for Security都能顯著加速並最佳化安全任務的處理。隨著網路安全挑戰日益嚴峻，Copilot for Security 的出現為安全團隊帶來了更多高效科學的工作模式，為所有安全從業者提供了強大的支持。
近期，微軟研究團隊執行了一組隨機對照試驗(RCTs)，旨在評估 Copilot for Security 在提高工作效率和品質方面的效果。外部實驗參與者透過登入到 Microsoft Defender XDR環境，透過完成以下四項核心任務，以產生研究所需的數據：
這些功能透過整合到微軟安全產品組合中的產品，如Microsoft Defender XDR、Microsoft Sentinel 和 Intune 等，以及其他第三方服務如 ServiceNow 等，來無縫提供支持。透過使用特定於安全的外掛程式作為數據點來源，安全專業人員可以更廣泛地了解威脅並獲得更多上下文，有機會擴充套件解決方案的功能。
為了更為全面地了解Copilot for Security為安全營運人員帶來的效益，本次調研報告兼顧資深安全專家與初級安全人員兩大群體。
洞察一：
準確率和品質雙雙提升
在整體任務和指令碼分析任務中，使用Copilot for Security的資深安全專家及安全新手們都取得了明顯準確率提升。
關於提高準確率和品質的研究發現
洞察二：
任務處理速度提高20%以上
Copilot for Security為網路安全工作人員都帶來了顯著的任務處理速度提升，無論是資深安全專家、還是安全新手測試者，在使用後均提升了超過20%的處理速度。
保持準確性/品質不變，Copilot for Security
使用者在 各任務上的時間節省情況如下
洞察三：
超90%的使用者希望下次繼續使用 Copilot for Security
體驗過Copilot for Security的使用者，普遍對其給予了高度認可。我們向他們展示了一系列陳述，並讓他們表達從完全不同意（得分為0）到完全同意（得分為100）的認可程度。結果顯示，所有使用者的評分均越過了80分的基準線，具體數值如下方第一列所示。超過80%的使用者明確表達了他們的普遍贊同（高於50分），如第二列所示。
情感傾向反饋
對安全領域的啟示
◉ 安全新手獲益顯著 ：Copilot for Security能顯著提升新手在安全任務上的準確率，幫助他們高效完成任務。此外企業安全團隊也可以將Copilot for Security更廣泛地用於安全人員培訓和日常業務，以迅速提升整個安全團隊的整體技術水平胡安全實踐能力。
◉ 安全專家效率提升 ：由於經驗更加豐富，資深安全專家能夠借助自己擁有的豐富知識和經驗進行決斷，但由於Copilot for Security具有人類無法比擬的速度和規模優勢，使用Copilot for Security顯著提高了他們的工作速度。
◉ 適用性廣泛 ：無論新手或專家，Copilot for Security都能在一定程度上提升他們的工作效率，具有普適性。
點選文末 「閱讀原文」 ，領取 【Microsoft 安全 Copilot：適時而生的得力工具 】 白皮書， 為你開啟更高效的安全工作方式。
[1] 在本節及其針對安全新手的對應部份中，我們的分析範圍限定為那些真正努力的使用者，排除了在多項選擇題中得分低於隨機猜測水平的受試者。
[2] 在整個分析過程中，我們使用*來表示P值小於0.10時的統計顯著性，用**來表示P值小於0.05時的顯著性。
[3] 本節對2023年11月的方案進行了修訂，最佳化了數據清理標準和LLM作文評分問題。雖然具體數值有變，但整體結論未變。
點亮在看，給BUG點好看
