當前位置: 妍妍網 > 碼農

推薦 2 個 酷炫狂拽 的開源計畫

2024-06-25碼農

推薦兩個開源的 AI 神器。

MinicBrush,給他一張參考影像,它能自動的模仿參考影像的風格,套用到你自己的影像上面,而且可以指定區域個人化編輯。

DeepSeek:全球第一個可以和 GPT-4 Turbo 掰掰手腕的程式碼生成大模型

01

MinicBrush:圖片 PS 的 AI 神器

MimicBrush 是一個令人驚艷的開源計畫,由阿裏實驗室(ali-vilab)開發。它不需要大量的訓練數據,就能夠模仿參考影像的風格和紋理。

使用者可以上傳一張源影像,繪制出需要編輯的區域,並提供一張參考影像,MimicBrush 將自動模仿參考影像的風格,套用到源影像上。

這項技術在影像編輯領域具有突破性意義, MimicBrush 利用深度學習模型,特別是兩種 U-Net 結構,來實作對影像的零樣本編輯。

1️⃣ 看看官方的範例

區域編輯

紋理轉移

後處理

2️⃣ 怎麽部署?

以下是使用 MimicBrush 進行影像編輯的簡單程式碼範例,你可以把開源計畫 clone 下來, 安裝依賴項,下載並設定模型權重的路徑。執行Gradio演示或推理指令碼,進行影像編輯。

開源地址:https://github.com/ali-vilab/MimicBrush

展示了如何下載預訓練模型權重並執行 Gradio 演示:

from modelscope.hub.snapshot_download import snapshot_download as ms_snapshot_download
# 下載預訓練的SD權重
sd_dir = ms_snapshot_download('xichen/cleansd', cache_dir='./modelscope')
print('=== Pretrained SD weights downloaded ===')
# 下載MimicBrush權重
model_dir = ms_snapshot_download('xichen/MimicBrush', cache_dir='./modelscope')
print('=== MimicBrush weights downloaded ===')
# 執行Gradio演示
python run_gradio3_demo.py

02

DeepSeek Coder:讓程式碼自我編寫的奧秘

在開源世界的深處,有一個計畫正吸引著全球開發者的目光:DeepSeek Coder 。這個由 deepseek-ai 團隊精心打造的計畫,不僅僅是一個程式碼生成器,它是一個程式語言模型的集合,能夠在多種程式語言上實作計畫級別的程式碼完成和填充任務。

開源地址:https://github.com/deepseek-ai/DeepSeek-Coder

1️⃣ 專業評估

DeepSeek Coder 在多個編碼相關的基準測試上進行了評估, 成為 全球第一個在程式碼、數學能力上與GPT-4-Turbo 比肩的模型。

看下圖,這個開源的模型在程式碼、數學的多個榜單上位居全球第二,介於最強閉源模型 GPT-4o 和 GPT-4-Turbo 之間。

2️⃣ 有啥亮點?

① 海量訓練數據: 從零開始訓練,使用了2萬億個token,其中 87% 為程式碼,13% 為自然語言數據,涵蓋中英文。

② 靈活且可延伸的模型尺寸: 從 1B 到 33B 各尺寸模型都有,適應不同使用者的需求。

③ 高級程式碼完成能力: 支持計畫級別的程式碼完成和填空任務,視窗大小達到 16K。

支持的程式語言

④ 語言支持情況: 支持超過40種程式語言,從常見的 Python、Java、C++ 到更為專業的 Ada、Erlang、Haskell 等,幾乎涵蓋了軟體開發的方方面面。

⑤ 提供模型微調指令碼: 讓使用者可以在特定下遊任務上進一步最佳化模型效能。

推薦閱讀

1.

2.

3.

4.