????大模型動態

DeepMind再放大招!新模型可預測基因突變是否致病

DeepMind發布AlphaMissense模型，能預測基因錯義突變是否致病，提升近千倍于人類專家，成功分類7100萬突變中89%的致病性，加強遺傳病診斷和新致病基因發現。

論文地址:https://www.science.org/doi/10.1126/science.adg7492

微新創想提要:

1. AlphaMissense是DeepMind基于AlphaFold的AI系統，可預測基因錯義突變的致病性，成功分類89%的可能性，遠超人類專家的0.1%。

2. 錯義突變是基因突變中一種重要類型，能影響蛋白質功能，對遺傳病研究至關重要。

3. AlphaMissense模型的訓練包括兩個階段，利用蛋白質序列和突變結構背景的數據庫產生致病性評分，有望幫助推動生命科學的發展。

百度發布醫療大模型“靈醫大模型”

百度發布國內首個“產業級”醫療大模型——靈醫大模型，旨在推動醫療行業的數字化和智能化進程，已與多家醫療機構合作開放體驗。

微新創想提要:

1. 百度發布國內首個“產業級”醫療大模型，名為靈醫大模型，旨在推動醫療數字化和智能化。

2. 靈醫大模型提供智能健康管家、智能醫生助手、智能企業服務等功能，支持醫患對話和病歷生成等應用。

3. 合作伙伴可選擇Lite版、旗艦版或定制版，并嵌入已有產品系統中，推動醫療行業的AI應用發展。

螞蟻金融大模型已在理財和保險領域進行應用測試

螞蟻集團宣布聯合信通院發布金融大模型行業標準。目前，螞蟻金融大模型已率先在理財和保險領域進行應用測試。未來，螞蟻集團與金融機構合作的所有數字金融業務將全線接入這一大模型，助力合作機構數字化升級、智能化轉型。

微新創想提要:

1、螞蟻金融大模型通過專業試題測試，包括證券從業資格、保險從業資格、執業醫師資格等領域。

2、該大模型是基于螞蟻自研基礎大模型，專為金融產業定制，在多個金融專屬任務中表現出色，包括研判觀點提取和金融事件推理等。

3、螞蟻金融大模型將在理財和保險領域率先應用，未來將支持金融機構數字化升級和智能化轉型。

?????聚焦開發者

谷歌DeepMind提出全新優化框架OPRO 利用大語言模型生成Prompt

谷歌DeepMind提出了新的優化框架OPRO，使用大語言模型生成自然語言提示，以改進各種優化任務。通過這一方法，大模型在數學和文本處理問題上表現更出色，提示的效果超過了人類設計的提示高達8%。

論文地址:https://arxiv.org/pdf/2309.03409.pdf

要點:

1、OPRO是一種利用大型語言模型（LLM）進行優化的方法，通過自然語言描述問題，指導模型逐步改進解決方案，提高性能。

2、這一方法不僅在文本處理任務中有效，還在數學問題中表現出潛力，甚至可以匹敵專門設計的算法，提供了新的優化可能性。

3、實驗結果顯示，不同模型可以通過提示優化找到不同風格的提示，從而廣泛適用于不同任務，持續改進性能。

騰訊開源StableDiffusion工作流保存插件LightDiffusionFlow

騰訊開源LightDiffusionFlow插件，可保存和復現StableDiffusion繪畫工作流，降低學習門檻，提高效率，項目開源地址:https://github.com/Tencent/LightDiffusionFlow。

要點:

1. LightDiffusionFlow是騰訊開源的插件，可幫助用戶保存和復現StableDiffusion繪畫工作流，包括模型和第三方插件參數。

2. 插件支持自動搜索相關模型并提供下載鏈接，降低初學者學習門檻，提高繪畫效率。

3. 可用于個人使用或企業團隊，建立可復用的AI繪畫工作流，提高團隊繪畫能力，降低操作成本。

上海AI實驗室開源工具箱XTuner8GB顯卡就可訓練大模型

上海人工智能實驗室發布開源工具箱XTuner，可用8GB顯卡訓練大模型，通過支持多種硬件適配，大幅降低了企業進行大模型訓練的門檻。

開源鏈接:

https://github.com/InternLM/xtuner

微新創想提要:

1、上海AI實驗室發布XTuner，支持多種硬件適配，降低企業進行大模型訓練的成本門檻。

2、XTuner支持多種開源大模型的微調和任務類型，使用8GB顯卡即可訓練出專屬大模型。

3、工具箱提供數據集適配、標準化訓練流程等功能，可輕松為大模型添加新功能，推動人工智能核心技術進步。

Meta AI提出視頻摳圖新方法OmnimatteRF

Meta AI提出了一種名為OmnimatteRF的視頻摳圖新方法，結合了2D前景圖層和3D背景模型，能夠有效分離前景和背景，適用于各種視頻，并不需要針對每個視頻進行參數調整。

項目地址:https://github.com/facebookresearch/OmnimatteRF

微新創想提要:

1、OmnimatteRF是Meta AI提出的視頻摳圖方法，結合了2D前景圖層和3D背景模型，解決了復雜幾何和非旋轉攝像運動的視頻摳圖問題。

2、這種方法在兩個視頻數據集上的實驗表明，在各種視頻上都表現出色，無需針對每個視頻進行參數調整，提高了視頻摳圖的效率。

3、OmnimatteRF能夠分離前景的主體部分并使用三維背景模型對復雜場景進行重建，相比僅使用二維圖像層表示視頻背景的方法，提高了重建效果，對視頻制作和虛擬環境構建有重要應用價值。

Headless語言模型:通過捆綁嵌入提高模型的訓練速度

研究人員提出了一種改進語言模型性能的方法，稱為Headless語言模型，通過捆綁輸入嵌入與其他嵌入并使用對比損失，提高訓練速度和準確性。

論文地址:https://arxiv.org/pdf/2309.08351.pdf

微新創想提要:

1、Headless語言模型通過對比損失替代傳統交叉熵，提高了預訓練模型的性能，特別是在GLUE基準測試和LAMBADA數據集上。

2、在類似運算量下，Headless語言模型相比傳統方法表現更好，下游任務性能更佳，同時訓練過程中可節省高達20倍的運算量。

3、這項工作開辟了以對比學習取代傳統目標的道路，為語言表示學習提供了高效的替代方案，有望在大規模語言處理任務中廣泛應用。

???AI新鮮事

首款AI PC處理器發布，英特爾All in AI

英特爾發布了一系列重大AI技術創新，包括288核至強芯、3代AI芯片和AI PC處理器，展示了其全面投身AI領域的決心。

微新創想提要:

1. 英特爾首次公布了三代AI芯片路線圖，其中Gaudi3采用5nm制程，算力翻倍，網絡帶寬增加，將于明年發布。

2. 英特爾推出了基于至強處理器和Gaudi2加速器的大型AI超級計算機，成為全球TOP15超算，Stability AI是主要客戶。

3. 引入"AI PC"概念，展示了基于英特爾技術的PC上生成式AI模型應用，預告新一代酷睿Ultra處理器的發布，該處理器具備神經網絡處理器，革命性的架構設計。

百度營銷發布AIGC“共拓計劃”

百度營銷推出AIGC“共拓計劃”，基于AIGC技術合作伙伴計劃，已有10余家合作伙伴參與，視頻制作成本降低85%。

微新創想提要:

1. 百度推出AIGC“共拓計劃”合作伙伴計劃。

2. 計劃開放AIGC通用API能力接口，已有多家合作伙伴參與。

3. 使用百度AIGC技術能力的合作伙伴取得顯著成果，視頻制作成本下降85%。

OpenAI招募專家加入“紅隊”網絡，加強AI模型安全性

OpenAI宣布啟動“紅隊”網絡計劃，目的是邀請不同領域的專家加入，幫助評估和對抗AI模型的潛在風險，這是OpenAI加強模型安全性的重要舉措。

圖源備注:圖片由AI生成，圖片授權服務商Midjourney

微新創想提要:

1. OpenAI公開招募專家加入“紅隊”網絡，以提高AI模型的安全性。

2. “紅隊”網絡是OpenAI的迭代開發過程中的一部分，包括內外對抗性測試。

3. 網絡成員可根據專業領域參與風險評估，但需遵守保密協議。

SambaNova 推出新芯片:可運行比 ChatGPT 大兩倍以上的模型

SambaNova Systems推出SN40L芯片，旨在降低企業使用高質量AI模型的總成本，能運行比OpenAI的ChatGPT高級版大兩倍以上的模型。

微新創想提要:

1、SambaNova Systems發布SN40L芯片，專為企業應用程序設計，支持比ChatGPT高級版大兩倍以上的模型。

2、芯片具備先進存儲技術，可支持5萬億參數模型，有助于企業在不降低準確性的情況下運行更大的AI模型。

3、SambaNova Systems致力于填補生成式AI軟件需求激增引發的芯片供應空缺，挑戰英偉達在AI芯片市場的主導地位。

Digimarc推出版權識別技術 AI可避開受保護資料訓練

軟件公司Digimarc推出數字版權識別技術Digimarc Validate，內容版權持有者可在數字資產中嵌入版權信息，使AI訓練時能識別受保護內容，避免擅自使用。

圖源備注:圖片由AI生成，圖片授權服務商Midjourney

微新創想提要:

1、Digimarc Validate在數字內容元數據加入版權標識，AI訓練前可檢查數據版權。

2、Digimarc SAFE軟件可檢測Validate嵌入的數字水印，幫助AI開發者識別繞過受保護內容。

3、新服務有助AI訓練更加尊重數字資產版權，但還取決于開發者是否避開受保護內容。

豐田訓練AI機器人制作早餐，無需編碼、通過觸覺學習

豐田研究院使用生成式人工智能在“機器人幼兒園”中培訓機器人執行各種靈巧任務，通過觸覺傳感器讓機器人感知并學習，已掌握60多項技能，目標在2024年底前擴展到1000項，使機器人能夠根據觀察學習來執行未教導過的新任務。

圖片來源:豐田研究所

微新創想提要:

1. 豐田研究院在“機器人幼兒園”用生成式AI培訓機器人，無需編碼工作。

2. 機器人通過觸覺傳感器感知自己的動作，學會了60多項挑戰性技能。

3. 目標在2024年使機器人掌握1000項技能，能根據觀察學習來執行新的任務。

IBM發布雄心勃勃計劃，到2026年讓200萬人接受AI培訓

IBM宣布計劃在2026年之前讓200萬人接受免費的AI培訓，通過提供生成式AI課程、與大學合作以及改進的AI助教等方式，縮小全球AI技能差距，重點面向代表性不足的社區。

圖源備注:圖片由AI生成，圖片授權服務商Midjourney

微新創想提要:

1. IBM計劃通過免費生成式AI課程和與大學合作，在2026年前讓200萬人接受AI培訓。

2. IBM將提供改進的AI助教等輔助功能，并給學習者頒發IBM數字證書。

3. 該計劃旨在幫助全球不同群體獲得AI技能，縮小AI人才差距。

???AI應用

百度百家號上線「百家號 AI 助手」功能 可一鍵生成熱點文章

百度百家號推出「百家號 AI 助手」功能，允許創作者一鍵生成熱點文章。該功能基于百度AI大模型，提供熱點智能成文和圖文/動態智能發布選項。

微新創想提要:

1. 百度百家號上線「百家號 AI 助手」，創作者能輕松生成熱點文章，提高創作效率。

2. 助手支持熱點智能成文，創作者可參與話題討論并生成文章，然后一鍵發布或編輯。

3. 創作者也可以在AI助手中輸入主題，生成帶標題、圖文內容的文章或動態，便捷發布或編輯。

妙鴨相機推出免費體驗版 8張照片即可生成專屬數字分身

妙鴨相機推出免費體驗版，用戶上傳8張照片即可生成個人數字分身，之前需上傳20張照片并支付費用。妙鴨相機通過技術優化，提高數字分身相似度，希望擴大用戶群體。

微新創想提要:

1. 妙鴨相機推出免費版，8張照片生成數字分身，之前需20張照片和費用。

2. 技術優化提高數字分身相似度，專業版照片門檻下降至15張。

3. 目標是擴大用戶群體，讓更多人體驗AI寫真的樂趣。

ElevenLabs推出長音頻生成平臺Projects 可將書籍變成有聲讀物

人工智能公司ElevenLabs推出長篇音頻生成平臺Projects，可一鍵將文字作品如書籍轉化為富有情感的有聲內容。

體驗地址:https://elevenlabs.io/projects

微新創想提要:

1. Projects平臺匯集ElevenLabs在長篇語音合成等領域的研究成果。

2. 平臺提供端到端工作流程，支持多種格式導入，可細節編輯語音，一鍵生成語音文件。

3. Projects可大幅提升內容創作者將作品轉化為引人入勝的有聲內容的效率。

巨量引擎推出智能短視頻腳本工具、智能成片等AIGC產品

巨量引擎推出智能短視頻腳本工具和智能成片AIGC產品，免費供抖音商家使用，提高了帶貨短視頻創作效率和質量，GMV提升了58%。

微新創想提要:

1、巨量引擎發布免費智能短視頻腳本工具，可幫助抖音商家快速生成符合標準的帶貨短視頻。

2、智能短視頻腳本工具能智能分析視頻，鎖定高光幀和拆解黃金公式，僅需20秒即可生成爆款帶貨短視頻腳本。

3、巨量引擎還推出智能成片的AIGC產品，支持購物車組件和豎版原生直播間等功能，提高了抖音商家的內容創作效率。

AI初創公司Galileo推新工具，可解釋AI大模型的幻覺現象

Galileo Studio是Galileo公司的新工具，可實時監測LLMs的輸出，提供新指標和防護措施，解釋幻覺現象并優化模型性能。

微新創想提要:

1、Galileo Studio實現實時監測，用戶可評估LLMs輸入和輸出，解釋模型產生的特定輸出，幫助開發人員不斷改進模型應用。

2、工具引入"防護措施"指標，限制模型生成的信息、語氣和語言，確保不準確或不合規的響應不被輸出。

3、Galileo還追蹤"接地性"指標，確定模型輸出是否符合訓練數據，幫助用戶了解響應是否與模型的訓練背景相關。

AI Score My Site:AI驅動的SEO工具

AI Score My Site是一款創新的工具，幫助用戶了解其網站在AI驅動的搜索引擎上的排名和可發現性，提供改進建議。它分析多方面指標，生成全面的AI績效評分和詳細報告，還提供人工評估和SEO咨詢服務。

體驗地址:https://sitespeak.ai/tools/ai-score-my-site

微新創想提要:

1. AI Score My Site幫助用戶了解網站在AI搜索引擎上的排名和可發現性。

2. 提供全面的AI績效評分和詳細報告，指出問題和優化建議。

3. 提供人工網站評估和SEO咨詢服務，支持制定有效的SEO策略。