近年來，人工智慧技術快速發展，與其他行業的結合也成為業界不斷探索的方向。在人工智慧基礎和工具方面，AI平臺已成為降低人工智慧門檻的關鍵因素；而在人工智慧應用方面，作為最成熟的應用方向之一，智慧語音已在智慧家居、智慧車載等領域有了迅猛發展。以騰訊為代表的巨頭企業，憑藉強大的技術積累和在社交聊天、遊戲娛樂等垂直領域定製化服務的豐富經驗，在AI平臺和智慧語音兩方面都推出了豐富的解決方案。

9 月 15 日，以“破局人工智慧：AI平臺及智慧語音應用解析”為題的沙龍在上海舉辦，本次活動由 CSDN、騰訊雲聯合主辦。

本次分享從人工智慧技術的大背景切入，根據技術發展現狀講述AI平臺如何降低人工智慧門檻，幫助企業快速構建AI能力；以及深度學習在語音識別上的應用，語音技術在智慧音箱等場景中的應用和解決方案，並探討智慧語音的未來發展趨勢。

騰訊雲大資料的高階研究員羅冬日講述了“深度學習在語音識別上的應用”。為什麼現在語音識別的準確率得到大幅提升？他給出了三點原因：

• 一是網際網路儲存了大量的語音資料；

• 二是GPU/CPU硬體的計算速度有量級的提升；

• 三是深度學習演算法方面的應用。

關於深度學習在聲學模型上的應用，羅冬日主要講述了 DNN、LSTM、CLDNN 三種深度學習網路。

首先是 DNN，輸入一幀資料，然後得到發音單元的分類結果；LSTM 單元會利用到分割時間點的一些資料來源輔助判斷當前資料如何分類，當然雙向的 LSTM 效果會更好；CLDNN 是比較成熟和穩定的一種結構，在卷積網路後面再接 LSTM，後來再接 Dense，有一些高效的企業會提出更加新的網路，最後的識別效果也會更好。

此外，還有端到端的識別方法，如 CTC、encoder—decoder+attention 以及 Google 的 LAS 模型。

羅冬日提到，雖然現在語音廠商們都稱語音識別的準確率達到了 97%，但這是在安靜的情況下，如果是高噪音環境、口音識別或帶情緒的聲音情形下，還需採用更高質量的陣列麥克風，更多的遠場資料，以及語義理解的輔助。

騰訊高階產品架構師倪捷講述了智慧語音擴充套件數字化服務。他認為，語音在數字化的時代重要性主要是使用者不斷追求更好人機互動體驗的結果。

基於騰訊雲的語音識別、語音合成等語音類能力，他介紹了一些實際應用的解決方案。首先是直播安全的解決方案，除了基於影象層面的鑑別外，還包括語音甚至音訊聲音識別的能力。其次是智慧法庭解決方案。以前的書記員需要做庭審記錄，但會遇到可讀性不強的問題，而語音識別技術則可對庭審記錄準確轉寫，並且便於後續做檔案檢索。

還有客服質檢，由於現在話務員跟客戶的對話質量不可控，這就需要基於客服錄音做質檢，但靠人工質檢的方式耗時長，資源消耗大，而通過語音轉寫等技術，在文字層面上就可通過關鍵詞或者特定業務邏輯對客服做評分。

攜程的客服服務使用的正是騰訊的語音識別技術，其資料智慧部總監張童皓在隨後的演講中就旅遊場景中的客服質檢做了重點介紹。

他展示了智慧質檢的識別過程。通過標註資料拿出來跟場景相關的關鍵詞做比對，並對無用詞進行刪除，通過雙向 LSTM+注意力機制，如果發現它跟現有的價格標籤關聯度很高，就可以得出一個關聯關係。在這個過程當中有可能關聯出降價，然後打出來價格倒掛的標籤，當用戶在攜程上下了訂單後，如果發現酒店的價格比線上便宜很多，這個時候會打電話投訴。

他展望了智慧質檢的未來，利用 AI 技術未來可能會有一個永不離崗的資深高能質檢員，使用 5 臺伺服器，便可實現每日通話全覆蓋，已分類問題全時覆蓋，並對突發問題快速檢索；另外要打造出智慧培訓師，進行高分低分對比，提煉金牌話術；另外還有可能打造出實時輔導員，像線上知識庫那樣，讓坐席人員解決問題更有效率。

騰訊語音識別中心的專家研究員王珺則分享了智慧音箱的語音識別技術。她講述了智慧音箱語音互動技術的麥克風陣列、聲紋識別、語音識別、語義理解和 TTS 五大鏈條，並對每個步驟做了前沿技術介紹。

關於基於喚醒詞的關鍵技術，目前最新的技術有哪些缺陷？王珺表示，首先是拓展性差，並且專用隱層或專用偏置訓練的方法不能有效捕獲目標說話人特徵。自適應到目標說話人的波束形成深度學習方法，目前最先進的技術都要求平均至少 10s 的自適應語音，遠超真實應用場景可接受的自適應語音（例如喚醒詞）長度，可用性差，不易落地。

而騰訊的基於喚醒詞資訊的目標說話人語音提取技術的攻關目標，在效能上更優，包括在訊號的失真比、主觀語音質量評估、干擾說話人數、魯棒性。而且從系統實時性，模型引數複雜度全方面評估，另外還包括拓展性、擴用性、深度研究價值等方面。

王珺還分享了端到端語言識別的 Attention 建模方法的關鍵技術點，最前沿的序列到序列技術各有它們的優缺點：CTC 的方法是序列到序列前沿技術的經典方法，它的優勢是從左到右的序列到序列的模型，比較簡單，解碼速度快；同時它的缺陷是模型建立的前提是假設當前幀的輸出和之前的輸出標註獨立。

基於 Attention 的優點是什麼？王珺解釋，它不需要假設與之前輸出標註獨立，對下一層的預測可以用到聲學模型和語言模型的分析有自帶的語言模型方法。但是也有非常明顯的缺陷，Attention 缺乏從左到右的對齊限制。而CTC與Attention結合的方法可以得到正確的對齊結果。目前研究人員也在盡力的縮小它和經典混合系統的差距。

騰訊高階產品經理郭律探討了機器學習平臺與人工智慧的關係。簡單而言，把海量資料通過機器學習的手段來進行處理，所形成的模型就是人工智慧。所謂機器學習的本質，解決的就是“精細”問題。這其中有4個約束條件：

• 第一是業務場景，把業務問題轉化為機器學習的建模問題；

• 第二是海量資料的機器學習，從原理上面基於統計來實現；

• 第三是資料質量的問題；

• 第四是資料閉環，不斷讓模型學習新的資料。

除了業務和資料，郭律認為 AI 能力不可或缺的元素有兩個，一個是人才，另一個是技術能力，包含計算資源等能力。但是相對而言 AI 工程化、建模的人才，AI 的計算資源和計算能力，包括計算資源和框架，其實相差不多。

他認為AI 具有多樣性，但 AI 人才和計算能力具有通用性。他們按 AI 的人才成熟度的不同，歸納為 4 類：

• 第一是 AI Geek，從底層計算資源搭建到計算框架的引入，一直到演算法編寫層面，包括模型調優都能夠獨立進行編碼。

• 第二是 AI 研究者，他們自己會寫比較高階的演算法。

• 第三種是 AI 從業者，他們知道整個建模的流程，也能夠用一些開源的演算法做一些模型訓練。

• 第四種是 AI 應用者，他們是 AI 非從業人員，希望使用人工智慧解決業務痛點，大部分人都屬於這一類。

因此，針對不同的使用者層次，需要提供不一樣機器學習產品和服務。郭律以騰訊的智慧鈦機器學習平臺服務為例給出了不同使用者所需要的差異化服務，比如 TI-A 是深度學習加速器，主要為專業級使用者進行模型訓練加速，同時在模型訓練完之後，可以部署成服務對外進行線上預測，解決了從模型落地到具體應用場景的問題。TI-ONE，智慧一站式機器學習平臺，它有一個視覺化的 UI，客戶可以一目瞭然地看到整個建模工作流，而且裡面有豐富的內建演算法元件。TI-S 的特點是全自動，只需要給出資料，就可以反饋出可用的模型，並部署成一個應用。

此外，郭律還介紹了智慧鈦機器學習平臺服務具體的功能。該平臺對企業而言意味著降低了企業獲得 AI 能力的門檻，可以幫助企業打造自己的 AI 生態，它能幫助形成“資料+模型”雙閉環，支援模型自更新。

以下為騰訊的三款機器學習平臺產品詳細介紹：

▌TI-ONE

智慧鈦一站式機器學習（TI OneStop，TI-ONE）適合 AI 初學者，同時又兼顧專業使用者需求的一站式機器學習平臺。

全流程一站式服務

TI-ONE 提供從資料預處理到模型部署的全流程服務，各個環節無縫銜接、流暢易用，從此使用者不再需要為完成一個機器學習任務在不同的產品間切換，並疲於各種相容性的問題。

拖拽式任務流

通過圖形化介面的拖拉拽操作，元件與節點間自動連線，資料流向自動生成，繪製任務流暢便捷。

多框架支援

支援多種機器學習框架，方便使用者按照自己的習慣與需求自由選擇框架來搭建任務。

   

豐富內建演算法

TI-ONE 平臺內建豐富的各類演算法，從資料預處理流程到各類機器學習和深度學習演算法，AI 初學者們可以通過元件的拖拽在任務流中直接使用，無論是機器學習的迴歸預測、深度學習的圖片分類、目標檢測，使用者不再需要編寫晦澀難懂的演算法程式碼即可解決各場景需求。當然，專業級使用者也可選擇自定義演算法的上傳。

靈活的排程模式

在完成了任務流的搭建，在任務排程環節，TI-ONE 支援對引數進行數值型與列舉型的預設定，自動完成多次任務，同時提供定時排程功能滿足週期性的排程，大大減少手動多次排程的重複性工作量，在完成了多次執行後，使用者可前往歷史例項模組，快速橫向比對所有模型，選擇最優結果。

結果視覺化

執行產生的模型結果，滑鼠懸浮即可顯示，同時 TI-ONE 內建豐富的模型評估方式和圖示形式，讓使用者直觀地對比多個結果，模型優劣一眼可辨。

一鍵部署服務

TI-ONE 提供了一鍵式部署工具，使用者可以將訓練好的模型部署成 Application，然後裝載成多個例項，一個例項還可以有多個版本。第三方的使用者使用 REST API 便可輕鬆實現呼叫。

如此就完成了用 TI-ONE 構建任務流到釋出模型服務的全流程。

▌TI-A

智慧鈦機器學習加速器（TI Accelerator，TI-A）是專為 AI 演算法工程師設計的專業級機器學習平臺。旨在為使用者提供專業級的大規模訓練工具，並提供極致的效能優化。

命令列操作

區別於 TI-ONE 影象化的介面風格，TI-A 提供命令列的操作介面，為專業級使用者提供熟悉的工作環境。

大規模訓練

幾乎所有演算法工程師團隊都面臨過大規模訓練時速度太慢、計算叢集成本高、IT 維護步驟複雜等困境。通過 TI-A 使用者可以一鍵構建分散式 Tensorflow 框架，同時內部封裝了 CNN、DNN、LSTM 等模型的分散式訓練版本，大規模訓練從此不再和“繁瑣”相繫結。

高效能

TI-A 基於 Tensorflow 框架進行效能優化，對比原生框架不論是單機效能，還是多級多卡的效能都有顯著的加速比提升，為使用者提供更極致的效能體驗。

▌TI-S

如何使整個機器學習過程更加自動化，減少資料科學家和 AI 演算法專家在整個機器學習過程中的繁重勞動力，同時讓更多沒有 AI 背景的人也可以輕鬆使用 AI 技術，一直是機器學習領域熱議的課題。如何能夠把完整的機器學習工作流做成雲端易用的產品，讓使用者僅需要在介面上拖拽樣本資料就可以完成資料處理、特徵抽取、模型訓練等全流程？  

即將推出的智慧鈦自動機器學習（TI SelfLearning，TI-S）將全面支援結構化資料、影象等領域的 AI 建模，使非 AI 專業人士能夠通過 TIS 獲得人工智慧決策的能力。

      TI-S 整體流程圖

TI-S 提供從資料預處理、特徵工程、模型調參、模型評估、模型預測到結果分析的一站式服務，全流程覆蓋，實現從訓練至預測的完整閉環，讓使用者無需演算法經驗也能基於場景資料生成模型，真正降低 AI 技術落地各行業的門檻。

同時，智慧鈦自主研發的自動資料清洗、自動擇參、自動調參、自動特徵選擇、自動演算法選擇等技術，亦能高效輔助解決 AI 專業人員在工作各環節中繁瑣、耗時的問題。

附：嘉賓演講PPT

羅冬日：深度學習在語音識別上的應用

https://img-bss.csdn.net/201809201142472211.pdf

倪捷：智慧語音擴充套件數字化服務

https://img-bss.csdn.net/201809201143205525.pdf

王珺：智慧音箱語音技術分享

https://img-bss.csdn.net/201809201144012164.pdf

郭律：欲善其事，先利其器 - 論機器學習平臺與人工智慧的關係

https://img-bss.csdn.net/201809201144345895.pdf

張童皓：智慧語音賦能的客服監督和質檢

https://img-bss.csdn.net/201809201440298460.pdf

--------------------- 本文來自 AI科技大本營 的CSDN 部落格 ，全文地址請點選：https://blog.csdn.net/dQCFKyQDXYm3F8rB0/article/details/82791994?utm_source=copy