NPU還是很有用的,以後應用會越來越多。
我舉個遊戲應用的例子。
現在遊戲對話都是固定死的。但用現代ai可以活潑很多。我大概解釋一下技術流程。
玩家用語音跟遊戲角色對話。
用Whisper轉換語音到文字。
用bert/gpt來分析文字的情緒與關鍵字。
用RAG(embedding vector database)來取出遊戲設計的答案。
如果跑得動,用gpt+答案+情緒prompt來回答。這是最有變化的。
跑不動gpt,就用預先(gpt+答案+prompt)錄好的回答。這只要bert+vector database。
也可跑自然聲的TTS來說話,這個目前還有很大的(問題/發展空間)
這些是npu剛好可以實踐的東東。