描述

介紹

當我們開始 Casa Jasmina 項目時，我們清楚地想到了“家的意義是什么？”這個問題，數(shù)字時代在我們生活的私人、秘密場所發(fā)生的巨大變化使這個問題變得更有意義。

在這種情況下，對話式 UI 的興起（或回歸？）為有趣的語音交互做好了準備，讓我們的眼睛從屏幕上解放出來。在語音平臺中，Snips 提供了一個強大的替代主要谷歌/亞馬遜主流產(chǎn)品的選擇——我們喜歡這個，因為它更透明，可以在霧計算環(huán)境中離線工作。

Casa Jasmina 是/成為一個臨時的家，一個由臨時居民居住的展覽空間，因此我們致力于為這個特定的目標群體開發(fā)解決方案。臨時住所確實是新酒店，我們在考慮短期住宿甚至老年人需求的情況下進行了這項工作。特殊需求的特殊工具。

我們以一種非常天真的方式嘗試創(chuàng)建一個簡單的層來滿足客人對家庭環(huán)境的可能要求。這也意味著技術驅(qū)動的解決方案，但這首先迫使我們規(guī)范存儲、保持組織的位置。我們想創(chuàng)建一個通用的多語言家庭標簽系統(tǒng)。我們從定義英語/中文/意大利語詞匯開始——請通過添加你的語言來貢獻。我們后來準備了使用磁鐵貼在家具上的標志（您可以自己做），我們希望簡化語言選擇器，讓房東可以在他的城市/家中選擇最相關的語言（柏林的房東可能會覺得意大利語不合適，并且會加上法語和西班牙語等……）

Node-Red、開放硬件和 Snips：無限機會

開源生態(tài)系統(tǒng)為家庭環(huán)境提供了許多具有挑戰(zhàn)性和強大的機會。Home Assistant、OpenHab和許多其他軟件的社區(qū)不斷擴大和壯大。作為不同解決方案的集成商，橋接行業(yè)和 DIY 標準，我們選擇在Node-Red 中實施我們的家庭自動化。

先決條件

為了完成這個項目，您將需要：

• Snips.ai 設備和帳戶
• Node-RED 實例

Node-RED 是必需的，因為該應用程序?qū)⑵溆米鲾?shù)據(jù)庫配置和自動化的 REST API。您可以將兩者安裝在同一臺設備上，但如果您也將 Node-RED 用于其他流程，我建議您將它們分開。

基本安裝

在存儲庫中，您會找到node-red-flow.json 。此文件是首次設置數(shù)據(jù)庫的基本模板。在里面你會發(fā)現(xiàn)數(shù)據(jù)庫 http 請求流和一些注入，可以根據(jù)你自己的需要輕松更改數(shù)據(jù)庫內(nèi)容（例如更改用戶名或類別的答案）。

您可以通過復制 Node-RED 實例的 url 并在瀏覽器的搜索欄中添加/simpleuidb來檢查 http 調(diào)用是否有效，它應該會為您提供一個包含您設置的所有內(nèi)容的 json 對象。

現(xiàn)在 Node-RED 端已完成并正常工作，我們可以切換到 Snips.ai 端。

打開您的 Web 瀏覽器并使用您的憑據(jù)連接到，在這里您將找到您到目前為止創(chuàng)建的所有助手。我們的應用程序在撰寫本文時僅適用于英語，因此您需要英語助手才能使用它。

打開你的助手，你會看到你安裝的應用程序；要安裝一個新的，打開應用程序商店并尋找簡單的用戶界面或點擊此鏈接。安裝該應用程序，然后通過單擊部署來部署您新培訓的助手。

將命令粘貼到您的計算機終端，讓 SAM 實用程序執(zhí)行它的工作。片刻之后，安裝過程將要求您輸入數(shù)據(jù)庫 url：復制并粘貼您用于檢查數(shù)據(jù)庫是否正常工作的 url ( http://:1880/simpleuidb )。現(xiàn)在系統(tǒng)已配置好，Snips 將回答“嘿 Snips，幫幫我！”。

高級使用和配置

該應用程序支持多種多樣的用戶集成和定制。通過在控制臺上分叉它，您可以訪問我們配置的所有意圖，并且可以根據(jù)自己的需要修改它們。

簡單的用戶界面支持快捷方式。您不必每次都說“嘿 Snips ，幫幫我”，而是使用類別的關鍵字來選擇您想要的內(nèi)容（例如“嘿 Snips，交通”為您提供交通信息）。您可以通過向意圖添加示例來添加任何類型的快捷方式。

您可以通過在類別中定義 url 字段來向特定類別添加操作。

"transportation":{
   "categories":null 
   "transportation":"Check the dashboard to find the tourist guide, we                             are close to taxis and underground station",
   "url":"http://192.168.0.115:1880/callback" //add this field to add actions
}

這樣，當 Snips 檢測到意圖時，它會向您指定的地址發(fā)出 http get 請求。

添加新類別非常簡單。在數(shù)據(jù)庫中，將您的新類別添加到類別數(shù)組中，并添加一個類別對象以明確是否存在子類別和答案。

{
...
"categories":["food","sleeping","bathroom","cleaning","temperature","emergency","transportation","NEW CATEGORY"],
...
"NEW CATEGORY":{"categories":null,
                "NEW CATEGORY":"SNIPS ANSWER"
                }
...
}

然后在意向控制臺中，在 WhereIs 意向中添加與您添加的類別名稱相匹配的示例。這樣 Snips 將識別類別并且應用程序?qū)⒄_路由它。

添加帶有子類別的類別需要創(chuàng)建新意圖并編輯操作腳本。在 Simple UI 應用程序中，為您的類別添加意圖，您將子類別放在其中作為示例。參數(shù)字段必須稱為“類別”。

在腳本中使用模板回調(diào) (food_callback) 并根據(jù)您的配置更改參數(shù)。

   def NEWCATEGORY_callback(self, hermes, intent_message):
       global databaseurl
       #get categories from database
       good_category = requests.get(
           databaseurl).json().get("NEW CATEGORY").get("categories")
       category = None
       if intent_message.slots: #check is user request match subcategory
           category = intent_message.slots.category.first().value
           if category.encode("utf-8") not in good_category:
               category = None
       if category is None:
           Answer = "Sorry I didn't understand. Say " + \
               ", ".join(good_category) + " to get help."
           hermes.publish_continue_session(
               intent_message.session_id, Answer, ["casajasmina:INTENTNAME"])
       else:
           #get the answer from the database
           Answer = str(requests.get(
               databaseurl).json().get("NEW CATEGORY").get(category))
           hermes.publish_end_session(intent_message.session_id, Answer)

然后將其添加到與您的意圖名稱匹配的master_intent_callback elif 條件和whereIs_callback中。這樣，助手將能夠?qū)⒛恼埱舐酚傻秸_的流程。

#generic callback for every category in the database, handles single and multi category topics
   def whereIs_callback(self, hermes, intent_message):
.....
               #multi category handling
               Answer = "You asked for " + category + \
                   ", I can give you tips on " + ", ".join(subcategory)
               #add new intent here...
               hermes.publish_continue_session(intent_message.session_id, Answer, ["casajasmina:Food", "casajasmina:emergency","casajasmina:INTENTNAME]) 
.....
def master_intent_callback(self, hermes, intent_message):
       coming_intent = intent_message.intent.intent_name
       if coming_intent == 'casajasmina:WhereIs':
           self.whereIs_callback(hermes, intent_message)
       elif coming_intent == 'casajasmina:ConnectMe':
           self.askHelp_callback(hermes, intent_message)
       elif coming_intent == 'casajasmina:Food':
           self.food_callback(hermes, intent_message)
       elif coming_intent == 'casajasmina:emergency':
           self.emergency_callback(hermes, intent_message)
       elif coming_intent == 'casajasmina:INTENTNAME':
           self.NEWCATEGORY_callback(hermes, intent_message)

結論

該項目正在持續(xù)開發(fā)中。我們正在添加新功能，讓助手感覺不那么機械和笨重，完善其結構和交互。下一個里程碑是發(fā)布多語言支持（最初是意大利語）并簡化標簽系統(tǒng)和 Snips 行為之間的集成。