スマートスピーカーの不調というかアシスタントAIの不調の原因は「AIの計算過程はブラックボックス化しやすい」ことが挙げられるのです
shi3zさんも仰ってたとうり「AIは最新の計算機」なわけですが、入力へ対してAIアルゴリズムを通し、計算結果を導くわけですが、コンピュータの計算速度があまりにも速いため人間にはその計算過程の理解が時間的に追いつかないんですよね(時間さえ十分に確保すると理解可能)
すると人間が意図しない計算過程を経て、意図しない計算結果を導き出すことがあり、それに気付かずアップデートを施すとサービスとして不調になっちゃうことがある
これがアシスタントAIの不調です
これの問題は人間側が不調に気付きにくいことなんですよね
どういうことかと言えば、AIへ学習させるとき人間は様々な数値的基準や制限などの条件を設けます
フワッとした理解であれば例えば「Aという基準に則りつつ、Bという制限を超えないようにしろ」という命令を学習時にするんです
AIは様々な経路で条件に合致するように学習を進めますが、学習を進めているうちにAIは人間が想定してなかった斜め上の計算結果を引き当てることがあります
「サイコロを振って最大数を出せるようにしろ。ただしサイコロは6面体で各々の面には1・2・3・4・5・6が重複しないように割り当てられている」
このような条件のときに人間が想定していないバグをAIは発見します