AKARIのScratch版に、子供向けのブロックを追加しました。 お子さんにもより分かりやすくAKARIを動かしたり、物体認識や顔認識を使ったりしてもらえると思います。 レポジトリ: github.com/AkariGroup/aka… マニュアル: akarigroup.github.io/docs/source/sc… #akarirobot #Scratch pic.twitter.com/GMe4D3GoxN

haiku並みに早くてgpt-3.5やhaikuよりは確実に言うことを聞いてくれるので特に音声対話では便利だと思います。 後はfuncion_callingちゃんとやってくれるかな…。 #akarirobot

Jupyter Notebook版はこちら！ akarigroup.github.io/docs/source/tu… #akarirobot

これまで公開したAKARIのアプリは、マニュアル内にまとめたページがあります！ akarigroup.github.io/docs/source/tu… #akarirobot

AKARIの音声対話botをGeminiに対応しました！ 同じAPIのモデル名指定を変えるだけでChatGPT, Claude, Geminiが使い分けられます。 Geminiチャラくない…？ github.com/AkariGroup/aka… #akarirobot #Gemini pic.twitter.com/12GSySuKvL

AKARIのYOLO物体認識モデルに人、顔、手の検出モデルを追加しました！ OAK-Dで汎用的に使えます。 github.com/AkariGroup/aka… #akarirobot #DepthAI #OakCamera #YOLO pic.twitter.com/hVZx1I2isF

板AKARIという新しい概念が… #akarirobot x.com/CH1H160/status…

返信先:@akariRobotもちろんそのつもりで作りました。LattePanda入りの板状AKARIです #akarirobot pic.twitter.com/cYWaLBZjp6

常にロボットの発話完→音声認識開始というシーケンスにしない理由は、発話ぶった切り機能を残したいからです。発話中に認識を止めると、出来なくなるんですよね… マイクの指向性次第では、ロボット自身の発話を認識しないことと、人の声を認識したら発話を強制終了、は両立可能なので。 #akarirobot x.com/akariRobot/sta…

マイクの種類やセッティング次第ではこの現象が起きるので、従来は保守的にEnterキーを押したときのみ音声認識開始、という仕組みにしていました。 今回のアップデートから、このEnterキー入力も起動オプションで解除出来ます。 #akarirobot

AKARIの音声対話botに対話コントローラを追加し、ロボット側の発話中は音声認識を止められるようになりました。 これにより、ロボット側の合成音声を自分で認識してしまう現象を防ぐことが出来ます。 github.com/AkariGroup/aka… #akarirobot

AKARIの音声対話botの音声入力周りを改善。入力音量を監視し、閾値を超えた時だけGoogle STTへのリクエストを開始します。 音量が一定時間下がると強制終了。 対話アプリを起動しっぱなしにしても、Google STTへのリクエストは必要最低限になるはず。 github.com/AkariGroup/aka… #akarirobot

対話botの音声認識はGoogle STTを使っているのですが、他の音声認識でこの速度でストリーム出力できて精度いいものってあるんでしょうか？ 昔faster-whisperをちょっと使ったくらいで追いつけていないですが、ざっと調べてもあまり出て来ないので。 #akarirobot pic.twitter.com/ZprmN3hvHo

いい加減自分のAPIの使い方間違っているんじゃないかと思ってtemperature色々いじったんですが、別に良くはならないですね。大きく影響しそうなところtemperatureくらいだと思いますし。 #akarirobot

AKARIの音声対話botをClaude3.5に対応しました。 github.com/AkariGroup/aka… 新しいモデルが出るとまず掛け算と乗換案内を試すのですが、未だに掛け算の正答率50%くらいな気がする(正解は29833016)。 乗換案内はClaude3.5も誤答。gpt-4o以外は全くうまくいかないです。 #akarirobot #ChatGPT #Claude3 pic.twitter.com/bNjR4g33rS