Poke-Controllerとは、（剣盾以降の）ポケモン向けの画像認識を使ったNintendoSwitchの操作を自動化するためのソフトです。
Switch用なので「HDMIキャプチャによる映像取り込み」と「Arduinoによる疑似プロコン操作」によってそれを可能にしています。
tangential-star.hatenablog.jp
これをVC版ポケモンで使うための課題は
「3DSの画面をカメラ映像として取り込む方法」
「疑似プロコン向けの操作コマンドを3DSに送る方法」
の2つがあります。
前者は「Webカメラで直撮りという方法」もありますが画像認識（キャプ画像と照らし合わせる方式）と相性が悪いので「偽トロでPCに取り込む方法」をとることにしました。
ですが偽トロは専用ソフトで取り込む為、そのままではPoke-Controllerが取り込んでくれません。なのでゲーム配信に使われるOBS＋VirtualCamを経由させてカメラ映像として取り込む方法を使い解決ました。
（偽トロについては公式サイトを参照。オプティマイズ（電子工作・ゲームハード解析））
（Poke-ControllerはOBSの仮想カメラ機能に対応していないのでVirtualCam導入が必要。参考：【BDSP ID調整】Player BlinkとPoke-Controllerを共存させる｜こちゃてす｜note]）
後者はController Modを組み込んでCGコンに対応させる方法（＋Arduinoの疑似GCコン化も必要）もあるようですが日本国内では気軽に入手できるものではないようなのでここでは無しとします。（再現困難な方法はあまり使いたくないので）
例によって「3DSからボタンの電極を抜き出し、フォトカプラ（≒リレー）を使用してボタンを押す方法」を使う事にしました。（この方法にはFC/SFC/N64どころかどのハードにも転用が利く利点があります）
そこで問題となるのはどうやってボタン信号を取り出すかです。
基本的にどこもシリアル通信（PC-シリアル変換アダプタ間、シリアル変換アダプタ-Arduino間、Arduino-Switch間）なのでパラレル通信（各ボタンへの信号）にどうにかして変える必要があります。
そこで目が付くのがArduino部分。Arduinoにはデジタル出力（2～13の12個）があるのでそこから各ボタンへ信号を送ることができます。
問題はArduinoでシリアル通信を解読するプログラムをどうするのかです。0から書くというのはなかなか難しいです。
そこでArduinoに書き込む疑似プロコンのプログラム（"Poke-ControllerForLeonardo.inoと同_Func.ino"）に追加で「本来のボタン入力に連動してデジタル出力を行うプログラム」を書き加えました。
これで得たデジタル出力をフォトカプラに入力して、出力を3DSのボタンの電極に接続。それをボタンの数だけ用意する。
これで操作コマンドを3DSに送る方法が解決しました。
・ブレッドボードでの試作機
・専用基板での実用機
シリアル変換アダプタの「5V」をLeonardoの「VIN」に繋いで電源供給しています。
あとは通常のPoke-Controller同様にプログラムを制作するだけです。
注意点：十字キーを使うのでHatのimportが必要です。~.pyの5行目「from Commands.Keys import KeyPress, Button, Direction, Stick, Hat」
・書き加えたプラグラム
続きを読む
