ARIA SnapshotでLLMにWebを見せる発想は面白いな。そのうち人間よりアクセシビリティに詳しくなりそう
われわれは18年前にはUI automation frameworkをgtk(atk)に結びつける作業をやっていたので、(「知ってた」とは別に)こんな感じで盛り返してくることがあるんだなあという気持ち
適切なrole、aria-label、見出し構造...これらがLLMにとっての「ページの見え方」を決める
アクセシビリティツリーで要素を選択するというのはTesting Libraryとかの影響があるのかな?
2026元日、Playwright MCPに触れて気づいた、LLM時代のブラウザ自動化の新しいパラダイム
ARIA SnapshotでLLMにWebを見せる発想は面白いな。そのうち人間よりアクセシビリティに詳しくなりそう
われわれは18年前にはUI automation frameworkをgtk(atk)に結びつける作業をやっていたので、(「知ってた」とは別に)こんな感じで盛り返してくることがあるんだなあという気持ち
適切なrole、aria-label、見出し構造...これらがLLMにとっての「ページの見え方」を決める
アクセシビリティツリーで要素を選択するというのはTesting Libraryとかの影響があるのかな?