servicenow/browsergym은 웹 브라우저에서 하는 작업을 자동화하는 Gym 환경이다. Gym은 에이전트가 환경의 관찰을 받고 행동을 보내는 상호작용 규격이다. 저장소는 파이썬으로 작성됐고, 공개된 최신 릴리스는 v0.14.3이다. 이번 기록에 v0.14.3의 변경 목록은 없어, 이 글은 버전과 공개된 범위를 다룬다.
README는 이 저장소를 웹 에이전트(web agent) 연구를 촉진하기 위한 오픈소스 프레임워크로 설명한다. MiniWoB, WebArena, VisualWebArena, WorkArena 등 여러 벤치마크를 기본으로 제공하고, 이들이 다루는 실제 작업을 공통 Gym API로 묶어 실행하고 평가하는 점이 핵심이다. 소비자용 제품이 아니라 연구와 평가를 위한 도구이고, 2024년 2월에 생성된 저장소의 공개된 스타 수는 1408개다.
한계는 두 가지다. 첫째, 라이선스가 NOASSERTION으로만 기록돼 있어 사용 조건과 배포 조건은 저장소 원문을 직접 확인해야 한다. 둘째, 이 저장소는 새로운 벤치마크를 만드는 곳이 아니라 이미 공개된 벤치마크를 한 환경 틀에 모아 실행하는 쪽이다. 실제 에이전트의 성적이나 성능 비교 수치는 이 저장소의 기록에 담겨 있지 않다. 여러 벤치마크를 같은 규격 아래에서 돌려 보려는 작업에는 쓸 수 있지만, 성능 우열은 지금 이 기록만으로 판단하기 이르다.