ScienceAgentBench

(★ 159)

[ICLR'25] ScienceAgentBench: Toward Rigorous Assessment of Language Agents for Data-Driven Scientific Discovery

파일 탐색기

최종 버전 다운로드 (.zip)

- README.md
- - README.md
- base_engine.py
- bedrock_engine.py
- openai_engine.py
- - __init__.py
  - constants.py
  - docker_build.py
  - docker_utils.py
  - dockerfiles.py
  - grading.py
  - log_parsers.py
  - prepare_images.py
  - remove_containers.py
  - run_evaluation.py
  - test_spec.py
  - utils.py
.gitignore
agent.py
calculate_metrics.py
compare_diff.py
compute_scores.py
config_conda_env.py
gpt4_visual_judge.py
LICENSE
README.md
recover_pred_from_log.py
requirements.txt
run_eval.py
run_evaluation.sh
run_infer.py

# 설치 가이드

1. 코드 내려받기

git clone https://github.com/OSU-NLP-Group/ScienceAgentBench

깃허브에서 프로젝트 코드 전체를 내 컴퓨터로 내려받습니다.

cd ScienceAgentBench

방금 내려받은 프로젝트 폴더 안으로 이동합니다.

2. 공식 설치 스크립트

쉬움 추천

사전 준비물

Python 3 pip 명령어를 쓰려면 Python이 필요합니다.

pip install pip-tools

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

pip install docker # install Docker SDK for Python

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

✅ 설치 후 새 터미널을 열고, 프로그램의 버전 확인 명령(예: --version)으로 정상 설치됐는지 확인하세요.

이 레포의 README에 적힌 실제 명령어를 그대로 가져왔습니다.

3. Python

쉬움

사전 준비물

Git GitHub에서 프로젝트 코드를 내려받으려면 필요합니다.
Python 3 설치 시 'Add Python to PATH' 옵션을 꼭 체크하세요 (Windows).

conda create -n sci-agent python=3.10 pip setuptools wheel

이 명령어를 터미널에 그대로 입력해 실행하세요.

pip install -r requirements.txt

requirements.txt 등에 명시된 파이썬 라이브러리를 설치합니다.

conda create -n sci-agent-eval python=3.10 pip setuptools wheel

이 명령어를 터미널에 그대로 입력해 실행하세요.

pip install pip-tools

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

pip install docker # install Docker SDK for Python

PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.

✅ 에러 메시지 없이 실행되고 터미널에 안내 문구가 출력되면 정상입니다.

이 레포의 README에 적힌 실제 명령어를 그대로 가져왔습니다.