arabert
Pre-trained Transformers for Arabic Language Understanding and Generation (Arabic BERT, Arabic GPT2, Arabic ELECTRA)
파일 탐색기
최종 버전 다운로드 (.zip)- publish-to-pypi.yml
- publish-to-test-pypi.yml
- __init__.py
- create_classification_data.py
- create_pretraining_data.py
- extract_features.py
- lamb_optimizer.py
- LICENSE
- modeling.py
- optimization.py
- Readme.md
- run_classifier.py
- run_pretraining.py
- run_squad.py
- sample_text.txt
- tokenization.py
- classification_metrics.py
- classification_tasks.py
- mrqa_official_eval.py
- qa_metrics.py
- qa_tasks.py
- squad_official_eval.py
- squad_official_eval_v1.py
- tagging_metrics.py
- tagging_tasks.py
- tagging_utils.py
- __init__.py
- feature_spec.py
- preprocessing.py
- scorer.py
- task.py
- task_builder.py
- __init__.py
- modeling.py
- optimization.py
- tokenization.py
- __init__.py
- pretrain_data.py
- pretrain_helpers.py
- __init__.py
- training_utils.py
- utils.py
- .gitignore
- __init__.py
- build_openwebtext_pretraining_dataset.py
- build_pretraining_dataset.py
- build_pretraining_dataset_single_file.py
- configure_finetuning.py
- configure_pretraining.py
- flops_computation.py
- LICENSE
- README.md
- run_finetuning.py
- run_pretraining.py
- large_hparams.json
- medium_hparams.json
- mega_hparams.json
- small_hparams.json
- __init__.py
- lamb_optimizer.py
- optimization.py
- run_pretraining.py
- __init__.py
- dataloader.py
- modeling.py
- modeling_gpt2.py
- optimization_adafactor.py
- train_tpu.py
- utils.py
- AraGPT2-mega_corona_vaccine.pdf
- AraGPT2-mega_misc.pdf
- AraGPT2-mega_stories.pdf
- AraGPT2-zero-shot-ARCD.txt
- AraGPT2-zero-shot-TydiQA.txt
- Detection of Machine Generated Text - Google Forms.pdf
- .gitignore
- __init__.py
- create_pretraining_data.py
- LICENSE
- README.md
- requirements.txt
- train_bpe_tokenizer.py
- araBERT_(Updated_Demo_TF).ipynb
- AraBERT_ANERCorp_CamelSplits.ipynb
- AraBERT_Fill_Mask.ipynb
- AraBert_output_Embeddings_PyTorch.ipynb
- AraBERT_Text_Classification_with_HF_Trainer_Pytorch_GPU.ipynb
- AraBERT_with_fast_bert.ipynb
- MTL_AraBERT_Offensive_Lanaguage_detection.ipynb
- README.md
- run_qa.py
- squad_preprocessing.py
- trainer_qa.py
- utils_qa.py
- README.md
- .gitignore
- __init__.py
- arabert_logo.png
- AraELECTRA.png
- AraGPT2.png
- preprocess.py
- README.md
- requirements.txt
- setup.py
# 설치 가이드
1. 코드 내려받기
git clone https://github.com/aub-mind/arabert
깃허브에서 프로젝트 코드 전체를 내 컴퓨터로 내려받습니다.
cd arabert
방금 내려받은 프로젝트 폴더 안으로 이동합니다.
2. 공식 설치 스크립트
쉬움 추천사전 준비물
- Python 3 pip 명령어를 쓰려면 Python이 필요합니다.
pip install arabert
PyPI에 배포된 패키지를 바로 설치합니다. 소스 클론이 필요 없습니다.
설치 후 새 터미널을 열고, 프로그램의 버전 확인 명령(예: --version)으로 정상 설치됐는지 확인하세요.
이 레포의 README에 적힌 실제 명령어를 그대로 가져왔습니다.
// repository documentation
Was this content helpful?
(0 ratings)
