ApolloCorpora の多言語医療データセット

日期

9 个月前

大小

61.63 GB

机构

香港

发布地址

huggingface.co

标签

ApolloCorpora は、深センビッグデータ研究所と香港中文大学の研究チームが共同で構築した多言語医療データセットです。このデータセットは、英語、中国語、ヒンディー語、スペイン語、フランス語、アラビア語を含む、世界 61 億人が話す 6 つの主要言語をカバーしています。

データ収集には、書籍、臨床ガイドライン、百科事典、論文、フォーラム、試験が含まれます。データ処理の観点から、研究者らは元のトレーニング前コーパスを質問と回答のペアに変換して、モデルの医療機能を強化しました。 ApolloCorpora は、異なる文化や医療システムに適応するために、症状の診断、薬剤名、コミュニケーション用語、医療行為の基準などのローカライズされた機能にも重点を置いています。このデータセットは、多言語医療 AI モデルの開発と評価のための強固な基盤を提供し、医療 AI テクノロジーの世界的な適用の促進に役立ちます。

ApolloCorpus.torrent

做种 2

下载中 1

已完成 70

总下载 77

  • ApolloCorpus/
    • README.md
      1.51 KB
    • README.txt
      3.01 KB
      • data/
        • ApolloCorpus.zip
          20.17 GB
          • ApolloCorpus/
              • .git/
                • HEAD
                  20.17 GB
                • config
                  20.17 GB
                • description
                  20.17 GB
                  • hooks/
                    • applypatch-msg.sample
                      20.17 GB
                    • commit-msg.sample
                      20.17 GB
                    • fsmonitor-watchman.sample
                      20.17 GB
                    • post-checkout
                      20.17 GB
                    • post-commit
                      20.17 GB
                    • post-merge
                      20.17 GB
                    • post-update.sample
                      20.17 GB
                    • pre-applypatch.sample
                      20.17 GB
                    • pre-commit.sample
                      20.17 GB
                    • pre-merge-commit.sample
                      20.17 GB
                    • pre-push
                      20.17 GB
                    • pre-push.sample
                      20.17 GB
                    • pre-rebase.sample
                      20.17 GB
                    • pre-receive.sample
                      20.17 GB
                    • prepare-commit-msg.sample
                      20.17 GB
                    • push-to-checkout.sample
                      20.17 GB
                    • update.sample
                      20.17 GB
                • index
                  20.17 GB
                  • info/
                    • exclude
                      20.17 GB
                  • lfs/
                      • objects/
                          • 11/
                              • 92/
                                • 1192fe7bd289f093b8f396fbb170f840251c8c131e717006719a578a45b9ac21
                                  21.11 GB
                          • 12/
                              • 1f/
                                • 121f8b1c5a4b43bdb333f24f3a7de5d74747911979bbd7fd949319191f828f0a
                                  21.12 GB
                          • 28/
                              • be/
                                • 28be668d69ca50c9663f3c76de98ebcc3a58193fca7bd064729956f054619fcc
                                  22.28 GB
                          • 29/
                              • 0a/
                                • 290a32cd7cb11008f75e1c900561ee06d12b3de0b3eb5387c7eeffad94374512
                                  22.41 GB
                          • 31/
                              • d6/
                                • 31d686969d1ff43a133ef78d9e5ce9748a3d29bb4d13da5ad072b11f02642cc3
                                  22.72 GB
                          • 32/
                              • 28/
                                • 3228e7f07ff481d4c8152f2637cdcb4e3267499db1411ca35c927061656f431a
                                  22.76 GB
                          • 36/
                              • 06/
                                • 3606f698c026dded753f49d0e18d200ded4118d54eab76d806dde65f5c45dd5f
                                  22.83 GB
                          • 40/
                              • a4/
                                • 40a463c8f0d0b61904d383973d83cefd11f70485675df0bda24708f83aed4fa2
                                  22.94 GB
                          • 50/
                              • 9d/
                                • 509de1d3f83919d962395c379ac2ee90021f5dc66c5090840b3f3e57db02059f
                                  24.38 GB
                          • 58/
                              • 55/
                                • 5855b20e017ef701a43cb6f66601c0f21bd8c2f3c83bae09441a0e9a9054b8fc
                                  26.43 GB
                          • 66/
                              • ef/
                                • 66ef20d6b556de8288628e9d231ab14fbe9334f7c5e0b05a8c1ee2f126fc78db
                                  26.75 GB
                          • 70/
                              • 82/
                                • 70823abe1a64276779080b1d315cfd01a39f5038762aee96d51ea8ecb9cbdfd5
                                  26.77 GB
                          • 88/
                              • 76/
                                • 887608dbfc32fd2d82a076701c56bbca87e85d42f09c02752f4f391768fbc9c0
                                  27.53 GB
                          • 91/
                              • 8b/
                                • 918b2ef2c528f4b00f54cc18eb99ecc56d895a61de7521ef70c7a256f8108914
                                  28.03 GB
                          • 96/
                              • de/
                                • 96de5e54ca11e82987680a802cc9191659f1f7843f310c6827f34a656a7f570c
                                  29.08 GB
                          • 00/
                              • 1c/
                                • 001c6a7373cc466033637f7824b0b0edbb92ea04684fb538a4a7202c99d9454a
                                  20.22 GB
                          • 03/
                              • bb/
                                • 03bb47a85d7c1c7c0b63e1b88111b941114eaa5979ea46bded580f7a2744fc18
                                  21.07 GB
                          • 09/
                              • 40/
                                • 09405bf3a1ece73190f65935a8e64a413de2bf6260208a49a94fd6acc3c3b8d1
                                  21.09 GB
                          • 0b/
                              • 8d/
                                • 0b8def5335be2d2ba254539e9455138d4f5e6767a79349820ec92d42bb2b055b
                                  21.09 GB
                          • 1b/
                              • a8/
                                • 1ba8c980524f8d6abceefeba751ba3fb9c1468c040f6950d669f47ef568842c0
                                  22.03 GB
                          • 1d/
                              • 6d/
                                • 1d6d9a7a48717bc1e1f13e0e2430e614d0da40118814bc9c6f4568aa79ac549c
                                  22.11 GB
                          • 2a/
                              • 75/
                                • 2a755f50baded82c74f9fce895bcf8f6f8ce9eba53b451a4120fddce872eb0e5
                                  22.54 GB
                          • 2c/
                              • 6f/
                                • 2c6feca5547754b2381b29fc06ecc400a60fa007ca37750c9392d6ecf1fbdfb4
                                  22.54 GB
                          • 4b/
                              • 24/
                                • 4b24421da10c797b2f20ccc9eb8f1ce1f9eedb1d65e44f8941f62ae011392c11
                                  23.93 GB
                          • 5a/
                              • 79/
                                • 5a79cd825fb49654ecc267f790a799cc809c6dd595b3399774d8bb00c8fbb386
                                  26.43 GB
                          • 5d/
                              • 2b/
                                • 5d2b4016abe17ef24ef27ead7c8765a416ff15bd4bbdea9d00c3d543c80712eb
                                  26.64 GB
                          • 8e/
                              • 59/
                                • 8e597e0eb9f09e71a5b0332d570c981acec5bacf829c32c96611e31dccbf42f2
                                  27.82 GB
                          • a0/
                              • c2/
                                • a0c222b7a4ee76ddf568935fe9c3f6eaec091d5a01add17f9bfca36c39b2bd2f
                                  29.24 GB
                          • ab/
                              • aa/
                                • abaae528c035b713a58aac475c24cab47298fb22328077ab5c5817f9838265cf
                                  29.39 GB
                          • b8/
                              • 3e/
                                • b83ea8904a78c8464de6cc68b9469579720c6bdd9f920e11dc6f2dad55d3d155
                                  29.52 GB
                          • bd/
                              • a9/
                                • bda92d7820be87ef3b5a7f9049e8665c4dde7284e6516fd0032d0b8f7256c34a
                                  29.53 GB
                          • cc/
                              • 43/
                                • cc438db53d75c1fe1765021c6a6aa769535b54f3b37b43045043025f90684377
                                  30.9 GB
                              • 99/
                                • cc991c8a17630e7c6650e76426445655f53805f7e4c7a31074a66483406fddd5
                                  30.95 GB
                          • cd/
                              • 70/
                                • cd70ca408a32c4005f811566b716ce09a9b5a0ded7a0299c992d7d99de52e71e
                                  31.15 GB
                              • b7/
                                • cdb7b2915c5f32f5496411e8c806aa98dbb82a389bfbfc738738f5d5e5c38931
                                  31.16 GB
                          • d2/
                              • 77/
                                • d2771d871aab637359e9f764ab647fe9b56e59477d3632d0080b63a2bf823c3a
                                  31.59 GB
                              • e2/
                                • d2e2b93393a1dbbcbf63a1ea64fd6fb97c1b2f8230d2d60b755e352d9dfb3f8a
                                  32.25 GB
                          • dc/
                              • ae/
                                • dcae9fbb4429e9772b8159c9c70d9c14d580f298124ddb762651f70add6dfce7
                                  37.39 GB
                              • e0/
                                • dce0f91395ceb8aea2413e4af9bf166e5e93b8d7b028daca45cc4391560333b1
                                  37.48 GB
                          • e5/
                              • ae/
                                • e5aed9b405031f350c979620b65b86a6655df86b2c078ac399f638a38445600e
                                  37.63 GB
                          • f3/
                              • 64/
                                • f364c1f06b0c8b804c7d03e956817413c2eb52866f7bec123e46abc06a9fb170
                                  37.88 GB
                          • f8/
                              • 3b/
                                • f83bb54737b6c5258fefc43f66d0fa6678d7d70126467ddc8eb945768615c4ca
                                  38.82 GB
                          • f9/
                              • 85/
                                • f985f11bd88135fc9ff5bc8e02d1268627287ad6bd5df354488c341bb278258f
                                  38.97 GB
                          • fb/
                              • 2b/
                                • fb2b4a91ac8d40976e0cfc36c43d5d45c8350d285c165db59a18f4c45a6c65aa
                                  39.64 GB
                          • fc/
                              • a2/
                                • fca27918051cb8bd48336cfd9893bbc6fa5c71f1af38c5ab745175d13da3077f
                                  40.89 GB
                  • logs/
                    • HEAD
                      40.89 GB
                      • refs/
                          • heads/
                            • main
                              40.89 GB
                          • remotes/
                              • origin/
                                • HEAD
                                  40.89 GB
                  • objects/
                      • pack/
                        • pack-a2f2ba428232b1d100aa2720f5f3468e1bd0398b.idx
                          40.89 GB
                        • pack-a2f2ba428232b1d100aa2720f5f3468e1bd0398b.pack
                          40.9 GB
                • packed-refs
                  40.9 GB
                  • refs/
                      • heads/
                        • main
                          40.9 GB
                      • remotes/
                          • origin/
                            • HEAD
                              40.9 GB
            • .gitattributes
              40.9 GB
            • ApolloCorpus.zip
              46.04 GB
            • README.md
              46.04 GB
              • assets/
                • apollo_medium_final.png
                  46.04 GB
                • dataset.png
                  46.04 GB
                • result.png
                  46.04 GB
              • check_exam/
                • check_en.py
                  46.04 GB
                • check_es.py
                  46.04 GB
                • check_fr.py
                  46.04 GB
                • check_zh.py
                  46.04 GB
                  • questions/
                    • ar_question.json
                      46.04 GB
                    • en_question.json
                      46.05 GB
                    • es_question.json
                      46.05 GB
                    • fr_question.json
                      46.05 GB
                    • hi_question.json
                      46.05 GB
                    • zh_question.json
                      46.05 GB
              • train/
                  • pretrain/
                    • medicalBook_en_qa.json
                      46.9 GB
                    • medicalBook_en_text.json
                      48.15 GB
                    • medicalBook_zh_qa.json
                      48.81 GB
                    • medicalBook_zh_text.json
                      49.23 GB
                    • medicalGuideline_en_qa.json
                      49.38 GB
                    • medicalGuideline_en_text.json
                      49.52 GB
                    • medicalPaper_en_qa.json
                      50.43 GB
                    • medicalPaper_en_text.json
                      51.47 GB
                    • medicalPaper_es_qa.json
                      51.59 GB
                    • medicalPaper_es_text.json
                      51.75 GB
                    • medicalPaper_fr_qa.json
                      51.76 GB
                    • medicalPaper_fr_text.json
                      51.78 GB
                    • medicalPaper_zh_qa.json
                      51.99 GB
                    • medicalPaper_zh_text.json
                      52.14 GB
                    • medicalWeb_en_qa.json
                      52.81 GB
                    • medicalWeb_en_text.json
                      54.85 GB
                    • medicalWeb_es_qa.json
                      55.01 GB
                    • medicalWeb_es_text.json
                      55.22 GB
                    • medicalWeb_zh_qa.json
                      56.2 GB
                    • medicalWeb_zh_text.json
                      57.57 GB
                    • medicalWiki_en_qa.json
                      57.82 GB
                    • medicalWiki_en_text.json
                      58.76 GB
                    • medicalWiki_fr_qa.json
                      58.77 GB
                    • medicalWiki_fr_text.json
                      58.79 GB
                    • medicalWiki_hi_qa.json
                      58.79 GB
                    • medicalWiki_hi_text.json
                      58.79 GB
                • question_dup.py
                  58.79 GB
                  • sft/
                    • code_en.json
                      58.83 GB
                    • code_zh.json
                      58.85 GB
                    • general_ar.json
                      58.93 GB
                    • general_en.json
                      59.69 GB
                    • general_es.json
                      59.76 GB
                    • general_fr.json
                      59.84 GB
                    • general_hi.json
                      59.95 GB
                    • general_zh.json
                      60.25 GB
                    • math_en.json
                      60.3 GB
                    • math_zh.json
                      60.31 GB
                    • medicalExam_en.json
                      60.49 GB
                    • medicalExam_en_clean.json
                      60.67 GB
                    • medicalExam_en_dup.json
                      60.67 GB
                    • medicalExam_en_dup_question.json
                      60.67 GB
                    • medicalExam_es.json
                      60.67 GB
                    • medicalExam_es_clean.json
                      60.67 GB
                    • medicalExam_es_dup.json
                      60.67 GB
                    • medicalExam_es_dup_question.json
                      60.67 GB
                    • medicalExam_fr.json
                      60.67 GB
                    • medicalExam_fr_clean.json
                      60.67 GB
                    • medicalExam_fr_dup.json
                      60.67 GB
                    • medicalExam_fr_dup_question.json
                      60.67 GB
                    • medicalExam_zh.json
                      60.8 GB
                    • medicalExam_zh_clean.json
                      60.92 GB
                    • medicalExam_zh_dup.json
                      60.92 GB
                    • medicalExam_zh_dup_question.json
                      60.92 GB
                    • medicalPatient_ar.json
                      60.97 GB
                    • medicalPatient_en.json
                      61.43 GB
                    • medicalPatient_zh.json
                      61.63 GB