model update
Browse files
README.md
CHANGED
@@ -58,14 +58,14 @@ This model is fine-tuned version of [google/mt5-small](https://huggingface.co/go
|
|
58 |
[lmqg/qg_koquad](https://huggingface.co/datasets/lmqg/qg_koquad) (dataset_name: default) via [`lmqg`](https://github.com/asahi417/lm-question-generation).
|
59 |
This model is fine-tuned on the answer extraction task as well as the question generation.
|
60 |
|
61 |
-
Please cite our paper if you use the model ([
|
62 |
|
63 |
```
|
64 |
|
65 |
@inproceedings{ushio-etal-2022-generative,
|
66 |
-
title = "{G}enerative {L}anguage {M}odels for {P}aragraph-{L}evel {Q}uestion {G}eneration
|
67 |
author = "Ushio, Asahi and
|
68 |
-
Alva-Manchego, Fernando
|
69 |
Camacho-Collados, Jose",
|
70 |
booktitle = "Proceedings of the 2022 Conference on Empirical Methods in Natural Language Processing",
|
71 |
month = dec,
|
@@ -82,20 +82,29 @@ Please cite our paper if you use the model ([TBA](TBA)).
|
|
82 |
- **Training data:** [lmqg/qg_koquad](https://huggingface.co/datasets/lmqg/qg_koquad) (default)
|
83 |
- **Online Demo:** [https://autoqg.net/](https://autoqg.net/)
|
84 |
- **Repository:** [https://github.com/asahi417/lm-question-generation](https://github.com/asahi417/lm-question-generation)
|
85 |
-
- **Paper:** [
|
86 |
|
87 |
### Usage
|
|
|
88 |
```python
|
89 |
|
90 |
-
from
|
|
|
|
|
|
|
|
|
91 |
|
92 |
-
|
93 |
-
pipe = pipeline("text2text-generation", model_path)
|
94 |
|
95 |
-
|
96 |
-
|
97 |
|
98 |
-
|
|
|
|
|
|
|
|
|
|
|
99 |
question = pipe('generate question: 1990년 영화 《 <hl> 남부군 <hl> 》에서 단역으로 영화배우 첫 데뷔에 이어 같은 해 KBS 드라마 《지구인》에서 단역으로 출연하였고 이듬해 MBC 《여명의 눈동자》를 통해 단역으로 출연하였다.')
|
100 |
|
101 |
```
|
@@ -134,11 +143,12 @@ The following hyperparameters were used during fine-tuning:
|
|
134 |
The full configuration can be found at [fine-tuning config file](https://huggingface.co/lmqg/mt5-small-koquad-multitask/raw/main/trainer_config.json).
|
135 |
|
136 |
## Citation
|
|
|
137 |
|
138 |
@inproceedings{ushio-etal-2022-generative,
|
139 |
-
title = "{G}enerative {L}anguage {M}odels for {P}aragraph-{L}evel {Q}uestion {G}eneration
|
140 |
author = "Ushio, Asahi and
|
141 |
-
Alva-Manchego, Fernando
|
142 |
Camacho-Collados, Jose",
|
143 |
booktitle = "Proceedings of the 2022 Conference on Empirical Methods in Natural Language Processing",
|
144 |
month = dec,
|
@@ -147,3 +157,4 @@ The full configuration can be found at [fine-tuning config file](https://hugging
|
|
147 |
publisher = "Association for Computational Linguistics",
|
148 |
}
|
149 |
|
|
|
|
58 |
[lmqg/qg_koquad](https://huggingface.co/datasets/lmqg/qg_koquad) (dataset_name: default) via [`lmqg`](https://github.com/asahi417/lm-question-generation).
|
59 |
This model is fine-tuned on the answer extraction task as well as the question generation.
|
60 |
|
61 |
+
Please cite our paper if you use the model ([https://arxiv.org/abs/2210.03992](https://arxiv.org/abs/2210.03992)).
|
62 |
|
63 |
```
|
64 |
|
65 |
@inproceedings{ushio-etal-2022-generative,
|
66 |
+
title = "{G}enerative {L}anguage {M}odels for {P}aragraph-{L}evel {Q}uestion {G}eneration",
|
67 |
author = "Ushio, Asahi and
|
68 |
+
Alva-Manchego, Fernando and
|
69 |
Camacho-Collados, Jose",
|
70 |
booktitle = "Proceedings of the 2022 Conference on Empirical Methods in Natural Language Processing",
|
71 |
month = dec,
|
|
|
82 |
- **Training data:** [lmqg/qg_koquad](https://huggingface.co/datasets/lmqg/qg_koquad) (default)
|
83 |
- **Online Demo:** [https://autoqg.net/](https://autoqg.net/)
|
84 |
- **Repository:** [https://github.com/asahi417/lm-question-generation](https://github.com/asahi417/lm-question-generation)
|
85 |
+
- **Paper:** [https://arxiv.org/abs/2210.03992](https://arxiv.org/abs/2210.03992)
|
86 |
|
87 |
### Usage
|
88 |
+
- With [`lmqg`](https://github.com/asahi417/lm-question-generation#lmqg-language-model-for-question-generation-)
|
89 |
```python
|
90 |
|
91 |
+
from lmqg import TransformersQG
|
92 |
+
# initialize model
|
93 |
+
model = TransformersQG(language='ko', model='lmqg/mt5-small-koquad-multitask')
|
94 |
+
# model prediction
|
95 |
+
question_answer = model.generate_qa("1990년 영화 《 남부군 》에서 단역으로 영화배우 첫 데뷔에 이어 같은 해 KBS 드라마 《지구인》에서 단역으로 출연하였고 이듬해 MBC 《여명의 눈동자》를 통해 단역으로 출연하였다.")
|
96 |
|
97 |
+
```
|
|
|
98 |
|
99 |
+
- With `transformers`
|
100 |
+
```python
|
101 |
|
102 |
+
from transformers import pipeline
|
103 |
+
# initialize model
|
104 |
+
pipe = pipeline("text2text-generation", 'lmqg/mt5-small-koquad-multitask')
|
105 |
+
# answer extraction
|
106 |
+
answer = pipe('extract answers: 또한 스피어스는 많은 새로운 여성 아티스트들에게 영향을 끼쳤는데, 대표적으로 데미 로바토, 케이티 페리, 크리스티니아 드바지, 레이디 가가, 리틀 부츠, 셀레나 고메즈 & 더씬, 픽시 로트 이 있다. 2007년 비욘세 놀스는 Total Request Live와의 인터뷰에서 '나는 브리트니를 사랑하고 팬이에요. 특히 새 앨범 Blackout을 좋아해요'라고 말했다. 린제이 로한은 '언제나 브리트니 스피어스에게 영감을 받는다. 학창시절 그녀처럼 타블로이드에 오르기를 꿈꿔왔다'고 말하며 롤 모델로 꼽았다. 스피어스는 현대 음악가들에게 음악적 영감으로 언급되기도 했다. <hl> 마일리 사이러스는 자신의 히트곡 Party in the U.S.A. 가 브리트니에게 영감과 영향을 받은 곡이라고 밝혔다. <hl> 베리 매닐로우의 앨범 15 Minutes 역시 브리트니에게 영감을 얻었다고 언급되었다.')
|
107 |
+
# question generation
|
108 |
question = pipe('generate question: 1990년 영화 《 <hl> 남부군 <hl> 》에서 단역으로 영화배우 첫 데뷔에 이어 같은 해 KBS 드라마 《지구인》에서 단역으로 출연하였고 이듬해 MBC 《여명의 눈동자》를 통해 단역으로 출연하였다.')
|
109 |
|
110 |
```
|
|
|
143 |
The full configuration can be found at [fine-tuning config file](https://huggingface.co/lmqg/mt5-small-koquad-multitask/raw/main/trainer_config.json).
|
144 |
|
145 |
## Citation
|
146 |
+
```
|
147 |
|
148 |
@inproceedings{ushio-etal-2022-generative,
|
149 |
+
title = "{G}enerative {L}anguage {M}odels for {P}aragraph-{L}evel {Q}uestion {G}eneration",
|
150 |
author = "Ushio, Asahi and
|
151 |
+
Alva-Manchego, Fernando and
|
152 |
Camacho-Collados, Jose",
|
153 |
booktitle = "Proceedings of the 2022 Conference on Empirical Methods in Natural Language Processing",
|
154 |
month = dec,
|
|
|
157 |
publisher = "Association for Computational Linguistics",
|
158 |
}
|
159 |
|
160 |
+
```
|