Closes #621 | Add Dataloader VlogQA

[akhdanfadh]

Closes #621

Local dataset test result screenshot:

Full test result:

(seacrowd) ➜  seacrowd-datahub git:(vlogqa) ✗ python -m tests.test_seacrowd seacrowd/sea_datasets/vlogqa/vlogqa.py --data_dir=data/vlogqa
INFO:__main__:args: Namespace(path='seacrowd/sea_datasets/vlogqa/vlogqa.py', schema=None, subset_id=None, data_dir='data/vlogqa', use_auth_token=None)
INFO:__main__:self.PATH: seacrowd/sea_datasets/vlogqa/vlogqa.py
INFO:__main__:self.SUBSET_ID: vlogqa
INFO:__main__:self.SCHEMA: None
INFO:__main__:self.DATA_DIR: data/vlogqa
INFO:__main__:Checking for _SUPPORTED_TASKS ...
module seacrowd.sea_datasets.vlogqa.vlogqa
INFO:__main__:Found _SUPPORTED_TASKS=[<Tasks.QUESTION_ANSWERING: 'QA'>]
INFO:__main__:_SUPPORTED_TASKS implies _MAPPED_SCHEMAS={'QA'}
INFO:__main__:schemas_to_check: {'QA'}
INFO:__main__:Checking load_dataset with config name vlogqa_source
/home/akhdan/miniconda3/envs/seacrowd/lib/python3.10/site-packages/datasets/load.py:2547: FutureWarning: 'use_auth_token' was deprecated in favor of 'token' in version 2.14.0 and will be removed in 3.0.0.
You can remove this warning by passing 'token=<use_auth_token>' instead.
  warnings.warn(
/home/akhdan/miniconda3/envs/seacrowd/lib/python3.10/site-packages/datasets/load.py:929: FutureWarning: The repository for vlogqa contains custom code which must be executed to correctly load the dataset. You can inspect the repository content at seacrowd/sea_datasets/vlogqa/vlogqa.py
You can avoid this message in future by passing the argument `trust_remote_code=True`.
Passing `trust_remote_code=True` will be mandatory to load this dataset from the next major release of `datasets`.
  warnings.warn(
Generating train split: 8386 examples [00:00, 11034.32 examples/s]
Generating validation split: 999 examples [00:00, 7562.42 examples/s]
Generating test split: 1062 examples [00:00, 13367.32 examples/s]
INFO:__main__:Checking load_dataset with config name vlogqa_seacrowd_qa
/home/akhdan/miniconda3/envs/seacrowd/lib/python3.10/site-packages/datasets/load.py:2547: FutureWarning: 'use_auth_token' was deprecated in favor of 'token' in version 2.14.0 and will be removed in 3.0.0.
You can remove this warning by passing 'token=<use_auth_token>' instead.
  warnings.warn(
/home/akhdan/miniconda3/envs/seacrowd/lib/python3.10/site-packages/datasets/load.py:929: FutureWarning: The repository for vlogqa contains custom code which must be executed to correctly load the dataset. You can inspect the repository content at seacrowd/sea_datasets/vlogqa/vlogqa.py
You can avoid this message in future by passing the argument `trust_remote_code=True`.
Passing `trust_remote_code=True` will be mandatory to load this dataset from the next major release of `datasets`.
  warnings.warn(
Generating train split: 8386 examples [00:00, 9544.75 examples/s]
Generating validation split: 999 examples [00:00, 12183.46 examples/s]
Generating test split: 1062 examples [00:00, 11418.98 examples/s]
INFO:__main__:Dataset sample [source]
{'id': 'uit_01__0-JkLbNiXvw_0_3', 'title': '0-JkLbNiXvw', 'context': 'a cho cô bán anh chị em và các bạn Hôm nay mình khuya sẽ chia sẻ món sườn non sốt bơ tỏi Ừ để mình có thịt sườn heo nên mua cái sườn non ý là cái xương này tức là khi mình chọn sườn mình nên mua cái sườn mà có cái xương nhỏ hay gãy xương là một cái tơ để lên cho một số các chị em mình lựa sườn thì nhớ cái cây sườn với phương này mới nhỏ con nếu như mà cái xương nó lớn là sự già và sau đó thì chặt ra tùy thích và rửa sạch sẽ với lại châm muối hoặc là giấm Muối rửa bằng nước nóng ấm khi giao việc cần cẩu Đó là tỏi củ hành tím của Phi sẽ để thành phần nguyên liệu bên dưới màn hình video trong phần mô tả ở đây là b và tỏi hành thì tùy theo mình thích ăn nhiều thì chơi nhiều rồi gia vị nêm sẽ có nước tương Maggi nè dầu hào nước mắm ngon tương ớt muối đường và nếu như mình có ăn bột ngọt thì cho một chút xíu hoặc là cho buộc Nam sau khi mình rửa với lại nước nóng ấm nhìn thấy miếng sườn táo luôn như vậy nè thì nó sẽ không có ra chất xơ cũng như là không có bị ra ký máu đỏ ngay chỗ đầu xưa nay Sứ Vô đây 1 muỗng cà phê vô như vậy muối A và 1/2 muỗng cà phê đường du lịch Úc tiêu chỉ cho ít thôi em không cho nhiều bởi vì chút nữa mình còn chia sau đó tóc đều rồi Ướt ở đây a tiếp theo là mình cần có hỏi mày hoặc là bầm cho Thiệp và Nguyễn luôn ở đây mình ấy cái cối size hay lấy dao này là size 10 ram tỏi ừ ừ ê ê [âm nhạc] sau khi mình xây bằng ký Tối hai đứa dao thì tỏi giống như là mày đó nhiều như vậy nè khi bước vào trong sương sau khi mình ước với tỏi Nguyễn Như vậy thì lúc chiên nó sẽ không bị cháy đồng thời là thơm ngon trong trường hợp anh chị em và các bạn không có xay nhuyễn được thì cũng có thể vắt mình lấy cái nước tỏi rồi ước với trung xương à ở cùng với lại 1 củ hành cũng xay nhuyễn giữa phương của hàng khoảng 40 g ừ ừ Anh ở mình sai là nó Nguyễn Như vậy là nó giống như mày sau đó cũng suốt đều lên cho thấm và Ướt trong vòng khoảng ít nhất là 30 phút ạ số tiếp theo bài hoặc là Face mình sẽ lấy cố vấn lấy dao the face 45 tỏi Mình sẽ nhấp thả nhất thả cho nó cắt bầm nhận bầm nếu mà thích nhiều tỏi hơn cũng có thể cho 70g đây là muốn cam ở Đức 10ml còn cái table school là 15ml thì mình lấy cái món canh 10ml này để Đông gia vị e14 cam nước tương Maggi Doctor Magiê ở Đức nước tương Maggi này cũng có một cái loại sản xuất và ba lan thì nó sẽ mạnh hơn còn nước tương này nó ngon hơn một món cam nước mắm loại ngon nếu mà cái loại không ngon thì mình có thể cho thèm chút khi giao heo aesthesys một món kem vuông hay là một tế bào school nước Anh bình thường hay mua cái loại này ừ ừ Ừ tước hiệu con gà hoặc là hiệu khác cũng được tuy thiếu ăn cay nhiều ít thì mình sẽ cho nên mình cho một muỗng cam luôn - 2 muỗng cà phê vuông đường ừ ừ à à Ừ nếu như nhà con bột ngọt thì cho 1/4 muỗng cà phê không ăn thì khỏi cho mà tiêu tiêu huy nhiều Chúc anh chị em và có bạn nào mình ăn được nhiều cá ướt thì có thể cho thêm ớt nữa do là cái này mình nằm cho con nít ăn tình thử mình không có chơi nhiều và 2 muỗng canh nước Anh thật là ba muốn cam thời sự nóng vội tan và Đời 30 phút sau cho thịt thấm gia vị Thì mình chiên ạ trò chơi nấu ăn vui chảo lượng dầu mình sẽ cho khoảng 1,5 cm hoặc là tùy theo anh chị em và các bạn cho nhiều hay là ít mình chân nhập có thể chinh ngâm ha gì và sử dụng cái chảo chống dính Ừ vậy để chiên không bị văng dầu thì mình sẽ cho tinh bột bắp hoặc là bột gạo hoặc là bột chiên giòn hoặc là bột năng hay bột mỳ không Cho tinh bột khoai tay khi dầu nóng phi tỏi trẻ em và các bạn Tôi để lửa lớn bỏ vô song nhìn thấy hơi bắt đầu trước vàng thì vớt tỏi ra liền bởi vì để lâu quá là bị đắng sau đó nhìn thấy tỏi hơi bắt đầu trước về là mình sẽ Phước tâm liền để tránh bị đắng như vậy là được à A và chờ nguội chút xíu là nó non Vàng luôn - 1 muỗng cà phê Vương Tinh bột bắp content dù cho lúc dầu nóng đó đánh tan ra là cho sườn vào chiên chiên sườn ở lửa lớn [âm nhạc] như vậy thì cường sao không có bị mất nước ngọt có thể mình kia ra làm hai hoặc là ba lần chị em mình đừng chia một lần chia một lần nữa đầy quá lắm rồi Tớ chờ khi mà nó nâu vàng rồi thì vớt ra mình chưa bột như về để cho không có bị văn khi chiên cách này mình tiên đã từng chia sẻ trong các video cách chiên không Văn Dầu anh chị em và các bạn có thể coi lại các video đó phải chuyên các món ăn sao cho không bị văng dầu sẽ làm miếng sườn này nó có nhiều sụn mà nó có nhiều thịt nữa nè nó dày lên đó ăn rất ngon luôn à anh thấy mắc xương nâu vàng lên rồi thì với xe mà để bên trái cây để cho chảy vào cũng như mình sẽ gỡ cái này ra chứ không thôi Nó bị cháy Đây là cái tỏi đâu Mình ước mơ đó à ừ ừ Xin chào các bạn hỏi là sau khi kia mà mình cho bồ có thì có sử dụng dầu này lại được không Thì vẫn sử dụng lại được bởi vì mình nhìn thấy ở đây cái Giàu nó sạch không bây giờ à ở những bơ tùy thích thế nào lấy khoảng 20g thôi cho nó cho toàn bộ cái chén sốt đây là tắt lửa cho sườn để rửa trung bình và nếu như mình thích ăn cái sườn mềm thì đậy nắp lại đảo rồi hầm cho nó mềm Nấu với lửa trung bình cho áo gia vị hết rồi đấy nắp lại lại và để lửa trung bình nhỏ nấu tự mồi cho đến 12 phút tùy theo mình thích mềm thì nó đau mình sẽ Nó mười phút nhé thỉnh thoảng mở nắp và đã hút từ trên xuống để cho nó Thắm nhìn thấy cái màu nó đẹp quá chừng chưa nè đò mình cứ nấu cho đến khi mềm đúng như ý Ừ thì cắt nửa ta nhớ là để lửa nhỏ trong trường hợp nhìn thấy khô thì có thể cho thêm chút xíu nước thôi quá Hương ăn quảng trường màu đẹp luôn và cái nước này nó sẽ mệt thỉnh thoảng chị em và các bạn nữa trở nha là mình nấu đến khi tâm thấy mềm như vậy nè được rồi Thì lúc đó mở nắp và đảo một lúc cho nó cạn bớt hoặc là nếu như mà mình thức ăn như vậy nè Chị để cái nước này chút nữa cho ăn cơm ăn rất ngon nhìn miếng sườn quá ngon luôn bóng mềm và thơm ơ rất status à Cho coi phim mình nói chứ đến cái đồ sệt vừa ý thích của mình thì lúc đó các bác mà cho tỏi đỏ lúc này rất giòn em như vậy là mình tiếng Việt chia sẽ xong đến cô bác anh chị em và các bạn Cường tốt bơ tỏi và chúc nhà nhà cùng ăn cơm thiệt ngon bây giờ Xin chào tạm biệt hẹn gặp lại ở video kỳ tới sườn non sốt bơ tỏi ăn cơm à à', 'question': 'Nước tương được sử dụng để nêm hãng gì?', 'answers': {'text': ['Maggi'], 'answer_start': [711]}}
INFO:__main__:Dataset sample [seacrowd_qa]
{'id': '0', 'question_id': 'uit_01__0-JkLbNiXvw_0_3', 'document_id': '0-JkLbNiXvw', 'question': 'Nước tương được sử dụng để nêm hãng gì?', 'type': None, 'choices': [], 'context': 'a cho cô bán anh chị em và các bạn Hôm nay mình khuya sẽ chia sẻ món sườn non sốt bơ tỏi Ừ để mình có thịt sườn heo nên mua cái sườn non ý là cái xương này tức là khi mình chọn sườn mình nên mua cái sườn mà có cái xương nhỏ hay gãy xương là một cái tơ để lên cho một số các chị em mình lựa sườn thì nhớ cái cây sườn với phương này mới nhỏ con nếu như mà cái xương nó lớn là sự già và sau đó thì chặt ra tùy thích và rửa sạch sẽ với lại châm muối hoặc là giấm Muối rửa bằng nước nóng ấm khi giao việc cần cẩu Đó là tỏi củ hành tím của Phi sẽ để thành phần nguyên liệu bên dưới màn hình video trong phần mô tả ở đây là b và tỏi hành thì tùy theo mình thích ăn nhiều thì chơi nhiều rồi gia vị nêm sẽ có nước tương Maggi nè dầu hào nước mắm ngon tương ớt muối đường và nếu như mình có ăn bột ngọt thì cho một chút xíu hoặc là cho buộc Nam sau khi mình rửa với lại nước nóng ấm nhìn thấy miếng sườn táo luôn như vậy nè thì nó sẽ không có ra chất xơ cũng như là không có bị ra ký máu đỏ ngay chỗ đầu xưa nay Sứ Vô đây 1 muỗng cà phê vô như vậy muối A và 1/2 muỗng cà phê đường du lịch Úc tiêu chỉ cho ít thôi em không cho nhiều bởi vì chút nữa mình còn chia sau đó tóc đều rồi Ướt ở đây a tiếp theo là mình cần có hỏi mày hoặc là bầm cho Thiệp và Nguyễn luôn ở đây mình ấy cái cối size hay lấy dao này là size 10 ram tỏi ừ ừ ê ê [âm nhạc] sau khi mình xây bằng ký Tối hai đứa dao thì tỏi giống như là mày đó nhiều như vậy nè khi bước vào trong sương sau khi mình ước với tỏi Nguyễn Như vậy thì lúc chiên nó sẽ không bị cháy đồng thời là thơm ngon trong trường hợp anh chị em và các bạn không có xay nhuyễn được thì cũng có thể vắt mình lấy cái nước tỏi rồi ước với trung xương à ở cùng với lại 1 củ hành cũng xay nhuyễn giữa phương của hàng khoảng 40 g ừ ừ Anh ở mình sai là nó Nguyễn Như vậy là nó giống như mày sau đó cũng suốt đều lên cho thấm và Ướt trong vòng khoảng ít nhất là 30 phút ạ số tiếp theo bài hoặc là Face mình sẽ lấy cố vấn lấy dao the face 45 tỏi Mình sẽ nhấp thả nhất thả cho nó cắt bầm nhận bầm nếu mà thích nhiều tỏi hơn cũng có thể cho 70g đây là muốn cam ở Đức 10ml còn cái table school là 15ml thì mình lấy cái món canh 10ml này để Đông gia vị e14 cam nước tương Maggi Doctor Magiê ở Đức nước tương Maggi này cũng có một cái loại sản xuất và ba lan thì nó sẽ mạnh hơn còn nước tương này nó ngon hơn một món cam nước mắm loại ngon nếu mà cái loại không ngon thì mình có thể cho thèm chút khi giao heo aesthesys một món kem vuông hay là một tế bào school nước Anh bình thường hay mua cái loại này ừ ừ Ừ tước hiệu con gà hoặc là hiệu khác cũng được tuy thiếu ăn cay nhiều ít thì mình sẽ cho nên mình cho một muỗng cam luôn - 2 muỗng cà phê vuông đường ừ ừ à à Ừ nếu như nhà con bột ngọt thì cho 1/4 muỗng cà phê không ăn thì khỏi cho mà tiêu tiêu huy nhiều Chúc anh chị em và có bạn nào mình ăn được nhiều cá ướt thì có thể cho thêm ớt nữa do là cái này mình nằm cho con nít ăn tình thử mình không có chơi nhiều và 2 muỗng canh nước Anh thật là ba muốn cam thời sự nóng vội tan và Đời 30 phút sau cho thịt thấm gia vị Thì mình chiên ạ trò chơi nấu ăn vui chảo lượng dầu mình sẽ cho khoảng 1,5 cm hoặc là tùy theo anh chị em và các bạn cho nhiều hay là ít mình chân nhập có thể chinh ngâm ha gì và sử dụng cái chảo chống dính Ừ vậy để chiên không bị văng dầu thì mình sẽ cho tinh bột bắp hoặc là bột gạo hoặc là bột chiên giòn hoặc là bột năng hay bột mỳ không Cho tinh bột khoai tay khi dầu nóng phi tỏi trẻ em và các bạn Tôi để lửa lớn bỏ vô song nhìn thấy hơi bắt đầu trước vàng thì vớt tỏi ra liền bởi vì để lâu quá là bị đắng sau đó nhìn thấy tỏi hơi bắt đầu trước về là mình sẽ Phước tâm liền để tránh bị đắng như vậy là được à A và chờ nguội chút xíu là nó non Vàng luôn - 1 muỗng cà phê Vương Tinh bột bắp content dù cho lúc dầu nóng đó đánh tan ra là cho sườn vào chiên chiên sườn ở lửa lớn [âm nhạc] như vậy thì cường sao không có bị mất nước ngọt có thể mình kia ra làm hai hoặc là ba lần chị em mình đừng chia một lần chia một lần nữa đầy quá lắm rồi Tớ chờ khi mà nó nâu vàng rồi thì vớt ra mình chưa bột như về để cho không có bị văn khi chiên cách này mình tiên đã từng chia sẻ trong các video cách chiên không Văn Dầu anh chị em và các bạn có thể coi lại các video đó phải chuyên các món ăn sao cho không bị văng dầu sẽ làm miếng sườn này nó có nhiều sụn mà nó có nhiều thịt nữa nè nó dày lên đó ăn rất ngon luôn à anh thấy mắc xương nâu vàng lên rồi thì với xe mà để bên trái cây để cho chảy vào cũng như mình sẽ gỡ cái này ra chứ không thôi Nó bị cháy Đây là cái tỏi đâu Mình ước mơ đó à ừ ừ Xin chào các bạn hỏi là sau khi kia mà mình cho bồ có thì có sử dụng dầu này lại được không Thì vẫn sử dụng lại được bởi vì mình nhìn thấy ở đây cái Giàu nó sạch không bây giờ à ở những bơ tùy thích thế nào lấy khoảng 20g thôi cho nó cho toàn bộ cái chén sốt đây là tắt lửa cho sườn để rửa trung bình và nếu như mình thích ăn cái sườn mềm thì đậy nắp lại đảo rồi hầm cho nó mềm Nấu với lửa trung bình cho áo gia vị hết rồi đấy nắp lại lại và để lửa trung bình nhỏ nấu tự mồi cho đến 12 phút tùy theo mình thích mềm thì nó đau mình sẽ Nó mười phút nhé thỉnh thoảng mở nắp và đã hút từ trên xuống để cho nó Thắm nhìn thấy cái màu nó đẹp quá chừng chưa nè đò mình cứ nấu cho đến khi mềm đúng như ý Ừ thì cắt nửa ta nhớ là để lửa nhỏ trong trường hợp nhìn thấy khô thì có thể cho thêm chút xíu nước thôi quá Hương ăn quảng trường màu đẹp luôn và cái nước này nó sẽ mệt thỉnh thoảng chị em và các bạn nữa trở nha là mình nấu đến khi tâm thấy mềm như vậy nè được rồi Thì lúc đó mở nắp và đảo một lúc cho nó cạn bớt hoặc là nếu như mà mình thức ăn như vậy nè Chị để cái nước này chút nữa cho ăn cơm ăn rất ngon nhìn miếng sườn quá ngon luôn bóng mềm và thơm ơ rất status à Cho coi phim mình nói chứ đến cái đồ sệt vừa ý thích của mình thì lúc đó các bác mà cho tỏi đỏ lúc này rất giòn em như vậy là mình tiếng Việt chia sẽ xong đến cô bác anh chị em và các bạn Cường tốt bơ tỏi và chúc nhà nhà cùng ăn cơm thiệt ngon bây giờ Xin chào tạm biệt hẹn gặp lại ở video kỳ tới sườn non sốt bơ tỏi ăn cơm à à', 'answer': ['Maggi'], 'meta': {'answers_start': [711]}}
INFO:__main__:Checking global ID uniqueness
INFO:__main__:Found 1062 unique IDs
INFO:__main__:Gathering schema statistics
INFO:__main__:Gathering schema statistics
train
==========
id: 8386
question_id: 8386
document_id: 8386
question: 8386
choices: 0
context: 8386
answer: 8386
meta: 8386

validation
==========
id: 999
question_id: 999
document_id: 999
question: 999
choices: 0
context: 999
answer: 999
meta: 999

test
==========
id: 1062
question_id: 1062
document_id: 1062
question: 1062
choices: 0
context: 1062
answer: 1062
meta: 1062

INFO:__main__:QA ONLY: Checking multiple choice
.
----------------------------------------------------------------------
(seacrowd) ➜  seacrowd-datahub git:(vlogqa) ✗ python -m tests.test_seacrowd seacrowd/sea_datasets/vlogqa/vlogqa.py --data_dir=data/vlogqa
INFO:__main__:args: Namespace(path='seacrowd/sea_datasets/vlogqa/vlogqa.py', schema=None, subset_id=None, data_dir='data/vlogqa', use_auth_token=None)
INFO:__main__:self.PATH: seacrowd/sea_datasets/vlogqa/vlogqa.py
INFO:__main__:self.SUBSET_ID: vlogqa
INFO:__main__:self.SCHEMA: None
INFO:__main__:self.DATA_DIR: data/vlogqa
INFO:__main__:Checking for _SUPPORTED_TASKS ...
module seacrowd.sea_datasets.vlogqa.vlogqa
INFO:__main__:Found _SUPPORTED_TASKS=[<Tasks.QUESTION_ANSWERING: 'QA'>]
INFO:__main__:_SUPPORTED_TASKS implies _MAPPED_SCHEMAS={'QA'}
INFO:__main__:schemas_to_check: {'QA'}
INFO:__main__:Checking load_dataset with config name vlogqa_source
/home/akhdan/miniconda3/envs/seacrowd/lib/python3.10/site-packages/datasets/load.py:2547: FutureWarning: 'use_auth_token' was deprecated in favor of 'token' in version 2.14.0 and will be removed in 3.0.0.
You can remove this warning by passing 'token=<use_auth_token>' instead.
  warnings.warn(
/home/akhdan/miniconda3/envs/seacrowd/lib/python3.10/site-packages/datasets/load.py:929: FutureWarning: The repository for vlogqa contains custom code which must be executed to correctly load the dataset. You can inspect the repository content at seacrowd/sea_datasets/vlogqa/vlogqa.py
You can avoid this message in future by passing the argument `trust_remote_code=True`.
Passing `trust_remote_code=True` will be mandatory to load this dataset from the next major release of `datasets`.
  warnings.warn(
INFO:__main__:Checking load_dataset with config name vlogqa_seacrowd_qa
/home/akhdan/miniconda3/envs/seacrowd/lib/python3.10/site-packages/datasets/load.py:2547: FutureWarning: 'use_auth_token' was deprecated in favor of 'token' in version 2.14.0 and will be removed in 3.0.0.
You can remove this warning by passing 'token=<use_auth_token>' instead.
  warnings.warn(
/home/akhdan/miniconda3/envs/seacrowd/lib/python3.10/site-packages/datasets/load.py:929: FutureWarning: The repository for vlogqa contains custom code which must be executed to correctly load the dataset. You can inspect the repository content at seacrowd/sea_datasets/vlogqa/vlogqa.py
You can avoid this message in future by passing the argument `trust_remote_code=True`.
Passing `trust_remote_code=True` will be mandatory to load this dataset from the next major release of `datasets`.
  warnings.warn(
INFO:__main__:Dataset sample [source]
{'id': 'uit_01__0-JkLbNiXvw_0_3', 'title': '0-JkLbNiXvw', 'context': 'a cho cô bán anh chị em và các bạn Hôm nay mình khuya sẽ chia sẻ món sườn non sốt bơ tỏi Ừ để mình có thịt sườn heo nên mua cái sườn non ý là cái xương này tức là khi mình chọn sườn mình nên mua cái sườn mà có cái xương nhỏ hay gãy xương là một cái tơ để lên cho một số các chị em mình lựa sườn thì nhớ cái cây sườn với phương này mới nhỏ con nếu như mà cái xương nó lớn là sự già và sau đó thì chặt ra tùy thích và rửa sạch sẽ với lại châm muối hoặc là giấm Muối rửa bằng nước nóng ấm khi giao việc cần cẩu Đó là tỏi củ hành tím của Phi sẽ để thành phần nguyên liệu bên dưới màn hình video trong phần mô tả ở đây là b và tỏi hành thì tùy theo mình thích ăn nhiều thì chơi nhiều rồi gia vị nêm sẽ có nước tương Maggi nè dầu hào nước mắm ngon tương ớt muối đường và nếu như mình có ăn bột ngọt thì cho một chút xíu hoặc là cho buộc Nam sau khi mình rửa với lại nước nóng ấm nhìn thấy miếng sườn táo luôn như vậy nè thì nó sẽ không có ra chất xơ cũng như là không có bị ra ký máu đỏ ngay chỗ đầu xưa nay Sứ Vô đây 1 muỗng cà phê vô như vậy muối A và 1/2 muỗng cà phê đường du lịch Úc tiêu chỉ cho ít thôi em không cho nhiều bởi vì chút nữa mình còn chia sau đó tóc đều rồi Ướt ở đây a tiếp theo là mình cần có hỏi mày hoặc là bầm cho Thiệp và Nguyễn luôn ở đây mình ấy cái cối size hay lấy dao này là size 10 ram tỏi ừ ừ ê ê [âm nhạc] sau khi mình xây bằng ký Tối hai đứa dao thì tỏi giống như là mày đó nhiều như vậy nè khi bước vào trong sương sau khi mình ước với tỏi Nguyễn Như vậy thì lúc chiên nó sẽ không bị cháy đồng thời là thơm ngon trong trường hợp anh chị em và các bạn không có xay nhuyễn được thì cũng có thể vắt mình lấy cái nước tỏi rồi ước với trung xương à ở cùng với lại 1 củ hành cũng xay nhuyễn giữa phương của hàng khoảng 40 g ừ ừ Anh ở mình sai là nó Nguyễn Như vậy là nó giống như mày sau đó cũng suốt đều lên cho thấm và Ướt trong vòng khoảng ít nhất là 30 phút ạ số tiếp theo bài hoặc là Face mình sẽ lấy cố vấn lấy dao the face 45 tỏi Mình sẽ nhấp thả nhất thả cho nó cắt bầm nhận bầm nếu mà thích nhiều tỏi hơn cũng có thể cho 70g đây là muốn cam ở Đức 10ml còn cái table school là 15ml thì mình lấy cái món canh 10ml này để Đông gia vị e14 cam nước tương Maggi Doctor Magiê ở Đức nước tương Maggi này cũng có một cái loại sản xuất và ba lan thì nó sẽ mạnh hơn còn nước tương này nó ngon hơn một món cam nước mắm loại ngon nếu mà cái loại không ngon thì mình có thể cho thèm chút khi giao heo aesthesys một món kem vuông hay là một tế bào school nước Anh bình thường hay mua cái loại này ừ ừ Ừ tước hiệu con gà hoặc là hiệu khác cũng được tuy thiếu ăn cay nhiều ít thì mình sẽ cho nên mình cho một muỗng cam luôn - 2 muỗng cà phê vuông đường ừ ừ à à Ừ nếu như nhà con bột ngọt thì cho 1/4 muỗng cà phê không ăn thì khỏi cho mà tiêu tiêu huy nhiều Chúc anh chị em và có bạn nào mình ăn được nhiều cá ướt thì có thể cho thêm ớt nữa do là cái này mình nằm cho con nít ăn tình thử mình không có chơi nhiều và 2 muỗng canh nước Anh thật là ba muốn cam thời sự nóng vội tan và Đời 30 phút sau cho thịt thấm gia vị Thì mình chiên ạ trò chơi nấu ăn vui chảo lượng dầu mình sẽ cho khoảng 1,5 cm hoặc là tùy theo anh chị em và các bạn cho nhiều hay là ít mình chân nhập có thể chinh ngâm ha gì và sử dụng cái chảo chống dính Ừ vậy để chiên không bị văng dầu thì mình sẽ cho tinh bột bắp hoặc là bột gạo hoặc là bột chiên giòn hoặc là bột năng hay bột mỳ không Cho tinh bột khoai tay khi dầu nóng phi tỏi trẻ em và các bạn Tôi để lửa lớn bỏ vô song nhìn thấy hơi bắt đầu trước vàng thì vớt tỏi ra liền bởi vì để lâu quá là bị đắng sau đó nhìn thấy tỏi hơi bắt đầu trước về là mình sẽ Phước tâm liền để tránh bị đắng như vậy là được à A và chờ nguội chút xíu là nó non Vàng luôn - 1 muỗng cà phê Vương Tinh bột bắp content dù cho lúc dầu nóng đó đánh tan ra là cho sườn vào chiên chiên sườn ở lửa lớn [âm nhạc] như vậy thì cường sao không có bị mất nước ngọt có thể mình kia ra làm hai hoặc là ba lần chị em mình đừng chia một lần chia một lần nữa đầy quá lắm rồi Tớ chờ khi mà nó nâu vàng rồi thì vớt ra mình chưa bột như về để cho không có bị văn khi chiên cách này mình tiên đã từng chia sẻ trong các video cách chiên không Văn Dầu anh chị em và các bạn có thể coi lại các video đó phải chuyên các món ăn sao cho không bị văng dầu sẽ làm miếng sườn này nó có nhiều sụn mà nó có nhiều thịt nữa nè nó dày lên đó ăn rất ngon luôn à anh thấy mắc xương nâu vàng lên rồi thì với xe mà để bên trái cây để cho chảy vào cũng như mình sẽ gỡ cái này ra chứ không thôi Nó bị cháy Đây là cái tỏi đâu Mình ước mơ đó à ừ ừ Xin chào các bạn hỏi là sau khi kia mà mình cho bồ có thì có sử dụng dầu này lại được không Thì vẫn sử dụng lại được bởi vì mình nhìn thấy ở đây cái Giàu nó sạch không bây giờ à ở những bơ tùy thích thế nào lấy khoảng 20g thôi cho nó cho toàn bộ cái chén sốt đây là tắt lửa cho sườn để rửa trung bình và nếu như mình thích ăn cái sườn mềm thì đậy nắp lại đảo rồi hầm cho nó mềm Nấu với lửa trung bình cho áo gia vị hết rồi đấy nắp lại lại và để lửa trung bình nhỏ nấu tự mồi cho đến 12 phút tùy theo mình thích mềm thì nó đau mình sẽ Nó mười phút nhé thỉnh thoảng mở nắp và đã hút từ trên xuống để cho nó Thắm nhìn thấy cái màu nó đẹp quá chừng chưa nè đò mình cứ nấu cho đến khi mềm đúng như ý Ừ thì cắt nửa ta nhớ là để lửa nhỏ trong trường hợp nhìn thấy khô thì có thể cho thêm chút xíu nước thôi quá Hương ăn quảng trường màu đẹp luôn và cái nước này nó sẽ mệt thỉnh thoảng chị em và các bạn nữa trở nha là mình nấu đến khi tâm thấy mềm như vậy nè được rồi Thì lúc đó mở nắp và đảo một lúc cho nó cạn bớt hoặc là nếu như mà mình thức ăn như vậy nè Chị để cái nước này chút nữa cho ăn cơm ăn rất ngon nhìn miếng sườn quá ngon luôn bóng mềm và thơm ơ rất status à Cho coi phim mình nói chứ đến cái đồ sệt vừa ý thích của mình thì lúc đó các bác mà cho tỏi đỏ lúc này rất giòn em như vậy là mình tiếng Việt chia sẽ xong đến cô bác anh chị em và các bạn Cường tốt bơ tỏi và chúc nhà nhà cùng ăn cơm thiệt ngon bây giờ Xin chào tạm biệt hẹn gặp lại ở video kỳ tới sườn non sốt bơ tỏi ăn cơm à à', 'question': 'Nước tương được sử dụng để nêm hãng gì?', 'answers': {'text': ['Maggi'], 'answer_start': [711]}}
INFO:__main__:Dataset sample [seacrowd_qa]
{'id': '0', 'question_id': 'uit_01__0-JkLbNiXvw_0_3', 'document_id': '0-JkLbNiXvw', 'question': 'Nước tương được sử dụng để nêm hãng gì?', 'type': None, 'choices': [], 'context': 'a cho cô bán anh chị em và các bạn Hôm nay mình khuya sẽ chia sẻ món sườn non sốt bơ tỏi Ừ để mình có thịt sườn heo nên mua cái sườn non ý là cái xương này tức là khi mình chọn sườn mình nên mua cái sườn mà có cái xương nhỏ hay gãy xương là một cái tơ để lên cho một số các chị em mình lựa sườn thì nhớ cái cây sườn với phương này mới nhỏ con nếu như mà cái xương nó lớn là sự già và sau đó thì chặt ra tùy thích và rửa sạch sẽ với lại châm muối hoặc là giấm Muối rửa bằng nước nóng ấm khi giao việc cần cẩu Đó là tỏi củ hành tím của Phi sẽ để thành phần nguyên liệu bên dưới màn hình video trong phần mô tả ở đây là b và tỏi hành thì tùy theo mình thích ăn nhiều thì chơi nhiều rồi gia vị nêm sẽ có nước tương Maggi nè dầu hào nước mắm ngon tương ớt muối đường và nếu như mình có ăn bột ngọt thì cho một chút xíu hoặc là cho buộc Nam sau khi mình rửa với lại nước nóng ấm nhìn thấy miếng sườn táo luôn như vậy nè thì nó sẽ không có ra chất xơ cũng như là không có bị ra ký máu đỏ ngay chỗ đầu xưa nay Sứ Vô đây 1 muỗng cà phê vô như vậy muối A và 1/2 muỗng cà phê đường du lịch Úc tiêu chỉ cho ít thôi em không cho nhiều bởi vì chút nữa mình còn chia sau đó tóc đều rồi Ướt ở đây a tiếp theo là mình cần có hỏi mày hoặc là bầm cho Thiệp và Nguyễn luôn ở đây mình ấy cái cối size hay lấy dao này là size 10 ram tỏi ừ ừ ê ê [âm nhạc] sau khi mình xây bằng ký Tối hai đứa dao thì tỏi giống như là mày đó nhiều như vậy nè khi bước vào trong sương sau khi mình ước với tỏi Nguyễn Như vậy thì lúc chiên nó sẽ không bị cháy đồng thời là thơm ngon trong trường hợp anh chị em và các bạn không có xay nhuyễn được thì cũng có thể vắt mình lấy cái nước tỏi rồi ước với trung xương à ở cùng với lại 1 củ hành cũng xay nhuyễn giữa phương của hàng khoảng 40 g ừ ừ Anh ở mình sai là nó Nguyễn Như vậy là nó giống như mày sau đó cũng suốt đều lên cho thấm và Ướt trong vòng khoảng ít nhất là 30 phút ạ số tiếp theo bài hoặc là Face mình sẽ lấy cố vấn lấy dao the face 45 tỏi Mình sẽ nhấp thả nhất thả cho nó cắt bầm nhận bầm nếu mà thích nhiều tỏi hơn cũng có thể cho 70g đây là muốn cam ở Đức 10ml còn cái table school là 15ml thì mình lấy cái món canh 10ml này để Đông gia vị e14 cam nước tương Maggi Doctor Magiê ở Đức nước tương Maggi này cũng có một cái loại sản xuất và ba lan thì nó sẽ mạnh hơn còn nước tương này nó ngon hơn một món cam nước mắm loại ngon nếu mà cái loại không ngon thì mình có thể cho thèm chút khi giao heo aesthesys một món kem vuông hay là một tế bào school nước Anh bình thường hay mua cái loại này ừ ừ Ừ tước hiệu con gà hoặc là hiệu khác cũng được tuy thiếu ăn cay nhiều ít thì mình sẽ cho nên mình cho một muỗng cam luôn - 2 muỗng cà phê vuông đường ừ ừ à à Ừ nếu như nhà con bột ngọt thì cho 1/4 muỗng cà phê không ăn thì khỏi cho mà tiêu tiêu huy nhiều Chúc anh chị em và có bạn nào mình ăn được nhiều cá ướt thì có thể cho thêm ớt nữa do là cái này mình nằm cho con nít ăn tình thử mình không có chơi nhiều và 2 muỗng canh nước Anh thật là ba muốn cam thời sự nóng vội tan và Đời 30 phút sau cho thịt thấm gia vị Thì mình chiên ạ trò chơi nấu ăn vui chảo lượng dầu mình sẽ cho khoảng 1,5 cm hoặc là tùy theo anh chị em và các bạn cho nhiều hay là ít mình chân nhập có thể chinh ngâm ha gì và sử dụng cái chảo chống dính Ừ vậy để chiên không bị văng dầu thì mình sẽ cho tinh bột bắp hoặc là bột gạo hoặc là bột chiên giòn hoặc là bột năng hay bột mỳ không Cho tinh bột khoai tay khi dầu nóng phi tỏi trẻ em và các bạn Tôi để lửa lớn bỏ vô song nhìn thấy hơi bắt đầu trước vàng thì vớt tỏi ra liền bởi vì để lâu quá là bị đắng sau đó nhìn thấy tỏi hơi bắt đầu trước về là mình sẽ Phước tâm liền để tránh bị đắng như vậy là được à A và chờ nguội chút xíu là nó non Vàng luôn - 1 muỗng cà phê Vương Tinh bột bắp content dù cho lúc dầu nóng đó đánh tan ra là cho sườn vào chiên chiên sườn ở lửa lớn [âm nhạc] như vậy thì cường sao không có bị mất nước ngọt có thể mình kia ra làm hai hoặc là ba lần chị em mình đừng chia một lần chia một lần nữa đầy quá lắm rồi Tớ chờ khi mà nó nâu vàng rồi thì vớt ra mình chưa bột như về để cho không có bị văn khi chiên cách này mình tiên đã từng chia sẻ trong các video cách chiên không Văn Dầu anh chị em và các bạn có thể coi lại các video đó phải chuyên các món ăn sao cho không bị văng dầu sẽ làm miếng sườn này nó có nhiều sụn mà nó có nhiều thịt nữa nè nó dày lên đó ăn rất ngon luôn à anh thấy mắc xương nâu vàng lên rồi thì với xe mà để bên trái cây để cho chảy vào cũng như mình sẽ gỡ cái này ra chứ không thôi Nó bị cháy Đây là cái tỏi đâu Mình ước mơ đó à ừ ừ Xin chào các bạn hỏi là sau khi kia mà mình cho bồ có thì có sử dụng dầu này lại được không Thì vẫn sử dụng lại được bởi vì mình nhìn thấy ở đây cái Giàu nó sạch không bây giờ à ở những bơ tùy thích thế nào lấy khoảng 20g thôi cho nó cho toàn bộ cái chén sốt đây là tắt lửa cho sườn để rửa trung bình và nếu như mình thích ăn cái sườn mềm thì đậy nắp lại đảo rồi hầm cho nó mềm Nấu với lửa trung bình cho áo gia vị hết rồi đấy nắp lại lại và để lửa trung bình nhỏ nấu tự mồi cho đến 12 phút tùy theo mình thích mềm thì nó đau mình sẽ Nó mười phút nhé thỉnh thoảng mở nắp và đã hút từ trên xuống để cho nó Thắm nhìn thấy cái màu nó đẹp quá chừng chưa nè đò mình cứ nấu cho đến khi mềm đúng như ý Ừ thì cắt nửa ta nhớ là để lửa nhỏ trong trường hợp nhìn thấy khô thì có thể cho thêm chút xíu nước thôi quá Hương ăn quảng trường màu đẹp luôn và cái nước này nó sẽ mệt thỉnh thoảng chị em và các bạn nữa trở nha là mình nấu đến khi tâm thấy mềm như vậy nè được rồi Thì lúc đó mở nắp và đảo một lúc cho nó cạn bớt hoặc là nếu như mà mình thức ăn như vậy nè Chị để cái nước này chút nữa cho ăn cơm ăn rất ngon nhìn miếng sườn quá ngon luôn bóng mềm và thơm ơ rất status à Cho coi phim mình nói chứ đến cái đồ sệt vừa ý thích của mình thì lúc đó các bác mà cho tỏi đỏ lúc này rất giòn em như vậy là mình tiếng Việt chia sẽ xong đến cô bác anh chị em và các bạn Cường tốt bơ tỏi và chúc nhà nhà cùng ăn cơm thiệt ngon bây giờ Xin chào tạm biệt hẹn gặp lại ở video kỳ tới sườn non sốt bơ tỏi ăn cơm à à', 'answer': ['Maggi'], 'meta': {'answers_start': [711]}}
INFO:__main__:Checking global ID uniqueness
INFO:__main__:Found 1062 unique IDs
INFO:__main__:Gathering schema statistics
INFO:__main__:Gathering schema statistics
train
==========
id: 8386
question_id: 8386
document_id: 8386
question: 8386
choices: 0
context: 8386
answer: 8386
meta: 8386

validation
==========
id: 999
question_id: 999
document_id: 999
question: 999
choices: 0
context: 999
answer: 999
meta: 999

test
==========
id: 1062
question_id: 1062
document_id: 1062
question: 1062
choices: 0
context: 1062
answer: 1062
meta: 1062

INFO:__main__:QA ONLY: Checking multiple choice
.
----------------------------------------------------------------------
Ran 1 test in 2.954s

OK

Checkbox

• Confirm that this PR is linked to the dataset issue.
• Create the dataloader script seacrowd/sea_datasets/my_dataset/my_dataset.py (please use only lowercase and underscore for dataset naming).
• Provide values for the _CITATION, _DATASETNAME, _DESCRIPTION, _HOMEPAGE, _LICENSE, _URLs, _SUPPORTED_TASKS, _SOURCE_VERSION, and _SEACROWD_VERSION variables.
• Implement _info(), _split_generators() and _generate_examples() in dataloader script.
• Make sure that the BUILDER_CONFIGS class attribute is a list with at least one SEACrowdConfig for the source schema and one for a seacrowd schema.
• Confirm dataloader script works with datasets.load_dataset function.
• Confirm that your dataloader script passes the test suite run with python -m tests.test_seacrowd seacrowd/sea_datasets/<my_dataset>/<my_dataset>.py.
• If my dataset is local, I have provided an output of the unit-tests in the PR (please copy paste). This is OPTIONAL for public datasets, as we can test these without access to the data files.

[sabilmakbar]

a nit. other things are okay (provided correct unit-test output given by assignee)

[ljvmiranda921]

Aside from previous comments LGTM :) Can't run this because I'm still waiting for data access, I just checked the implementation.

[holylovenia]

Hi @akhdanfadh, I would like to let you know that we plan to finalize the calculation of the open contributions (e.g., dataloader implementations) in 31 hours, so it'd be great if we could wrap up the reviewing and merge this PR before then.

cc: @sabilmakbar

[sabilmakbar]

hi @akhdanfadh, since the change is small (rather negligible) and the deadline is approaching, I'm aiding to address my earlier comment as commit. lmk if that was intentional (and we can revert it later). thanks!

will merge this now cc @ljvmiranda921 @holylovenia