herwoww commited on
Commit
53e65f3
·
verified ·
1 Parent(s): 9ef4976

Upload 3 files

Browse files
Files changed (3) hide show
  1. Record Prompts - Sheet3.csv +99 -0
  2. annotation_gradio.py +220 -0
  3. utils.py +100 -0
Record Prompts - Sheet3.csv ADDED
@@ -0,0 +1,99 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ Sentence,Before,target_letter,After,Instruction
2
+ وَاتَّقُوا اللَّهَ الَّذِي تَسَاءَلُونَ بِهِ وَالْأَرْحَامَ@ِ,وَاتَّقُوا اللَّهَ الَّذِي تَسَاءَلُونَ بِهِ وَالْأَرْحَا,مِ,,إستبدال الفتحة / بالكسرة
3
+ إِنَّمَا يَخْشَى اللَّهَ مِنْ عِبَادِهَ@ُ الْعُلَمَاءُ,إِنَّمَا يَخْشَى اللَّهَ مِنْ عِبَادِ,هُ, الْعُلَمَاءُ,إستبدال الفتحة / بالضمة
4
+ أَنَّ اللَّهَ بَرِيءٌ مِّنَ الْمُشْرِكِينَ وَرَسُولُهُ@ِ,أَنَّ اللَّهَ بَرِيءٌ مِّنَ الْمُشْرِكِينَ وَرَسُولُ,هِ,,إستبدال الضمة / بالكسرة
5
+ وَإِذِ ٱبۡتَلَىٰٓ إِبۡرَٰهِيمَ@ُ رَبُّهُ,وَإِذِ ٱبۡتَلَىٰٓ إِبۡرَٰهِي,مُ, رَبُّهُ,إستبدال الفتحة / بالضمة
6
+ مَا نَنسَخْ@ُ مِنْ آيَةٍ,مَا نَنسَ,خُ, مِنْ آيَةٍ,إستبدال السكون / بالضمة
7
+ يُغ@خْشِيكُمُ النُّعَاسَ أَمَنَةً مِّنْهُ,يُ,خْ,شِيكُمُ النُّعَاسَ أَمَنَةً مِّنْهُ,إستبدال غ / خ
8
+ وَلْيَسْتَعْف@ ِ الَّذِينَ لَا يَجِدُونَ نِكَاحًا,وَلْيَسْتَعْ ,فِ,الَّذِينَ لَا يَجِدُونَ نِكَاحًا,حذف الفاء
9
+ اللَّهُ الَّذِي خَلَق@كُكُمْ مِنْ ضُعْفٍ ,اللَّهُ الَّذِي خَلَ,كُ,كُمْ مِنْ ضُعْفٍ,إستبدال ق / ك
10
+ أَمْ تَقُولُونَ إِنَّ إِبْرَاهِيمَ وَإِسْمَاعِيلَ وَإِس@زحَاقَ وَيَعْقُوبَ وَالْأَسْبَاطَ كَانُوا۟ هُودًا أَوْ نَصَارَىٰ,أَمْ تَقُولُونَ إِنَّ إِبْرَاهِيمَ وَإِسْمَاعِيلَ وَإِ,ز,حَاقَ وَيَعْقُوبَ وَالْأَسْبَاطَ كَانُوا۟ هُودًا أَوْ نَصَارَىٰ,إستبدال س / ز
11
+ وَكَذَٰلِكَ جَعَلْنَٰكُمْ أُمَّةً وَس@صَ طًا,وَكَذَٰلِكَ جَعَلْنَٰكُمْ أُمَّةً وَ,صَ,طًا,إستبدال س / ص
12
+ وَلَوْ بَس@صَطَ اللَّٰهُ الرِّزْقَ لِعِبَادِهِ,وَلَوْ بَ,صَ,طَ اللَّٰهُ الرِّزْقَ لِعِبَادِهِ,إستبدال س / ص
13
+ وَأَس@صَرُّوا۟ النَّدَامَةَ لَمَّا رَءَوا۟ الْعَذَابَ,وَأَ,صَ,رُّوا۟ النَّدَامَةَ لَمَّا رَءَوا۟ الْعَذَابَ,إستبدال س / ص
14
+ هَلْ أَدُلُّكَ عَلَىٰ ش@جَجَرَةِ الْخُلْدِ,هَلْ أَدُلُّكَ عَلَىٰ ,جَ,جَرَةِ الْخُلْدِ,إستبدال ش / ج
15
+ وَإِنَّ مِنْهُمْ لَفَرِيقًا يَلْوّ@ ُنَ أَلْسِنَتَهُمْ بِالْكِتَابِ,وَإِنَّ مِنْهُمْ لَفَرِيقًا يَلْ,وُ,نَ أَلْسِنَتَهُمْ بِالْكِتَابِ,حذف التشديد
16
+ سَلْ بَنِي إِسْرَائِيلَ كَمْ ءَا@ تَيْنَاهُم مِّنْ آيَةٍ بَيِّنَةٍ,سَلْ بَنِي إِسْرَائِيلَ كَمْ ,ءَ,تَيْنَاهُم مِّنْ آيَةٍ بَيِّنَةٍ,حذف الالف
17
+ يَسْأَلُكَ أَهْلُ ٱلْكِتَا@وبِ أَن تُنَزِّلَ عَلَيْهِمْ كِتَابًا مِّنَ ٱلسَّمَاءِ,يَسْأَلُكَ أَهْلُ ٱلْكِتَ,و,بِ أَن تُنَزِّلَ عَلَيْهِمْ كِتَابًا مِّنَ ٱلسَّمَاءِ,إستبدال الالف / الواو
18
+ لَّقَدْ كَانَ فِى ي@ُّوسُفَ وَإِخْوَتِهِ ءَايَاتٌ لِّلسَّائِلِينَ,لَّقَدْ كَانَ فِى ,يُّ,وسُفَ وَإِخْوَتِهِ ءَايَاتٌ لِّلسَّائِلِينَ,أضافة تشديد
19
+ وَات@سْلُ عَلَيْهِمْ نَبَأَ إِبْرَاهِيمَ,وَا,سْ,لُ عَلَيْهِمْ نَبَأَ إِبْرَاهِيمَ,إستبدال ت / س
20
+ وَحِينَ ت@طَضَعُونَ ثِيَابَكُم مِّنَ ٱلظَّهِيرَةِ,وَحِينَ, طَ,ضَعُونَ ثِيَابَكُم مِّنَ ٱلظَّهِيرَةِ,إستبدال ت / ط
21
+ أَفَت@طَطْمَعُونَ أَن يُؤْمِنُوا لَكُمْ,أَفَ,طَ,طْمَعُونَ أَن يُؤْمِنُوا لَكُمْ,إستبدال ت / ط
22
+ ت@ بَعُهَا الرَّادِفَةُ,,تَ,بَعُهَا الرَّادِفَةُ,حذف التاء
23
+ فَإِذَا هُم مِّنَ الْأَجْدَاث@ذِ إِلَىٰ رَبِّهِمْ يَنسِلُونَ,فَإِذَا هُم مِّنَ الْأَجْدَا,ذِ, إِلَىٰ رَبِّهِمْ يَنسِلُونَ,إس��بدال ث / ذ
24
+ لَّقَدْ كَفَرَ الَّذِينَ قَالُوا إِنَّ اللَّهَ ثَالِث@ ثَلَاثَةٍ,لَّقَدْ كَفَرَ الَّذِينَ قَالُوا إِنَّ اللَّهَ ثَا,لِ, ثَلَاثَةٍ,حذف الثاء
25
+ قَالَ كَمْ لَبِث@ تُمْ فِي الْأَرْضِ عَدَدَ سِنِينَ,قَالَ كَمْ لَبِ,تُ,مْ فِي الْأَرْضِ عَدَدَ سِنِينَ,حذف الثاء
26
+ ثُمَّ اج@شْتَبَاهُ رَبُّهُ فَتَابَ عَلَيْهِ,ثُمَّ ا,شْ,تَبَاهُ رَبُّهُ فَتَابَ عَلَيْهِ,إستبدال ج / ش
27
+ وَيَكُونَ الد@تِّينُ لِلَّهِ,وَيَكُونَ ال,تِّ,ينُ لِلَّهِ,إستبدال د / ت
28
+ ذَٰلِكَ أَد@ نَّىٰ أَلَّا تَعُولُوا,ذَٰلِكَ أَ ,نَّ,ىٰ أَلَّا تَعُولُوا,حذف الدال
29
+ فَهِيَ إِلَى الْأَذ@ظْقَانِ فَهُم مُّقْمَحُونَ,فَهِيَ إِلَى الْأَ,ظْ,قَانِ فَهُم مُّقْمَحُونَ,إستبدال ذ / ظ
30
+ وَذ@ظَلَّلْنَاهَا لَهُمْ فَمِنْهَا رَكُوبُهُمْ,وَ,ظَ,لَّلْنَاهَا لَهُمْ فَمِنْهَا رَكُوبُهُمْ,إستبدال ذ / ظ
31
+ لِلَّذِينَ تَز@سْدَرِي أَعْيُنُكُمْ,لِلَّذِينَ تَ,سْ,دَرِي أَعْيُنُكُمْ,إستبدال زْ / س
32
+ ذَٰلِكُمْ أَز@سْكَى لَكُمْ وَأَطْهَرُ,ذَٰلِكُمْ أَ,سْ,كَىٰ لَكُمْ وَأَطْهَرُ,إستبدال زْ / س
33
+ بِبِضَاعَةٍ مُّز@سْجَاةٍ فَأَوْفِ,بِبِضَاعَةٍ مُّ,سْ,جَاةٍ فَأَوْفِ,إستبدال زْ / س
34
+ لَيز@سْلِقُونَكَ بِأَبْصَارِهِمْ,لَيُ,سْ,لِقُونَكَ بِأَبْصَارِهِمْ,إستبدال زْ / س
35
+ الَّذِي يُز@سْجِي لَكُمُ الْفُلْكَ,الَّذِي يُ,سْ,جِي لَكُمُ الْفُلْكَ,إستبدال زْ / س
36
+ إياك نعبَ@ُدُ,إياك نع,بُ,دُ,إستبدال الفتحة / بالضمة
37
+ إِنَّ اللَّهَ غَنِيُّ@َ عَنِ الْعَالَمِينَ,إِنَّ اللَّهَ غَنِ,يَّ, عَنِ الْعَالَمِينَ,إستبدال الضمة / بالفاتحة
38
+ وَإِنَّ اللَّهَ عَلَىٰ كُلِّ شَيْءٍ قَدِيرً@ٌ,وَإِنَّ اللَّهَ عَلَىٰ كُلِّ شَيْءٍ قَدِي,رٌ,,إستبدال الفتحة / بالضمة
39
+ الْحَمْدُ لِلَّهِ رَبِ@َ الْعَالَمِينَ,الْحَمْدُ لِلَّهِ رَ,بَ, الْعَالَمِينَ,إستبدال الكسرة / بالفاتحة
40
+ وَإِذْ قَالَ إِبْرَاهِيمُ رَبٍّ@ٌ اجْعَلْ هَٰذَا الْبَلَدَ آمِنًا,وَإِذْ قَالَ إِبْرَاهِيمُ رَ,بُّ, اجْعَلْ هَٰذَا الْبَلَدَ آمِنًا,إستبدال الكسرة / بالضمة
41
+ وَأُو۟لَٰٓئِكَ هُمُ ٱلْمُفْلِحُو@ينَ,وَأُو۟لَٰٓئِكَ هُمُ ٱلْمُفْلِحُ,ي,نَ,إستبدال الواو / الياء
42
+ ذَٰلِكَ ٱلۡكِتَٰبُ لَا رَيبَ@ُ فِيهِۛ,ذَٰلِكَ ٱلۡكِتَٰبُ لَا رَيۡ,بُ, فِيهِۛ,إستبدال الفتحة / بالضمة
43
+ وَمَا مُحَمَّدٌ إِلَّا رَسُولٌ@ٍ,وَمَا مُحَمَّدٌ إِلَّا رَسُو,لِِ,,إستبدال الضمة / بالكسرة
44
+ وَكَذَٰلِكَ جَعَلۡنَـٰكُمۡ أُمَّةً وَسَطً@ٌ,وَكَذَٰلِكَ جَعَلۡنَـٰكُمۡ أُمَّةًۭ وَسَ,طُ,,إستبدال تنوين الفتح / بالضمة
45
+ وَعْدَ ٱللَّهِ لَا يُخْلِفُ ٱللَّهُ@َ وَعْدَهُۥ,وَعْدَ ٱللَّهِ لَا يُخْلِفُ ٱللَّ,هَ, وَعْدَهُۥ,إستبدال الضمة / بالفتحة
46
+ فَسَبِّحْ بِٱسْمِ رَبِّكَ ٱلْعَظِيمِ@ُ,فَسَبِّحْ بِٱسْمِ رَبِّكَ ٱلْعَظِي,مُ,,إستبدال الكسرة / بالضمة
47
+ وَقُودُهَا ٱلنَّاسَ@ِ وَٱلْحِجَارَة,وَقُودُهَا ٱلنَّا,سِ, وَٱلْحِجَارَة,إستبدال الفتحة / بالكسرة
48
+ لِكَيْلَا يَكُونَ دُولَةَ@ُ بَيْنَ ٱلْأَغْنِيَاءِ مِنكُمْ,لِكَيْلَا يَكُونَ دُولَ,ةُ, بَيْنَ ٱلْأَغْنِيَاءِ مِنكُمْ,إستبدال الفتحة / بالضمة
49
+ إِنَّ الصَّفَا وَالْمَرْوَةَ مِنْ شَعَائِرِ@ُ اللَّهِ,إِنَّ الصَّفَا وَالْمَرْوَةَ مِنْ شَعَائِ,رُ, اللَّهِ,إستبدال الكسرة / بالضمة
50
+ إِنَّ اللَّهَ يَفْعَلُ مَا يُرِيدُ@َ,إِنَّ اللَّهَ يَفْع��لُ مَا يُرِي,دَ,,إستبدال الضمة / بالفتحة
51
+ ٱلَّذ@زِينَ يُؤۡمِنُونَ بِٱلۡغَيۡبِ,ٱلَّ,زِ,ينَ يُؤۡمِنُونَ بِٱلۡغَيۡبِ,إستبدال ذ / ز
52
+ ٱهۡدِنَا ٱلص@زرَطَ ٱلۡمُسۡتَقِيمَ,ٱهۡدِنَا ٱل,ز,رَٰطَ ٱلۡمُسۡتَقِيمَ,إستبدال ص / ز
53
+ قَالَ لَا تَخَافَآ إِنَّنِي مَعَ@ْكُمَآ أَسۡمَعُ وَأَرَىٰ,قَالَ لَا تَخَافَآ إِنَّنِي مَ,عْ,كُمَآ أَسۡمَعُ وَأَرَىٰ,إستبدال الفتحة / بالسكون
54
+ إِيَّاكَ نَعْبُدُ وَإِيَّاكَ نَ@ِسْتَعِينُ,إِيَّاكَ نَعْبُدُ وَإِيَّاكَ ,نِ,سْتَعِينُ,إستبدال الفتحة / بالكسرة
55
+ وَسِيقَ الَّذِينَ اتَّقَوْا رَبَّهُمْ إِلَى الْجَنَّةِ زُمَ@ُرً,وَسِيقَ الَّذِينَ اتَّقَوْا رَبَّهُمْ إِلَى الْجَنَّةِ زُ,مُ,رً,إستبدال الفتحة / بالضمة
56
+ يوم نَطْوِي السَّمَاءَ ك@قَطَيِّ السِّجِلِّ لِلْكُتُبِ,يوم نَطْوِي السَّمَاءَ ,قَ,طَيِّ السِّجِلِّ لِلْكُتُبِ,إستبدال كَ / قَ
57
+ وَأَعْرِضْ عَنِ ال@ جَاهِلِينَ,وَأَعْرِضْ عَنِ ا,ل,جَاهِلِينَ,حذف اللام
58
+ وَإِذْ جَعَل@ نَا الْبَيْتَ مَثَابَةً لِّلنَّاسِ وَأَمْنًا,وَإِذْ جَعَ,ل,نَا الْبَيْتَ مَثَابَةً لِّلنَّاسِ وَأَمْنًا,حذف اللام
59
+ لَأَكَلُواْ مِن فَوْقِهِم@ وَمِن تَحْتِ أَرْجُلِهِم,لَأَكَلُواْ مِن فَوْقِهِ,م, وَمِن تَحْتِ أَرْجُلِهِم,حذف الميم
60
+ قَالَا رَبَّنَا إِنَّ@ ا نَخَافُ أَنْ يَفْرُطَ عَلَيْنَا,قَالَا رَبَّنَا إِنَ,ّ,ا نَخَافُ أَنْ يَفْرُطَ عَلَيْنَا,ترك التشديد
61
+ وَلَنْ تَسْتَطِيعُوا أَنْ تَعْدِلُوا بَيْنَ النِّسَاءِ وَلَوْ حَرَص@ستُمْ,وَلَنْ تَسْتَطِيعُوا أَنْ تَعْدِلُوا بَيْنَ النِّسَاءِ وَلَوْ حَرَ,س,تُمْ,إستبدال س / ص
62
+ وَمَنْ أَص@زدَقُ مِنَ اللَّهِ حَدِيثًا,وَمَنْ أَ,ز,دَقُ مِنَ اللَّهِ حَدِيثًا,إستبدال ص / ز
63
+ صِرَاطَ الَّذِينَ أَنْعَمْتَ عَلَيْهِمْ غَيْرِ الْمَغْضُوبِ عَلَيْهِمْ وَلَا الض@ظالِّينَ,صِرَاطَ الَّذِينَ أَنْعَمْتَ عَلَيْهِمْ غَيْرِ الْمَغْضُوبِ عَلَيْهِمْ وَلَا ال,ظ,الِّينَ,إستبدال ض / ظ
64
+ فَمَنِ اض@ طُرَّ غَيْرَ بَاغٍ وَلَا عَادٍ فَلَا إِثْمَ عَلَيْهِ,فَمَنِ ا,ض,طُرَّ غَيْرَ بَاغٍ وَلَا عَادٍ فَلَا إِثْمَ عَلَيْهِ ,حذف الضاد
65
+ وَقَاتِلُوا فِي سَبِيلِ اللَّهِ الَّذِينَ يُقَاتِلُونَكُمْ وَلَا تَع@حتَدُوا,وَقَاتِلُوا فِي سَبِيلِ اللَّهِ الَّذِينَ يُقَاتِلُونَكُمْ وَلَا تَ,ح,تَدُوا ۚ,إستبدال ع / ح
66
+ وَاسْمَع@ غَيْرَ مُسْمَع,وَاسْمَ,ع, غَيْرَ مُسْمَع,حذف العين
67
+ وَمَا كَانَ عَطَآءُ رَبِّكَ مَحظ@ذورًا,وَمَا كَانَ عَطَآءُ رَبِّكَ مَح,ذ,ورًا,إستبدال ظ / ذ
68
+ وَأُخْرَىٰ لَمْ ت@طقْدِرُوا عَلَيْهَا قَدْ أَحَاطَ اللَّهُ بِهَا,وَأُخْرَىٰ لَمْ,ط,قْدِرُوا عَلَيْهَا قَدْ أَحَاطَ اللَّهُ بِهَا,إستبدال ت / ط
69
+ إِنَّمَا نَحْنُ فِت@سْنَةٌ فَلَا تَكْفُرْ,إِنَّمَا نَحْنُ فِ,سْ,نَةٌ فَلَا تَكْفُرْ,إستبدال ت / س
70
+ وَت@طًضْحَكُونَ وَلَا تَبْكُونَ,وَ,طً,ضْحَكُونَ وَلَا تَبْكُونَ,إستبدال ت / ط
71
+ لَوْلَا أَن ثَبَّتْنَاكَ لَقَدْ كِدتَّ تَ@ رْكَنُ إِلَيْهِمْ شَيْئًا قَلِيلً,لَوْلَا أَن ثَبَّتْنَاكَ لَقَدْ كِدتَّ ,تَ,رْكَنُ إِلَيْهِمْ شَيْئًا قَلِيلً,حذف التاء
72
+ وَجَدَهَا ت@طَطْلُعُ عَلَىٰ قَوْمٍ لَّمْ نَجْعَل,وَجَدَهَا ,طَ,طْلُعُ عَلَىٰ قَوْمٍ لَّمْ نَجْعَل,إستبدال ت / ط
73
+ وَمِن شَرِّ النَّفَّاث@فَاتِ فِي الْعُقَدِ,وَمِن شَرِّ النَّفَّا,فَ,اتِ فِي الْعُقَدِ,إستبدال ث / ف
74
+ وَاقْتُلُوهُمْ حَيْثُ@ ثَقِفْتُمُوهُمْ,وَاقْتُلُوهُمْ حَيْ,ثُ, ثَقِفْتُمُوهُمْ,حذف الثاء
75
+ فَوَلِّ وَج@شْهَكَ شَطْرَ الْمَسْجِدِ الْحَرَامِ,فَوَلِّ وَ,شْ,هَكَ شَطْرَ الْمَسْجِدِ الْحَرَامِ,إستبدال ج / ش
76
+ وَلَا جُنَاح@عَ عَلَيْكُمْ,وَلَا جُنَا,عَ, عَلَيْكُمْ,إستبدال ح / ع
77
+ فَاصْفَح@ عَّنْهُمْ وَقُلْ سَلَامٌ,فَاصْفَ,ح ,عَّنْهُمْ وَقُلْ سَلَامٌ,حذف الحاء
78
+ وَأَهْدِيَكَ إِلَى رَبِّكَ فَتَخ@غْشَى,وَأَهْدِيَكَ إِلَىٰ رَبِّكَ فَتَ,غْ,شَىٰ,إستبدال غ / خ
79
+ مِّنَ الْأَنبَاءِ مَا فِيهِ مُزْد@تَجَرٌ,مِّنَ الْأَنبَاءِ مَا فِيهِ مُزْ,تَ,جَرٌ,إستبدال د / ت
80
+ وَلَا أَقُولُ لِلَّذِينَ تَزْد@تَرِي أَعْيُنُكُمْ,وَلَا أَقُولُ لِلَّذِينَ تَزْ,تَ,رِي أَعْيُنُكُمْ,إستبدال د / ت
81
+ فَهَلْ مِن مُّد@تَّكِرٍ,فَهَلْ مِن مُّ,تَّ,كِرٍ,إستبدال د / ت
82
+ وَوَاعَد@ نَّا مُوسَى ثَلَاثِينَ لَيْلَةً,وَوَاعَ,نَّ,ا مُوسَىٰ ثَلَاثِينَ لَيْلَةً,حذف الدال
83
+ فَذ@ظَاقَتْ وَبَالَ أَمْرِهَا,فَ,ظَ,اقَتْ وَبَالَ أَمْرِهَا,إستبدال ذ / ظ
84
+ قَالَ مَعَاذ@ظَ اللَّهِ أَن نَّأْخُذَ,قَالَ مَعَا,ظَ, اللَّهِ أَن نَّأْخُذَ,إستبدال ذ / ظ
85
+ فَسَاءَ مَطَرُ الْمُنذ@ظَرِينَ,فَسَاءَ مَطَرُ الْمُن,ظَ,رِينَ,إستبدال ذ / ظ
86
+ وَإِنِّي عُذ@ تُّ بِرَبِّي وَرَبِّكُمْ,وَإِنِّي عُ,ذ,تُّ بِرَبِّي وَرَبِّكُمْ,حذف الذال
87
+ مَا يُوحَىٰ إِلَيَّ مِن ر @َّ بِّي,مَا يُوحَىٰ إِلَيَّ مِن رَّ,رر,بِّي,تكرار الراء
88
+ وَز@ظُخْرُفًا وَإِن كُلُّ ذَٰلِكَ,وَ,ظُ,خْرُفًا وَإِن كُلُّ ذَٰلِكَ,إستبدال ز / ظ
89
+ عِندَهَا رِز@سْقًا قَالَ,عِندَهَا رِ,سْ,قًا قَالَ,إستبدال ز / س
90
+ يَخ@حْشَى النَّاسَ هَذَا عَذَابٌ أَلِيمٌ,يَ,حْ,شَى النَّاسَ هَذَا عَذَابٌ أَلِيمٌ,إستبدال خ / ح
91
+ وَحَفَف@ نَاهُمَا بِنَخْلٍ وَجَعَلْنَا بَيْنَهُمَا زَرْعًا,وَحَفَ,ف,نَاهُمَا بِنَخْلٍ وَجَعَلْنَا بَيْنَهُمَا زَرْعًا,حذف الفاء
92
+ وَيَمْشِي فِي الْأَسْوَاق@كِ, وَيَمْشِي فِي الْأَسْوَا,كِ,,إستبدال ق / ك
93
+ فَوَلِّ وَجْهَكَ شَطْرَ الْمَسْج@زِدِ الْحَرَامِ,فَوَلِّ وَجْهَكَ شَطْرَ الْمَسْ,زِ,دِ الْحَرَامِ,إستبدال ج / ز
94
+ أَفَآمِنُوا۟ مَكْرَ اللَّٰهِ فَلَا يَأْمَنُ مَكْرَ اللَّٰهِ إِلَّا الْقَوْمُ الْخَاس@صِرُونَ,أَفَآمِنُوا۟ مَكْرَ اللَّٰهِ فَلَا يَأْمَنُ مَكْرَ اللَّٰهِ إِلَّا الْقَوْمُ الْخَا,صِ,رُونَ,إستبدال س / ص
95
+ لَا إِكْرَاهَ فِي الدِّينِ قَدْ تَبَيَّنَ الرُّش@جدُ مِنَ الْغَيِّ,لَا إِكْرَاهَ فِي الدِّينِ قَدْ تَبَيَّنَ الرُّ,ج,دُ مِنَ الْغَيِّ,إستبدال ش / ج
96
+ وَلِكُلٍ وِ@ جْهَةٌ هُوَ مُوَلِّيَهَا فَاسْتَبِقُوا الْخَيْرَاتِ,وَلِكُلٍ ,وِ,جْهَةٌ هُوَ مُوَلِّيَهَا فَاسْتَبِقُوا الْخَيْرَاتِ,حذف الواو
97
+ وَأَعْت@دَدْنَا لِلْكَافِرِينَ عَذَابًا مُّهِينًا,وَأَعْ,دَ,دْنَا لِلْكَافِرِينَ عَذَابًا مُّهِينًا,استبدال ت / د
98
+ لِيَج@ زِّيَ الَّذِينَ آمَنُوا وَعَمِلُوا الصَّالِحَاتِ,لِيَ,زِّ,يَ الَّذِينَ آمَنُوا وَعَمِلُوا الصَّالِحَاتِ,حذف ال جْ
99
+ الرَّ@رحْمَنِ,الرَّ,رر,حْمَٰنِ,إضافة الراء
annotation_gradio.py ADDED
@@ -0,0 +1,220 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ import os
2
+ import re
3
+ import random
4
+
5
+ import gradio as gr
6
+ import pandas as pd
7
+
8
+ from glob import glob
9
+ from pathlib import Path
10
+
11
+ output_file = "annotation.csv"
12
+ current_audio="Sample_verse.wav"
13
+ current_text = " ".join(str("طَيِّ السِّجِلِّ لِلْكُتُبِ").replace(" ", "_"))
14
+
15
+ audio_root = "./recordings_OI"
16
+
17
+ wav_files= list(glob(f"{audio_root}/*/*.wav"))
18
+ wav_files.sort()
19
+ txt_files=[x.replace(".wav",".txt") for x in wav_files]
20
+
21
+ aud_text = list(zip(wav_files, txt_files))
22
+
23
+ global index
24
+ with open(output_file, 'r') as f:
25
+ index = sum(1 for line in f)
26
+
27
+ def get_audio_path(aud_text):
28
+ for i in aud_text:
29
+ yield i
30
+
31
+ pattern = r'>(.*?)<span style=".*?">(.*?)</span>(.*?)</p>'
32
+ def read_txt(path):
33
+ with open(path,"r") as f:
34
+ x = f.readline().strip()
35
+ match = re.search(pattern, x)
36
+ if match is not None:
37
+ x_ = f"{match.group(1)}{match.group(2)}{match.group(3)}"
38
+ else:
39
+ x_ = x.replace("<p>", "").replace("</p>", "")\
40
+ .replace('<span style="color:red;">', "").replace("</span>", "")\
41
+ .replace('<h4>', "").replace("</h4>", "")
42
+ return x, x_
43
+
44
+ # file_path = "./Record Prompts - Extra.csv"
45
+ file_path = "./Record Prompts - Sheet3.csv"
46
+
47
+ texts_instructions = {}
48
+
49
+ texts_plain_instruction = {}
50
+ def get_separated(text):
51
+ return " ".join([x.replace(" "," ").replace(" ", "_") for x in text])\
52
+ .replace(" @ ","@")
53
+
54
+ return " ".join([x.replace(" ", " ").replace(" ", "_") if "@" not in x else x for x in text])
55
+
56
+ with open(file_path, "r") as f:
57
+ header = f.readline()
58
+ for line in f:
59
+ data = line.strip().split(",")
60
+ data = [d.replace('\n','').replace(" "," ") for d in data]
61
+ # text = f"{data[0]}{data[1]}{data[2]}"
62
+ text = f"{data[1]}{data[2]}{data[3]}"
63
+ # texts_instructions[text] = get_separated(data[0])
64
+ text = text.replace(" ", "")
65
+ texts_instructions[text] = get_separated(data[0])
66
+
67
+
68
+ with open(file_path, "r") as f:
69
+ header = f.readline()
70
+ for line in f:
71
+ data = line.strip().split(",")
72
+ data = [d.replace('\n','').replace(" "," ") for d in data]
73
+ # text = f"{data[0]}{data[1]}{data[2]}"
74
+ text = f"{data[1]}{data[2]}{data[3]}"
75
+ text = text.replace(" ", "")
76
+ texts_plain_instruction[text] = '<p style="font-family:"Traditional Arabic",font-size:150px;"><mark>{0}</mark></p>'.format(data[4])
77
+
78
+ def give_audio_text(gen=None):
79
+ global current_audio
80
+ global current_text
81
+ global aud_text_generator
82
+ global index, ai_annotation, plain_instruction
83
+ # Use the passed generator or default to the global one
84
+ if gen is None:
85
+ gen = aud_text_generator
86
+ try:
87
+ current_audio, current_text = next(gen)
88
+ current_text, x_ = read_txt(current_text)
89
+ ai_annotation = texts_instructions.get(x_.strip().replace(" ", "").replace("ۚ",""), get_separated(x_.strip()))
90
+ plain_instruction = texts_plain_instruction.get(x_.strip().replace(" ", "").replace("ۚ",""), "")
91
+ # x_ = " ".join(str(x_).replace(" ", "_"))
92
+ index +=1
93
+ return current_audio, current_audio, ai_annotation ,current_text, plain_instruction
94
+
95
+ except StopIteration:
96
+ aud_text_generator = get_audio_path(aud_text) # Reset the generator
97
+ current_audio = next(aud_text_generator) # Start from the beginning
98
+ print("Current Audio after reset: ", current_audio)
99
+ gr.Info("Annotation Completed! Thank you for your time. Please close the tab!", duration=0)
100
+ return current_audio, current_audio, current_text,current_text, current_text
101
+
102
+ def save_transcription(path, text, additional_errors=""):
103
+ with open(f"{output_file}", "a") as f:
104
+ f.write(f"{path}\t{text}\t{additional_errors}\n")
105
+ return gr.Button("Get New Audio/Save updated transcription",interactive=False)
106
+
107
+ def activate_button():
108
+ return gr.Button("Get New Audio/Save updated transcription",interactive=True)
109
+
110
+ def increase(num):
111
+ if num == len(aud_text):
112
+ return 1
113
+ return num + 1
114
+
115
+ start_index = 1
116
+
117
+ def begin_annotation(annotator):
118
+ os.makedirs(f"./annotations/{annotator}", exist_ok=True)
119
+ global output_file, index, current_audio, current_text, ai_annotation, plain_instruction, start_index
120
+ output_file = f"./annotations/{annotator}/annotation.csv"
121
+ with open(output_file, 'r') as f:
122
+ index = sum(1 for line in f)
123
+ start_index = index
124
+ aud_text_generator = get_audio_path(aud_text[index:])
125
+ current_audio, current_text = next(aud_text_generator)
126
+ current_text, x_ = read_txt(current_text)
127
+ ai_annotation = texts_instructions.get(x_.strip().replace(" ", "").replace("ۚ",""), get_separated(x_.strip()))
128
+ plain_instruction = texts_plain_instruction.get(x_.strip().replace(" ", "").replace("ۚ",""), "")
129
+ return gr.Column(visible=True), gr.Column(visible=False), \
130
+ start_index, current_audio,current_audio, current_text,plain_instruction, ai_annotation
131
+
132
+ aud_text_generator = get_audio_path(aud_text[index:])
133
+ current_audio, current_text = next(aud_text_generator)
134
+ current_text, x_ = read_txt(current_text)
135
+ ai_annotation = texts_instructions.get(x_.strip().replace(" ", "").replace("ۚ",""), get_separated(x_.strip()))
136
+ plain_instruction = texts_plain_instruction.get(x_.strip().replace(" ", "").replace("ۚ",""), "")
137
+
138
+ with gr.Blocks(title = "Transcription Instruction") as instruction:
139
+ gr.Markdown("""
140
+ <div align="center">
141
+ <h2>Quran Pronunciation Annotation</h2>
142
+ </div>
143
+
144
+ # **الغرض من العمل**
145
+
146
+ ستقوم بتحديد الأخطاء النطقية التي يقوم بها المتكلم أثناء نطقه للجمل، وفقًا للإرشادات التالية
147
+
148
+ # **خطوات العمل**
149
+
150
+ 1. استمع بعناية للتسجيل الصوتي المرفق. تأكد من متابعة كل كلمة بدقة.
151
+ 2. قبل البدء، اقرأ وصف الخطأ المطلوب (مثال: استبدال الفتحة بالكسرة، أو نطق الحرف بطريقة غير صحيحة).
152
+ 3. افهم الجملة المتوقعة مع تمييز الخطأ المطلوب فيها باللون الأحمر.
153
+ 4. استمع مجددًا للتسجيل الصوتي للتحقق مما إذا كان المتكلم قد قام بالخطأ النطقي المطلوب.
154
+ 5. إذا لاحظت وجود أي أخطاء إضافية قام بها المتكلم ولم يتم تحديدها مسبقًا، قم بتوثيقها أيضًا.
155
+ 6. راجع كل كلمة منطوقة لتحديد أي انحراف إضافي عن النطق الصحيح.
156
+ 7. قم بتوثيق الأخطاء بطريقة منظمة وواضحة، مع الإشارة إلى نوع الخطأ وموقعه في الجملة.
157
+ 8. إستخدم الرمز @ للإشارة إلى كل حرف أو حركة خاطئة.
158
+ 9. بعد رمز @، قم بإضافة النسخة التي نُطقت بشكل خاطئ.
159
+ 10. يوجد ثلاث أنواع للاخطاء: استبدال , حذف أو أضافة:
160
+
161
+ ## **الاستبدال**
162
+
163
+ - إستبدال حرف بحرف أو حركة بحركة
164
+ - مثال استبدال العين بالحاء في العسر الي الحسر. تكتب ا ل ع@ح ُ س ر
165
+
166
+ ## **حذف**
167
+
168
+ - حذف حرف أو حركة
169
+ - مثال حذف التشديد في أنَّ الي أنَ. تكتب إ ِ نّ@  َ. يوجد مسافة بعد ال@ في حالة الحذف.
170
+
171
+ ## **إضافة**
172
+
173
+ - إضافة حرف أو حركة
174
+ - مثال إضافة حرف في العُسر الي العُوسر. تكتب ا ل ع ُ @و س ر. يوجد مسافة قبل ال @ في حالة الأضافة.
175
+
176
+ في حال وجود أي استفسارات أو مواجهة أي مشكلات، يمكنك التواصل عبر البريد الإلكتروني التالي:
177
+ omnia@lst.uni-saarland.de
178
+
179
+
180
+ شكراً جزيلاً لتعاونك والتزامك بالدقة
181
+ """)
182
+
183
+ with gr.Blocks(title = "Fix Transcription") as tool:
184
+
185
+ with gr.Column(visible=True) as annotation_name:
186
+ annotator_name = gr.Textbox(label="Annotator Name", placeholder="Enter your name", interactive=True)
187
+ begin_annotate = gr.Button("Begin Annotation", variant="primary")
188
+
189
+ with gr.Column(visible=False) as annotation_block:
190
+ progress = gr.Number(start_index, label = f"X of {len(aud_text)} audios" ,interactive=False)
191
+ audio = gr.Audio(label="Audio", interactive=False, value=current_audio, autoplay=True)
192
+ audio_file_name = gr.Textbox(value=current_audio, label="Audio File Name", interactive=False, visible=False)
193
+
194
+ gr.Markdown('<h3>Expected Transcription:</h3>')
195
+ original_text = gr.Markdown(value=current_text)
196
+ gr.Markdown('<h3>Error Details:</h3>')
197
+ original_annotation = gr.Markdown(f"{plain_instruction}")
198
+
199
+ transcription = gr.Textbox(label="Actual transcription (editable)", value=ai_annotation, interactive=True, rtl=True)
200
+
201
+ additional_errors = gr.Textbox(label="Additional Errors (optional)", value="", placeholder="Enter additional errors", interactive=True, rtl=True)
202
+ get_new_audio = gr.Button("Get New Audio/Save updated transcription",
203
+ variant="primary")
204
+
205
+ begin_annotate.click(begin_annotation, [annotator_name], \
206
+ [annotation_block, annotation_name, progress, audio, audio_file_name,\
207
+ original_text, original_annotation, transcription])
208
+
209
+ get_new_audio.click(save_transcription, [audio_file_name, transcription, additional_errors], [get_new_audio]).\
210
+ then(give_audio_text, outputs=[audio,audio_file_name, transcription, original_text, original_annotation]).\
211
+ then(activate_button, outputs=[get_new_audio]).then(increase,progress, progress)
212
+
213
+
214
+
215
+ demo = gr.TabbedInterface([instruction, tool], ["Instructions", "Annotate"])
216
+
217
+ if __name__ == "__main__":
218
+ demo.launch(share=True)
219
+
220
+
utils.py ADDED
@@ -0,0 +1,100 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ import os
2
+ import sys
3
+ import random
4
+ import datetime
5
+ import pandas as pd
6
+ import gradio as gr
7
+ import soundfile as sf
8
+
9
+ global samples_to_record
10
+
11
+ with open("Record Prompts - Extra.csv", "r") as f:
12
+ header = f.readline()
13
+ samples_to_record = [(index, line.strip()) for index, line in enumerate(f)]
14
+ # shuffle the samples
15
+ random.shuffle(samples_to_record)
16
+ samples_to_record = random.choices(samples_to_record, k=50)
17
+
18
+ def load_data():
19
+ with open("Record Prompts - Extra.csv", "r") as f:
20
+ global samples_to_record
21
+ header = f.readline()
22
+ samples_to_record = [(index, line.strip()) for index, line in enumerate(f)]
23
+ # shuffle the samples
24
+ random.shuffle(samples_to_record)
25
+
26
+ global index
27
+
28
+ def save_audio():
29
+ return gr.Info("Recording done, play to doublecheck or click on 'Save Audio' to save the audio", duration=5), gr.Button(visible=True)
30
+
31
+ def save_transcription(audio, file_name, text,recorder_path):
32
+ if os.path.exists(file_name):
33
+ file_name = file_name.replace('.wav', f'{random.randint(0, 1000)}.wav')
34
+ sf.write(file_name, audio[1], 16000)
35
+ text_file = file_name.replace('.wav', '.txt')
36
+ os.system(f"touch {text_file}")
37
+ os.system(f"echo '{text}' >> {text_file}")
38
+ os.system(f"echo '{file_name}\t{text}' >> {recorder_path}/recordings.txt")
39
+ return gr.Button("Save Audio",interactive=False)
40
+
41
+ def activate_button():
42
+ return gr.Button("Save Audio",interactive=True), gr.Audio(sources=["microphone"], label="Begin Presenting", type="numpy")
43
+
44
+ def clear():
45
+ return None,gr.Button(visible=False)
46
+
47
+ def clear_markdown():
48
+ return gr.Markdown(value="")
49
+
50
+ def show_button():
51
+ return gr.Button(visible=True)
52
+
53
+ def record_new(recorder_dir, transcription_index, audio_name):
54
+ with open(f"{recorder_dir}/recordings.txt", "r") as f:
55
+ done = len(f.readlines())
56
+ if done >= len(samples_to_record):
57
+ # return gr.Column(visible=False), gr.Column(visible=False), gr.Markdown(value="All recordings done!"), "", -1, ""
58
+ done = random.randint(0, len(samples_to_record)-1)
59
+ # gr.Info("Minimum recordings done! Please exit the application.", duration=15)
60
+ ind, text = samples_to_record[done]
61
+ st,err,end,instruction=text.split(',')
62
+ transcription_index=ind
63
+ audio_name = f"{recorder_dir}/{ind:05}.wav"
64
+ return gr.Markdown(value=highlight_template.format(st,err,end)),gr.Markdown(value=instruction_template.format(instruction)), \
65
+ audio_name, transcription_index, audio_name,done
66
+
67
+ def begin_session(name, gender, age, dialect):
68
+ os.makedirs(f"recordings/{name}-{gender}-{dialect}", exist_ok=True)
69
+ current_time = datetime.datetime.now()
70
+ os.system(f"echo -e 'Login on: {current_time} \nName: {name}\nGender: {gender}\nAge: {age}\nDialect: {dialect}' >> recordings/{name}-{gender}-{dialect}/info.txt")
71
+ if os.path.exists(f"recordings/{name}-{gender}-{dialect}/recordings.txt"):
72
+ return gr.Info("Welcome back! Please continue from where you stopped", duration=3), f"recordings/{name}-{gender}-{dialect}"
73
+ else:
74
+ os.system(f"touch recordings/{name}-{gender}-{dialect}/recordings.txt")
75
+ return gr.Info("Welcome! Please begin your session", duration=3), f"recordings/{name}-{gender}-{dialect}"
76
+
77
+ highlight_template = '<p style="font-family:"Traditional Arabic",font-size:150px;">{0}<span style="color:red;">{1}</span>{2}</p>'
78
+
79
+ instruction_template = '<p style="font-family:"Traditional Arabic",font-size:150px;"><mark>{0}</mark></p>'
80
+
81
+ def begin_record(recorder_dir, audio_name, transcription_index):
82
+ load_data()
83
+ with open(f"{recorder_dir}/recordings.txt", "r") as f:
84
+ done = len(f.readlines())
85
+ if done >= len(samples_to_record):
86
+ # return gr.Column(visible=False), gr.Column(visible=False), gr.Markdown(value="All recordings done!"), "", -1, ""
87
+ done = random.randint(0, len(samples_to_record)-1)
88
+ ind, text = samples_to_record[done]
89
+ st,err,end,instruction=text.split(',')
90
+ i = audio_name
91
+ audio_name = f"{recorder_dir}/{ind:05}.wav"
92
+ transcription_index=ind
93
+ return gr.Column(visible=True), gr.Column(visible=False), \
94
+ gr.Markdown(value=highlight_template.format(st,err,end)),gr.Markdown(value=instruction_template.format(instruction)), \
95
+ audio_name, transcription_index, audio_name, done
96
+
97
+ def increase(num):
98
+ if num == 15:
99
+ return 1
100
+ return num + 1