pulsareon/JspaceAI
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

feat: add scripts for fetching and training educational corpus

Browse Source 
- Implemented `fetch_corpus.py` to scrape Chinese educational content from Wikipedia, covering subjects like Chinese, Math, English, Chemistry, Politics, History, Geography, Physics, and Biology.
- Developed `fetch_corpus_incremental.py` for incremental fetching of missing entries, with automatic retries for rate limiting and support for resuming interrupted downloads.
- Created `train_chat.py` for training a dialogue model, including corpus cleaning, vocabulary management, and staged training with adaptive learning rates.
This commit is contained in:
XiuchengWu
2026-07-07 17:42:24 +08:00
parent d5affe4458
commit 81f6fd58e0
96 changed files with 53920 additions and 17 deletions
Download Patch File Download Diff File Expand all files Collapse all files

37
corpus/义务教育教材/小学/一年级/道德与法治/人教版思想政治电子课本_人教版部编版一年级道德与法治上册(2024秋版).md Normal file
View File

@@ -0,0 +1,37 @@
# 人教版部编版一年级道德与法治上册(2024秋版)
- **来源站点**：http://www.dzkbw.com
- **电子课本网目录**：http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/
## 目录与官方阅读链接
| 页码 | 章节 | 电子课本网 | 智慧教育平台 |
|------|------|------------|--------------|
| 006 | 第一单元 我是小学生啦 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/006.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=006) |
| 007 | 第1课 开开心心上学去 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/007.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=007) |
| 011 | 第2课 我向国旗敬个礼 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/011.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=011) |
| 015 | 第3课 这是我们的校园 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/015.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=015) |
| 019 | 第4课 平平安安回家来 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/019.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=019) |
| 022 | 第二单元 过好校园生活 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/022.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=022) |
| 023 | 第5课 老师，您好！ | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/023.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=023) |
| 027 | 第6课 拉拉手，交朋友 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/027.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=027) |
| 030 | 第7课 上课了，好好学 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/030.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=030) |
| 034 | 第8课 课余生活真丰富 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/034.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=034) |
| 038 | 第三单元 养成良好习惯 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/038.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=038) |
| 039 | 第9课 作息有规律 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/039.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=039) |
| 042 | 第10课 吃饭有讲究 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/042.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=042) |
| 046 | 第11课 对人有礼貌 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/046.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=046) |
| 049 | 第12课 玩也有学问 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/049.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=049) |
| 052 | 第四单元 我们讲文明 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/052.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=052) |
| 053 | 第13课 我们小点儿声 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/053.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=053) |
| 057 | 第14课 人人爱护公物 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/057.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=057) |
| 060 | 第15课 我们不乱扔 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/060.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=060) |
| 063 | 第16课 大家排好队 | [查看](http://www.dzkbw.com/books/rjb/zhengzhi/1s_2024/063.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=bdc00134-465d-454b-a541-dcd0cec4d86e&catalogType=tchMaterial&subCatalog=tchMaterial&page=063) |
## 网络补充资料
### 第一单元 我是小学生啦
- 未找到结果
### 第1课 开开心心上学去
- 未找到结果