feat: add scripts for fetching and training educational corpus

- Implemented `fetch_corpus.py` to scrape Chinese educational content from Wikipedia, covering subjects like Chinese, Math, English, Chemistry, Politics, History, Geography, Physics, and Biology.
- Developed `fetch_corpus_incremental.py` for incremental fetching of missing entries, with automatic retries for rate limiting and support for resuming interrupted downloads.
- Created `train_chat.py` for training a dialogue model, including corpus cleaning, vocabulary management, and staged training with adaptive learning rates.
This commit is contained in:
2026-07-07 17:42:24 +08:00
parent d5affe4458
commit 81f6fd58e0
96 changed files with 53920 additions and 17 deletions

View File

@@ -0,0 +1,37 @@
# 人教版人教鄂教版一年级科学上册(2024秋版)
- **来源站点**http://www.dzkbw.com
- **电子课本网目录**http://www.dzkbw.com/books/rjb/kexue/1s_2024/
## 目录与官方阅读链接
| 页码 | 章节 | 电子课本网 | 智慧教育平台 |
|------|------|------------|--------------|
| 006 | 第一单元 走近科学 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/006.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=006) |
| 007 | 1.“钓鱼”游戏 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/007.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=007) |
| 010 | 2.不倒翁 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/010.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=010) |
| 014 | 3.怎样学科学 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/014.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=014) |
| 018 | 单元回顾 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/018.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=018) |
| 021 | 第二单元 我们的感觉器官 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/021.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=021) |
| 022 | 4.我们怎样知道 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/022.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=022) |
| 027 | 5.观察水果 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/027.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=027) |
| 031 | 6.保护感觉器官 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/031.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=031) |
| 036 | 单元回顾 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/036.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=036) |
| 039 | 第三单元 家养动物 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/039.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=039) |
| 040 | 7.金鱼 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/040.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=040) |
| 044 | 8.猫和兔 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/044.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=044) |
| 049 | 9.更多的家养动物 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/049.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=049) |
| 052 | 单元回顾 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/052.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=052) |
| 055 | 第四单元 使用工具 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/055.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=055) |
| 056 | 10.常见的工具 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/056.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=056) |
| 059 | 11.拆装玩具 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/059.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=059) |
| 063 | 12.制作杯垫 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/063.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=063) |
| 067 | 单元回顾 | [查看](http://www.dzkbw.com/books/rjb/kexue/1s_2024/067.htm) | [官方阅读](https://basic.smartedu.cn/tchMaterial/detail?contentType=assets_document&contentId=64e96b25-9c23-498a-91da-c63e1ef531c7&catalogType=tchMaterial&subCatalog=tchMaterial&page=067) |
## 网络补充资料
### 第一单元 走近科学
- 未找到结果
### 1.“钓鱼”游戏
- 未找到结果