FinGLM/code/nsddd/nsddd_final

frameworks	license	tasks
Pytorch	Apache License 2.0	text-generation

note：由于文件太大，github限制无法上传，可以在魔搭社区查看本项目的完整代码：https://modelscope.cn/models/finglm/FinGLM/files

模型微调

针对SQL生成的模型微调请参考 chatglm-sql-fine-tune

项目推理

文件介绍

./submitnsddd/app
├── configs  --->  配置文件目录
│   ├── added_keywords.csv
│   ├── all-pdf-name.txt
│   ├── class3_database.csv
│   ├── __init__.py
│   ├── item_map.csv
│   ├── item_to_parten.csv
│   ├── model_config.py
│   ├── modify.ipynb
│   ├── statistic_query_res.csv
│   └── statistic_query_res_new.csv
├── database  --->  查询数据库构建
│   ├── badcase.ipynb
│   ├── badcase.py
│   ├── fin_data.db
│   ├── gen_csv.py
│   ├── get_null.py
│   ├── __init__.py
│   ├── out.csv
│   ├── __pycache__
│   ├── sql_db.py
│   ├── test_db.py
├── __init__.py
├── log.txt
├── main.py
├── query_sql.py
├── retrieval  --->  向量数据库检索
│   ├── dense_retrieval.py
│   ├── __init__.py
│   ├── __pycache__
│   └── sparse_retrieval.py
├── run.sh
└── utils  --->  辅助程序
    ├── compute_value.py
    ├── find_annual_report.py
    ├── __init__.py
    ├── __pycache__
    ├── query_database.py
    ├── query_map.py
    └── statistic_answer.py

推理

docker build -f Dockerfile -t registry.cn-shanghai.aliyuncs.com/chengs18/nsddd:10.0 .

docker run -d -it --gpus all --shm-size=6g -v /data/chengshuang/SMP2023/tcdata:/tcdata --name smp_submit_10.0 registry.cn-shanghai.aliyuncs.com/chengs18/nsddd:10.0