BuckLakeAI / preprocess.py

Commit History

移除情感评分函数中tokenizer调用的线程锁,简化代码逻辑
1caca07
Running

parkerjj commited on

优化情感评分函数中的tokenizer调用,添加线程锁以确保线程安全
c439e76

parkerjj commited on

修改启动命令为 Uvicorn,调整 Gunicorn 配置中的工作进程数;添加懒加载机制以优化模型和tokenizer的加载,确保线程安全
7c28043

parkerjj commited on

更新 Gunicorn 配置以优化连接管理;在处理条目时增加对空文本的处理,确保输入有效性
78a2dc6

parkerjj commited on

优化预测函数的错误处理逻辑,返回空列表以替代错误信息;增加对空文本和股票代码的处理,确保输入有效性
558076d

parkerjj commited on

优化预测函数的输入文本打印逻辑,增加文本长度信息;改进长文本处理函数,考虑特殊标记长度以保持句子完整性
5c10677

parkerjj commited on

优化情感得分计算逻辑,增加长文本处理功能,改进模型得分组合方式,添加 nltk 依赖
a743ea2

parkerjj commited on

重构 preprocess.py,增加两个情感分析模型的支持,优化情感得分计算逻辑,增强错误处理和日志打印
3fdaf75

parkerjj commited on

优化预测函数,增加执行时间和输入文本长度的打印,调整处理逻辑以提高可读性
fcfffd7

parkerjj commited on

优化 Dockerfile 和 us_stock.py,增加 uvicorn 工作进程数,添加股票最新价格缓存功能,简化获取股票信息逻辑
8ec911f

parkerjj commited on

重构 preprocess.py 和 us_stock.py,优化模型加载逻辑,更新日期处理方式,添加历史数据处理函数以增强数据完整性
d48ef09

parkerjj commited on

从 Hugging Face Hub 下载 Word2Vec 模型,移除本地路径搜索逻辑
4e6d2ce

parkerjj commited on

更新 Dockerfile,安装 Spacy 及其模型;在 preprocess.py 中添加模型下载处理
8bf0955

parkerjj commited on

Daily Update, First Release for model 1012
62f31c8

parkerjj commited on

Uploading Model
cfe1a3c

parkerjj commited on