BuckLakeAI / preprocess.py

Commit History

feat: Add data source configuration and implement yfinance integration for US stock indices
ac60dc3
Running

parkerjj commited on

移除情感评分函数中tokenizer调用的线程锁,简化代码逻辑
1caca07

parkerjj commited on

优化情感评分函数中的tokenizer调用,添加线程锁以确保线程安全
c439e76

parkerjj commited on

修改启动命令为 Uvicorn,调整 Gunicorn 配置中的工作进程数;添加懒加载机制以优化模型和tokenizer的加载,确保线程安全
7c28043

parkerjj commited on

更新 Gunicorn 配置以优化连接管理;在处理条目时增加对空文本的处理,确保输入有效性
78a2dc6

parkerjj commited on

优化预测函数的错误处理逻辑,返回空列表以替代错误信息;增加对空文本和股票代码的处理,确保输入有效性
558076d

parkerjj commited on

优化预测函数的输入文本打印逻辑,增加文本长度信息;改进长文本处理函数,考虑特殊标记长度以保持句子完整性
5c10677

parkerjj commited on

优化情感得分计算逻辑,增加长文本处理功能,改进模型得分组合方式,添加 nltk 依赖
a743ea2

parkerjj commited on

重构 preprocess.py,增加两个情感分析模型的支持,优化情感得分计算逻辑,增强错误处理和日志打印
3fdaf75

parkerjj commited on

优化预测函数,增加执行时间和输入文本长度的打印,调整处理逻辑以提高可读性
fcfffd7

parkerjj commited on

优化 Dockerfile 和 us_stock.py,增加 uvicorn 工作进程数,添加股票最新价格缓存功能,简化获取股票信息逻辑
8ec911f

parkerjj commited on

重构 preprocess.py 和 us_stock.py,优化模型加载逻辑,更新日期处理方式,添加历史数据处理函数以增强数据完整性
d48ef09

parkerjj commited on

从 Hugging Face Hub 下载 Word2Vec 模型,移除本地路径搜索逻辑
4e6d2ce

parkerjj commited on

更新 Dockerfile,安装 Spacy 及其模型;在 preprocess.py 中添加模型下载处理
8bf0955

parkerjj commited on

Daily Update, First Release for model 1012
62f31c8

parkerjj commited on

Uploading Model
cfe1a3c

parkerjj commited on