Database Loader Error using ml.net
还没有人认领这个 Issue。
评估
- 难度
- 3/5
- 预计耗时
- 1-2 天
- 新手友好度
- 35/100
- Issue 类型
- 缺陷
- 描述清晰度
- 基本清楚
- 活跃度
- 停滞
调研方向
从 TrainFromDatabase 开始,将 DatabaseLoader 使用的 OSEParams 模型与 SELECT 列和文本文件的架构进行比较。重现 pipeline.Fit 处的失败,然后验证基于数据库的 IDataView 具有兼容的列类型,并且 Fit 成功完成。
由索引模型根据 Issue 内容生成。
描述
I have a working ml.net application pulling data from a text file. I would like to pull the same data from MSSQL. However, I am getting an Invalid cast exception when attempting to run Fit.
System.InvalidCastException: 'Unable to cast object of type 'System.Byte' to type 'System.Single'.'
WORKING CODE:
ITransformer TrainFromTextFile(MLContext mlContext, string dataPath)
{
// Load the csv formatted data...
IDataView dataView = mlContext.Data.LoadFromTextFile<OSEParams>(dataPath, hasHeader: true, separatorChar: ',');
var pipeline = mlContext.Transforms.CopyColumns(outputColumnName: "Label", inputColumnName: "OSE")
.Append(mlContext.Transforms.Categorical.OneHotEncoding(outputColumnName: "ShiftEncoded", inputColumnName: "Shift"))
.Append(mlContext.Transforms.Categorical.OneHotEncoding(outputColumnName: "ProductEncoded", inputColumnName: "Product"))
.Append(mlContext.Transforms.Categorical.OneHotEncoding(outputColumnName: "TemperatureEncoded", inputColumnName: "Temperature"))
.Append(mlContext.Transforms.Concatenate("Features", "ShiftEncoded", "TemperatureEncoded", "ProductEncoded", "PPM"))
.Append(mlContext.Regression.Trainers.FastTree());
var model = pipeline.Fit(dataView);
return model;
}
Code producing error when running .Fit
ITransformer TrainFromDatabase(MLContext mlContext) {
string connectionString = "Data Source=LARRY-PC\\SQLEXPRESS;Initial Catalog=LUL_OEE_TestData;Integrated Security=True;Pooling=False";
string sqlCommand = "SELECT Current_Shift, Product, JDE, Temperature, PPM, OSE FROM LUL_OSE_Train_Data";
DatabaseLoader loader = mlContext.Data.CreateDatabaseLoader<OSEParams>();
DatabaseSource dbSource = new DatabaseSource(SqlClientFactory.Instance, connectionString, sqlCommand);
IDataView dataView = loader.Load(dbSource);
var pipeline = mlContext.Transforms.CopyColumns(outputColumnName: "Label", inputColumnName: "OSE")
.Append(mlContext.Transforms.Categorical.OneHotEncoding(outputColumnName: "ShiftEncoded", inputColumnName: "Shift"))
.Append(mlContext.Transforms.Categorical.OneHotEncoding(outputColumnName: "ProductEncoded", inputColumnName: "Product"))
.Append(mlContext.Transforms.Categorical.OneHotEncoding(outputColumnName: "TemperatureEncoded", inputColumnName: "Temperature"))
.Append(mlContext.Transforms.Concatenate("Features", "ShiftEncoded", "TemperatureEncoded", "ProductEncoded", "PPM"))
.Append(mlContext.Regression.Trainers.FastTree());
var model = pipeline.Fit(dataView);
return model;
There is no issue pulling data from SQL. I'm using the same connection string and query to populate a DataGridView with no problems. The csv file is formatted just like the table.
Thanks for any help!
- 主要语言
- PowerShell
- 星标
- 4.7k
- 派生
- 2.7k
- PR 合并指标
- 30 天内没有已合并 PR
环境准备
- 没有 Dockerfile 或 Docker Compose 文件
- 没有 Pull Request 模板
- 阅读贡献指南
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
dotnet/machinelearning-samples 的其他 Issue
-
Missing "Anomaly Detection of Numbers of Phone Calls sample" link on main readme可能已有人在做 @tomaszcekalo 于 1970 天前认领。 未关闭
难度 1/5 1 小时以内 新手友好度 85/100
-
Missing “DeepLearning Binary classification sample" link on main readme可能已有人在做 @tomaszcekalo 于 1970 天前认领。 未关闭
难度 1/5 1 小时以内 新手友好度 68/100
-
难度 5/5 一周以上 新手友好度 25/100
dotnet/machinelearning-samples#1048 ·
-
难度 4/5 3-5 天 新手友好度 20/100
dotnet/machinelearning-samples#1044 · 1 条评论 ·
-
难度 5/5 一周以上 新手友好度 15/100
dotnet/machinelearning-samples#1043 · 1 条评论 ·
查看 dotnet/machinelearning-samples 的全部 Issue
相似的 Issue
-
clawsweeper:fix-shape-clear clawsweeper:queueable-fix clawsweeper:source-repro impact:session-state issue-rating: 🦞 diamond lobster no-stale P2
难度 2/5 1-3 小时 新手友好度 74/100
openclaw/wacli#503 · 1 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
area:casework criticality:p3
难度 1/5 1 小时以内 新手友好度 94/100
registrystack/registry-stack#2084 ·
维护者通常 1 天内回复
-
area/indexing bug package/core triage
难度 2/5 1-3 小时 新手友好度 75/100
维护者通常 1 天内回复
-
Add: AVA Media未关闭channels:add check:failed
难度 2/5 1-3 小时 新手友好度 63/100
-
难度 2/5 1-3 小时 新手友好度 72/100
维护者通常 1 天内回复