CN105739990B - 一种基于C#远程调用kettle的实现方法 - Google Patents

Abstract

本发明公开了一种基于C#远程调用kettle的实现方法，其实现过程为：用户通过远程客户端，调用服务器端的kettle作业和转换，并实时查看其执行日志，以简化用户的操作，便于作业及转换的管理。本发明的一种基于C#远程调用kettle的实现方法与现有技术相比，减少远程桌面访问服务器次数，加强网络安全，简化专业操作，提高工作效率，方便管理员维护转换及作业。

Description

一种基于C#远程调用kettle的实现方法

技术领域

本发明涉及一种计算机技术领域，具体地说是一种基于C#远程调用kettle的实现方法。

背景技术

企业日益发展，机构越来越大，存在一套或多套业务系统，每天产生大量的结构化及非结构化数据，这些数据分布在多个存储系统，长时间后查找困难，特别是查询这些海量非结构化数据的速度较慢，在排序方面也存在非常严重的问题。而kettle等etl抽取工具可从中抽取可用关键信息，是建立数据仓库必备工具，因此建立大量转换及作业，由于数量大，管理人员对转换、作业管理难度大，且如今etl等大数据相关产品基本为java编写，C#大数据产品寥寥无几，一些以C#为主的软件公司，为了满足用户的需求，适应变化的市场，必须提供集成java大数据产品的管理解决方案。基于此，现提供一种基于C#远程调用kettle的实现方法。

发明内容

本发明的技术任务是针对以上不足之处，提供一种基于C#远程调用kettle的实现方法。

本发明提供一种基于C#远程调用kettle的实现方法，其实现过程为：用户通过远程客户端，调用服务器端的kettle作业和转换，并实时查看其执行日志，以简化用户的操作，便于作业及转换的管理。

远程调用的具体实现过程为：

首先设置任务，按照kettle的作业和转换分类，分别设置任务，一个任务有一个作业和多个转换；

上传作业、转换文件：即用户在测试环境中定制自己的转换和作业，测试通过后，通过上传功能上传至服务器kettle安装目录或指定的home路径；

设置参数：kettle参数为作业或转换的变量，利用参数制定可满足客户的场景的作业和转换；

执行并查看其日志：用户在客户端执行任务，远程调用服务器端已定义好的作业和转换，并通过客户端远程查看运行日志。

用户在远程客户端通过C#调用批处理文件的方式实现调用kettle作业和转换，该kettle为java编写的ui程序。

用户远程调用kettle通过C#的webservice技术实现，具体调用时，首先设置IIS其应用程序池的进程模型标识为administrator；然后设置IIS admin service属性为允许服务与桌面交互，最后实现调用。

本发明的一种基于C#远程调用kettle的实现方法和现有技术相比，具有以下有益效果：

减少远程桌面访问服务器次数，加强网络安全，简化专业操作，提高工作效率，方便管理员维护转换及作业；能够本地制作转换、作业并测试，可上传至服务器端并执行，减少远程访问服务器的操作，减少管理员工作量，便于作业及转换管理。

具体实施方式

下面结合具体实施例对本发明作进一步说明。

本发明的一种基于C#远程调用kettle的实现方法，其实现过程为：用户通过远程客户端，调用服务器端的kettle作业和转换，并实时查看其执行日志，以简化用户的操作，便于作业及转换的管理。

远程调用的具体实现过程为：

首先设置任务，按照kettle的作业和转换分类，分别设置任务，一个任务有一个作业和多个转换；

上传作业、转换文件：即用户在测试环境中定制自己的转换和作业，测试通过后，通过上传功能上传至服务器kettle安装目录或指定的home路径；

设置参数：kettle参数为作业或转换的变量，利用参数制定可满足客户的场景的作业和转换；

执行并查看其日志：用户在客户端执行任务，远程调用服务器端已定义好的作业和转换，并通过客户端远程查看运行日志。

用户在远程客户端通过C#调用批处理文件的方式实现调用kettle作业和转换，该kettle为java编写的ui程序。

用户远程调用kettle通过C#的webservice技术实现，具体调用时，首先设置IIS其应用程序池的进程模型标识为administrator；然后设置IIS admin service属性为允许服务与桌面交互，最后实现调用。

下面以具体的C#的webservice实例来举例说明本发明的方法：

public string implement(string id)

{

string ifsuccess = "true";

try

{

//连接数据库，从中取出所需字段。

IGSPDatabase GSPDatabase =GSPContext.Current.Database;

DataSet dataset = GSPDatabase.ExecuteDataSet("selectRWLX,ZYWJ,RWCSCODE,RWCSVALUE from IDI_RWZY inner join IDI_RWCS on IDI_RWZY.Code=IDI_RWCS.Code where IDI_RWZY.Code= '" + id + "'");

//判断用kitchen命令还是pan命令

string idicmd = "Pan";

string startlogo = " - 开始运行.";

string stoplogo = " 秒后处理结束.";

for (int i = 0; i < dataset.Tables[0].Rows.Count; i++)

{

if (Convert.ToString(dataset.Tables[0].Rows[i]["RWLX"]) == "1")

{

idicmd = "Kitchen";

startlogo = " - Start of run.";

stoplogo = "seconds.";

break;

}

}

//字符串拼接

string pamvlu = " /file "+fileposition +Convert.ToString(dataset.Tables[0].Rows[0]["ZYWJ"]);

for (int i = 0; i < dataset.Tables[0].Rows.Count; i++)

{

pamvlu += " " + string.Format("\"-param:{0}={1}\"", dataset.Tables[0].Rows[i]["RWCSCODE"], dataset.Tables[0].Rows[i]["RWCSVALUE"]);

}

System.Diagnostics.Process p = newSystem.Diagnostics.Process();

p.StartInfo.FileName = "cmd.exe";

p.StartInfo.UseShellExecute = false;

p.StartInfo.RedirectStandardInput = true;//可能接受来自调用程序的输入信息

p.StartInfo.RedirectStandardOutput = true;//由调用程序获取输出信息

p.StartInfo.RedirectStandardError = true;//重定向标准错误输出

p.StartInfo.CreateNoWindow = true;//不显示程序窗口

p.Start();//启动程序

//向CMD窗口发送输入信息：

p.StandardInput.WriteLine("D:");

p.StandardInput.WriteLine("cd "+idiposition);

string a = idicmd + pamvlu;

p.StandardInput.WriteLine(a);

p.StandardInput.AutoFlush = true;

p.StandardInput.WriteLine("exit");

string sOutput = p.StandardOutput.ReadToEnd();

p.Close();

ifsuccess= SaveLog( sOutput, idicmd, startlogo,stoplogo,id);

}

catch (Exception ex)

{

ifsuccess = "false";

}

return ifsuccess;

}

本发明能够自定义参数，为转换或作业提供灵活的参数；能够查看其运行日志，即转换或作业运行完毕后，可在线查看其运行情况的日志。

通过上面具体实施方式，所述技术领域的技术人员可容易的实现本发明。但是应当理解，本发明并不限于上述的具体实施方式。在公开的实施方式的基础上，所述技术领域的技术人员可任意组合不同的技术特征，从而实现不同的技术方案。

除说明书所述的技术特征外，均为本专业技术人员的已知技术。

Claims (1)

1.一种基于C#远程调用kettle的实现方法，其特征在于， 其实现过程为：用户通过远程客户端，调用服务器端的kettle作业和转换，并实时查看其执行日志，以简化用户的操作，便于作业及转换的管理；

远程调用的具体实现过程为：

首先设置任务，按照kettle的作业和转换分类，分别设置任务，一个任务有一个作业和多个转换；

上传作业、转换文件，即用户在测试环境中定制自己的转换和作业，测试通过后，通过上传功能上传至服务器kettle安装目录或指定的home路径；

设置参数，kettle参数为作业或转换的变量，利用参数制定可满足客户的场景的作业和转换；

执行并查看其日志，用户在客户端执行任务，远程调用服务器端已定义好的作业和转换，并通过客户端远程查看运行日志；

用户在远程客户端通过C#调用批处理文件的方式实现调用kettle作业和转换，该kettle为java编写的ui程序；

用户远程调用kettle通过C#的webservice技术实现，具体调用时，首先设置IIS其应用程序池的进程模型标识为administrator；然后设置IIS admin service属性为允许服务与桌面交互，最后实现调用。