CN105739990A

CN105739990A - 一种基于C#远程调用kettle的实现方法

Info

Publication number: CN105739990A
Application number: CN201610089370.6A
Authority: CN
Inventors: 臧德波
Original assignee: Inspur General Software Co Ltd
Current assignee: Inspur General Software Co Ltd
Priority date: 2016-02-17
Filing date: 2016-02-17
Publication date: 2016-07-06
Anticipated expiration: 2036-02-17
Also published as: CN105739990B

Abstract

本发明公开了一种基于C#远程调用kettle的实现方法，其实现过程为：用户通过远程客户端，调用服务器端的kettle作业和转换，并实时查看其执行日志，以简化用户的操作，便于作业及转换的管理。本发明的一种基于C#远程调用kettle的实现方法与现有技术相比，减少远程桌面访问服务器次数，加强网络安全，简化专业操作，提高工作效率，方便管理员维护转换及作业。

Description

一种基于C#远程调用kettle的实现方法

技术领域

本发明涉及一种计算机技术领域，具体地说是一种基于C#远程调用kettle的实现方法。

背景技术

企业日益发展，机构越来越大，存在一套或多套业务系统，每天产生大量的结构化及非结构化数据，这些数据分布在多个存储系统，长时间后查找困难，特别是查询这些海量非结构化数据的速度较慢，在排序方面也存在非常严重的问题。而kettle等etl抽取工具可从中抽取可用关键信息，是建立数据仓库必备工具，因此建立大量转换及作业，由于数量大，管理人员对转换、作业管理难度大，且如今etl等大数据相关产品基本为java编写，C#大数据产品寥寥无几，一些以C#为主的软件公司，为了满足用户的需求，适应变化的市场，必须提供集成java大数据产品的管理解决方案。基于此，现提供一种基于C#远程调用kettle的实现方法。

发明内容

本发明的技术任务是针对以上不足之处，提供一种基于C#远程调用kettle的实现方法。

本发明提供一种基于C#远程调用kettle的实现方法，其实现过程为：用户通过远程客户端，调用服务器端的kettle作业和转换，并实时查看其执行日志，以简化用户的操作，便于作业及转换的管理。

远程调用的具体实现过程为：

首先设置任务，按照kettle的作业和转换分类，分别设置任务，一个任务有一个作业和多个转换；

上传作业、转换文件：即用户在测试环境中定制自己的转换和作业，测试通过后，通过上传功能上传至服务器kettle安装目录或指定的home路径；

设置参数：kettle参数为作业或转换的变量，利用参数制定可满足客户的场景的作业和转换；

执行并查看其日志：用户在客户端执行任务，远程调用服务器端已定义好的作业和转换，并通过客户端远程查看运行日志。

用户在远程客户端通过C#调用批处理文件的方式实现调用kettle作业和转换，该kettle为java编写的ui程序。

用户远程调用kettle通过C#的webservice技术实现，具体调用时，首先设置IIS其应用程序池的进程模型标识为administrator；然后设置IISadminservice属性为允许服务与桌面交互，最后实现调用。

本发明的一种基于C#远程调用kettle的实现方法和现有技术相比，具有以下有益效果：

减少远程桌面访问服务器次数，加强网络安全，简化专业操作，提高工作效率，方便管理员维护转换及作业；能够本地制作转换、作业并测试，可上传至服务器端并执行，减少远程访问服务器的操作，减少管理员工作量，便于作业及转换管理。

具体实施方式

下面结合具体实施例对本发明作进一步说明。

本发明的一种基于C#远程调用kettle的实现方法，其实现过程为：用户通过远程客户端，调用服务器端的kettle作业和转换，并实时查看其执行日志，以简化用户的操作，便于作业及转换的管理。

远程调用的具体实现过程为：

下面以具体的C#的webservice实例来举例说明本发明的方法：

publicstringimplement(stringid)

{

stringifsuccess="true";

try

{

//连接数据库，从中取出所需字段。

IGSPDatabaseGSPDatabase=GSPContext.Current.Database;

DataSetdataset=GSPDatabase.ExecuteDataSet("selectRWLX,ZYWJ,RWCSCODE,RWCSVALUEfromIDI_RWZYinnerjoinIDI_RWCSonIDI_RWZY.Code=IDI_RWCS.CodewhereIDI_RWZY.Code='"+id+"'");

//判断用kitchen命令还是pan命令

stringidicmd="Pan";

stringstartlogo="-开始运行.";

stringstoplogo="秒后处理结束.";

for(inti=0;i<dataset.Tables[0].Rows.Count;i++)

{

if(Convert.ToString(dataset.Tables[0].Rows[i]["RWLX"])=="1")

{

idicmd="Kitchen";

startlogo="-Startofrun.";

stoplogo="seconds.";

break;

}

//字符串拼接

stringpamvlu="/file"+fileposition+Convert.ToString(dataset.Tables[0].Rows[0]["ZYWJ"]);

for(inti=0;i<dataset.Tables[0].Rows.Count;i++)

{

pamvlu+=""+string.Format("\"-param:{0}={1}\"",dataset.Tables[0].Rows[i]["RWCSCODE"],dataset.Tables[0].Rows[i]["RWCSVALUE"]);

}

System.Diagnostics.Processp=newSystem.Diagnostics.Process();

p.StartInfo.FileName="cmd.exe";

p.StartInfo.UseShellExecute=false;

p.StartInfo.RedirectStandardInput=true;//可能接受来自调用程序的输入信息

p.StartInfo.RedirectStandardOutput=true;//由调用程序获取输出信息

p.StartInfo.RedirectStandardError=true;//重定向标准错误输出

p.StartInfo.CreateNoWindow=true;//不显示程序窗口

p.Start();//启动程序

//向CMD窗口发送输入信息：

p.StandardInput.WriteLine("D:");

p.StandardInput.WriteLine("cd"+idiposition);

stringa=idicmd+pamvlu;

p.StandardInput.WriteLine(a);

p.StandardInput.AutoFlush=true;

p.StandardInput.WriteLine("exit");

stringsOutput=p.StandardOutput.ReadToEnd();

p.Close();

ifsuccess=SaveLog(sOutput,idicmd,startlogo,stoplogo,id);

}

catch(Exceptionex)

{

ifsuccess="false";

}

returnifsuccess;

}

本发明能够自定义参数，为转换或作业提供灵活的参数；能够查看其运行日志，即转换或作业运行完毕后，可在线查看其运行情况的日志。

通过上面具体实施方式，所述技术领域的技术人员可容易的实现本发明。但是应当理解，本发明并不限于上述的具体实施方式。在公开的实施方式的基础上，所述技术领域的技术人员可任意组合不同的技术特征，从而实现不同的技术方案。

除说明书所述的技术特征外，均为本专业技术人员的已知技术。

Claims

1.一种基于C#远程调用kettle的实现方法，其特征在于，其实现过程为：用户通过远程客户端，调用服务器端的kettle作业和转换，并实时查看其执行日志，以简化用户的操作，便于作业及转换的管理。

2.根据权利要求1所述的一种基于C#远程调用kettle的实现方法，其特征在于，远程调用的具体实现过程为：

上传作业、转换文件，即用户在测试环境中定制自己的转换和作业，测试通过后，通过上传功能上传至服务器kettle安装目录或指定的home路径；

设置参数，kettle参数为作业或转换的变量，利用参数制定可满足客户的场景的作业和转换；

执行并查看其日志，用户在客户端执行任务，远程调用服务器端已定义好的作业和转换，并通过客户端远程查看运行日志。

3.根据权利要求1所述的一种基于C#远程调用kettle的实现方法，其特征在于，用户在远程客户端通过C#调用批处理文件的方式实现调用kettle作业和转换，该kettle为java编写的ui程序。

4.根据权利要求3所述的一种基于C#远程调用kettle的实现方法，其特征在于，用户远程调用kettle通过C#的webservice技术实现，具体调用时，首先设置IIS其应用程序池的进程模型标识为administrator；然后设置IISadminservice属性为允许服务与桌面交互，最后实现调用。