ES2845299T3 - Transmisión de datos en flujo de alto rendimiento - Google Patents

Transmisión de datos en flujo de alto rendimiento Download PDF

Info

Publication number
ES2845299T3
ES2845299T3 ES13839088T ES13839088T ES2845299T3 ES 2845299 T3 ES2845299 T3 ES 2845299T3 ES 13839088 T ES13839088 T ES 13839088T ES 13839088 T ES13839088 T ES 13839088T ES 2845299 T3 ES2845299 T3 ES 2845299T3
Authority
ES
Spain
Prior art keywords
data
source
tio
tra
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES13839088T
Other languages
English (en)
Inventor
Emile Werr
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NYSE Group Inc
Original Assignee
NYSE Group Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NYSE Group Inc filed Critical NYSE Group Inc
Application granted granted Critical
Publication of ES2845299T3 publication Critical patent/ES2845299T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/38Concurrent instruction execution, e.g. pipeline or look ahead
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/14Multichannel or multilink protocols

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

Método implementado por ordenador, que comprende: recibir, por parte de un procesador (402), un mapeo de datos que describe una asociación entre uno o más campos de una ubicación de almacenamiento de datos de una fuente de datos (102A, 102B, 102C, 104A, 104B, 104C) y uno o más campos de una ubicación de almacenamiento de datos de un destino objetivo (102A, 102B, 102C, 104A, 104B, 104C); analizar por lo menos uno de los datos de la fuente de datos (102A, 102B, 102C, 104A, 104B, 104C), metadatos que describen los datos de la fuente de datos, y características de almacenamiento lógicas y físicas asociadas a los datos de la fuente de datos, para detectar dinámicamente particiones asociadas a dichos datos, de manera que dichas particiones comprenden particiones físicas y/o lógicas; determinar un grado de paralelismo que se va a utilizar cuando se transfieren los datos entre la fuente de datos (102A, 102B, 102C, 104A, 104B, 104C) y el destino objetivo (102A, 102B, 102C, 104A, 104B, 104C) basándose en las particiones detectadas dinámicamente, generar, por parte del procesador (402), un plan de ejecución de transferencia de datos a partir del mapeo de datos para transferir datos desde la fuente de datos (102A, 102B, 102C, 104A, 104B, 104C) hasta el destino objetivo (102A, 102B, 102C, 104A, 104B, 104C), comprendiendo el plan de ejecución de transferencia de datos el grado determinado de paralelismo que se va a utilizar cuando se transfieren los datos desde la ubicación de almacenamiento de datos de la fuente de datos (102A, 102B, 102C, 104A, 104B, 104C) hasta la ubicación de almacenamiento de datos del destino objetivo (102A, 102B, 102C, 104A, 104B, 104C); y transferir, por parte del procesador (402), los datos desde la ubicación de almacenamiento de datos de la fuente de datos (102A, 102B, 102C, 104A, 104B, 104C) hasta la ubicación de almacenamiento de datos del destino objetivo (102A, 102B, 102C, 104A, 104B, 104C) usando el plan de ejecución de transferencia de datos generado.

Description

DESCRIPCIÓN
T ra n sm is ió n de d a to s en flu jo de a lto re n d im ie n to
Campo técnico
El ca m p o se re fie re , en g en e ra l, al p ro ce sa d o de d a to s y, m ás e sp e c ífica m e n te , a la tra n s fe re n c ia de d a tos sob re e n to rn o s d is trib u id os .
Antecedentes
A p ro x im a d a m e n te se g e n e ra n 2.5 tr illo n e s de b ytes de d a to s a n ive l m u n d ia l cad a día. A d e m á s, se e s tim a q ue el 90 % de los d a to s de l m u nd o se ha p ro d u c id o so lo en los dos ú ltim o s años.
El té rm in o “ big d a ta ” se re fie re a re co p ila c io n e s de g ra n d e s co n ju n to s de da tos com p le jo s . La g es tión de una re co p ila c ió n e n o rm e de d a tos p rese n ta m u ch o s d e sa fío s que inc luyen cap tura r, a lm acen ar, buscar, tra ns fo rm ar, tra n s fe r ir y a n a liza r d ich os datos. En particu la r, las h e rra m ie n ta s e x is te n te s de p ro ce sa d o de da tos no tie n e n la ca p a c id a d de m a n ip u la r y tra n s p o rta r ca n tid a d e s m a s iva s de da tos de m a ne ra s u fic ie n te m e n te rá p ida para s a tis fa c e r los re q u is ito s co m e rc ia le s .
El d o cu m e n to US 2007 /185938 A1 d ivu lg a la e je cuc ión de o p e ra c io n e s de g es tión de d a tos sob re da tos d up lica do s en una red in fo rm á tica , en d o n d e se p u e d e im p le m e n ta r p a ra le lis m o e n tre m ú ltip le s h ilos cu a n d o se lleva a cabo una d u p lica c ió n de datos . El d o c u m e n to US 2010 /082543 A1 d ivu lg a un s is te m a p ara m ig ra r d a tos d e n tro de una red de á re a de a lm a c e n a m ie n to . S e c re a un p lan de m ig ra c ió n p ara m o ve r d a to s a lm a c e n a d o s en la red de á rea de a lm a ce n a m ie n to , en d onde cada e le m e n to de da tos d eb e m o ve rse d e sd e una u b icac ión de o rigen hasta una u b ica c ió n de d es tino de a cu e rdo con un m a peo e n tre e lla s y en d onde se pueden e je cu ta r o p e ra c io n e s en para le lo .
P o r con s ig u ie n te , e x is te una n e ce s id a d de una so lu c ió n de a lto re n d im ie n to para p roce sa r, tra n s fo rm a r y d is tr ib u ir de m a n e ra rá p id a g ran d es ca n tid a d e s de d a tos de una fo rm a ta l que sa tis fa g a las d e m a n d a s de los c lien te s , las n e ce s id a d e s c o m e rc ia le s y los a cu e rd o s a n ive l de se rv ic io s .
E sta so lu c ió n la a p o rta n un m é to do im p le m e n ta d o p o r o rdenador, un s is te m a y un so p o rte leg ib le p o r o rd e n a d o r q ue co m p re n d e n las ca ra c te rís tic a s de las re iv in d ica c io n e s in d e p e n d ie n te s . En las re iv in d ica c io n e s d e p e n d ie n te s se d e fine n fo rm a s de re a liza c ió n p re fe rid a s de la inve nc ión .
Sumario
Las fo rm a s de re a liza c ió n se re fie ren , en genera l, a la tra n sm is ió n de da tos en flu jo de a lto re nd im ie n to . En una de las fo rm a s de re a liza c ió n , un p ro c e sa d o r rec ibe un m a pe o de d a to s q ue d e sc rib e una a so c ia c ió n e n tre uno o m ás ca m p o s de una u b icac ión de a lm a ce n a m ie n to de da tos de una fu e n te de d a to s y uno o m ás ca m p o s de una u b ica c ió n de a lm a ce n a m ie n to de d a tos de un d es tino o b je tivo . El p ro c e sa d o r g en e ra un p lan de e je cu c ió n de tra n s fe re n c ia de d a to s a p a rtir de l m a pe o de d a to s p ara tra n s fe r ir d a to s d e sd e la fu e n te de d a tos h as ta el d es tino o b je tivo d o n d e el p lan de e je cu c ió n de tra n s fe re n c ia de d a tos co m p re n d e un g rad o d e te rm in a d o de p a ra le lism o a u sa r cua nd o se tra n s fie re n los da tos . El p ro c e sa d o r ta m b ié n tra n s fie re los d a tos d esde la u b icac ión de a lm a ce n a m ie n to de la fu e n te de da tos h asta la u b icac ión de a lm a ce n a m ie n to de d a tos del d es tino o b je tivo u sando el p lan g e n e ra d o de e je cu c ió n de tra n s fe re n c ia de datos.
En o tra fo rm a de re a liza c ió n , un s is te m a inc lu ye una m e m o ria y un p ro c e sa d o r a co p la d o a la m e m o ria para p ro p o rc io n a r una tra n s m is ió n de da tos en flu jo de a lto re nd im ie n to . El s is te m a re c ibe un m a peo de da tos que d e sc rib e una a so c ia c ió n e n tre uno o m ás ca m p o s de una u b icac ión de a lm a ce n a m ie n to de d a tos de una fu e n te de d a tos y uno o m ás cam p os de una ub icac ión de a lm a ce n a m ie n to de datos de un destino ob je tivo . El s is tem a genera un p lan de e je cu c ió n de tra n s fe re n c ia de d a tos a p a rtir del m a pe o de d a tos p ara tra n s fe r ir d a tos d esde la fu e n te de d a tos h as ta el d e s tin o o b je tivo d on de el p lan de e je cu c ió n de tra n s fe re n c ia de da tos co m p re n d e un g rado d e te rm in a d o de p a ra le lism o a u sa r cu a n d o se tra n s fie re n los da tos . El s is te m a ta m b ié n tra n s fie re los d a tos d esde la u b ica c ió n de a lm a c e n a m ie n to de la fu e n te de d a tos h asta la u b ica c ió n de a lm a c e n a m ie n to de d a tos de l d es tino o b je tivo u sa n d o el p lan g e n e ra d o de e je cu c ió n de tra n s fe re n c ia de datos.
En una fo rm a de re a liza c ió n ad ic ion a l, un so p o rte leg ib le p o r o rd e n a d o r tie n e in s tru cc io n e s que, cu a n d o son e je c u ta d a s p o r un p rocesador, p rovo ca n q ue el p ro c e sa d o r lleve a cabo o pe ra c io n e s . Las in s tru cc io n e s inc luyen cód igo de p ro g ra m a leg ib le p or o rdenador, co n fig u ra d o para p ro vo ca r que el p ro ce sa d o r rec iba un m a pe o de d a tos que d e scribe una a so c ia c ión e n tre uno o m ás ca m p o s de una ub icac ión de a lm a ce n a m ie n to de d a tos de una fuen te de d a to s y uno o m ás ca m p o s de una u b icac ión de a lm a ce n a m ie n to de d a to s de un d e s tin o o b je tivo . Las in s tru cc io n e s inc lu ye n , ta m b ié n , un cód igo leg ib le p o r o rdenador, co n fig u ra d o para p ro vo ca r que el p ro ce sa d o r g e n e re un p lan de e je cu c ió n de tra n s fe re n c ia de da tos a p a rtir de l m a p e o de d a to s con el fin de tra n s fe r ir da tos d esde la fu e n te de d a tos hasta el d es tino o b je tivo d on de el p lan de e je cuc ión de tra n s fe re n c ia de d a tos com p re nd e un g rad o d e te rm in a d o de p a ra le lism o a u sa r cu a n d o se tra n s fie re n los datos. Las in s tru cc io n e s inc luyen , a de m ás, un có d ig o leg ib le p o r o rd e n a d o r co n fig u ra d o para p ro v o ca r que el p ro c e sa d o r tra n s fie ra los d a tos d esde la u b ica c ió n de a lm a ce n a m ie n to de la fu e n te de d a tos h asta la u b ica c ió n de a lm a c e n a m ie n to de d a to s d e l d es tino o b je tivo u sa n d o el p lan g e n e ra d o de e je cu c ió n de tra n s fe re n c ia de datos.
En la p re se n te m e m oria , se d escribe n de fo rm a d e ta lla d a o tras fo rm a s de re a liza c ió n , c a ra c te rís tica s y v e n ta ja s de la p re se n te inve nc ión , a s í com o la e s tru c tu ra y el fu n c io n a m ie n to de las d ive rsa s fo rm a s de re a liza c ió n de la p re se n te inve nc ión .
Breve descripción de los dibujos
La p re se n te inve nc ión se ilus tra a títu lo de e je m p lo , y no a títu lo lim ita tivo , y se p on d rá de m a n ifie s to al c o n s id e ra r la s ig u ie n te d e sc rip c ió n de ta lla da , co n s id e ra d a en co m b in a c ió n con los d ib u jos a d ju n tos , en los q ue los ca ra c te re s de re fe re n c ia ig u a le s se re fie ren a las m ism a s p artes en to d o s e llos, y en los cua les :
la fig u ra 1 ilus tra un d ia g ra m a de b lo q u e s de una a rq u ite c tu ra de un s is te m a de tra n s m is ió n de d a to s en flu jo de a lto re nd im ie n to , de a cu e rd o con va r ia s fo rm a s de re a liza c ió n de la p re se n te inve nc ión .
la fig u ra 2 es un d ia g ra m a de flu jo q ue ilus tra la tra n s m is ió n de d a to s en flu jo de a lto re n d im ie n to , de a cu e rd o con una fo rm a de re a liza c ió n de la p re se n te inve nc ión .
la fig u ra 3 es un d ia g ra m a de flu jo q ue ilus tra a sp e c to s a d ic io n a le s de la tra n s m is ió n de d a to s en flu jo de a lto re nd im ie n to , de a cu e rd o con una fo rm a de re a liza c ió n de la p re se n te invenc ión .
la fig u ra 4 es un d ia g ra m a de b lo q ue s de un s is te m a de o rd e n a d o r e je m p lifica tivo que p ue de lle va r a cab o una o m á s de las o p e ra c io n e s d e sc rita s en la p re se n te m em oria .
Descripción detallada
La p re se n te inve n c ió n va d ir ig id a a s is te m as , m é to d o s y p ro d u c to s de p ro g ra m a de o rd e n a d o r p ara la tra n sm is ió n de d a to s en flu jo de a lto re nd im ie n to . En una de las fo rm a s de re a liza c ió n , un m ó du lo tra n s m is o r de d a to s en flu jo de a lto re n d im ie n to es un s is te m a de tra n s fe re n c ia de d a to s de a lta v e lo c id a d q ue lleva a cab o una tra n s fe re n c ia rá p ida de g ra n d e s co n ju n to s de da tos e n tre e n to rn o s d is trib u id os . P o r e jem p lo , un m ó du lo de tra n sm is ió n de datos en flu jo de a lto re n d im ie n to p rop o rc ion a un tra n sp o rte de d a tos rá p ido y fiab le e n tre m e d io s de a lm a ce n a m ie n to de d a tos d is tr ib u id o s en y e n tre o rg a n iz a c io n e s en cu a lq u ie r lu g a r de l m undo.
A d ife re n c ia de las h e rra m ie n ta s tra d ic io n a le s de tra n s fe re n c ia de a rch ivo s (p o r e je m p lo , FTP, SFTP, RCP, e tcé te ra ), un m ó du lo tra n s m is o r de d a tos en flu jo de a lto re n d im ie n to es s in g u la r en la m e d id a en la q ue a d m ite el m o v im ie n to de a rch ivo s de to d o s los tipo s , se in te g ra con H adoop , se in te rco n e c ta con c u a lq u ie r te c n o lo g ía de base de d a to s /a lm a ce n a m ie n to de datos, inc lu ye un re p o s ito rio de m e ta d a to s para la co n fig u ra c ió n de m a pe os de fu e n te -a -o b je tivo , p ro p o rc ion a seg u rida d y d e re cho s de usuario de ta lla do s para el acce so a d a tos y las o pe ra c io ne s de datos, inc lu ye una in te rfaz g rá fica de u su ario (G U I) para u su a rios f in a le s y p ro p o rc io n a una in te rfaz de p ro g ra m a c ió n de a p lica c io n e s (A P I) p a ra la in te g ra c ió n en s is te m a s de fo n d o (back-end).
La fig u ra 1 ilus tra un d ia g ra m a de b lo q ue s de una a rq u ite c tu ra de s is te m a de tra n s m is ió n de d a tos en flu jo de a lto re n d im ie n to 100, de a cu e rd o con v a r ia s fo rm a s de re a liza c ió n de la p re se n te invenc ión .
La a rq u ite c tu ra de s is te m a de tra n s m is ió n de d a to s en flu jo de a lto re n d im ie n to 100 inc lu ye c lie n te s 101 A y 101B, un p rim e r c o n ju n to de fu e n te s /o b je tiv o s de d a to s 102 A -102 C , un s e g u n d o c o n ju n to de fu e n te s /o b je tiv o s de d a tos 104 A -140 C , unas re de s 106A y 106B, un s is te m a de tra n sm is ió n de d a tos en flu jo 108 y un ca tá lo g o de m e ta da tos 110.
La a rq u ite c tu ra de s is te m a de tra n sm is ió n de d a tos en flu jo de a lto re n d im ie n to 100 inc luye uno o m ás s is te m a s de o rd e n a d o r fís ico s y /o v irtu a le s co n e c ta d o s a una red, ta l com o las re de s 106A y 106B. La red p uede ser, p o r e je m p lo , una red p úb lica (p o r e je m p lo , In te rne t), una red p riva d a (p o r e je m p lo , una red de á rea loca l (L A N ), una red de á rea e x te nsa (W A N )), un s is te m a de a rch ivos de a lta d e fin ic ión (H D F S ), una red de á rea de a lm a ce n a m ie n to (S A N ), unos m e d io s de a lm a ce n a m ie n to p rop ios de la red (N A S ), unas c o m u n ica c io n e s e n tre p ro ce so s (IP C ) o c u a lq u ie r co m b in a c ió n de los m ism os.
Los s is te m a s de o rd e n a d o r pueden inc lu ir o rd e n a d o re s p e rso na les (P C ), o rd e n a d o re s portá tiles , te lé fo n o s m óviles, o rd e n a d o re s de tip o ta b le ta , o c u a lq u ie r o tro d isp o s itivo in fo rm á tico . Los s is te m a s de o rd e n a d o r pueden e je cu ta r un s is te m a o p e ra tiv o (O S ) q ue g e s tio n a hardware y software. Los s is te m a s de o rd e n a d o r ta m b ié n p ue de n in c lu ir una o m ás m á q u in a s de serv idor. U na m á q u in a de s e rv id o r p uede s e r un s e rv id o r ins ta la b le en bastidor, un o rd e n a d o r rúter, un o rd e n a d o r p e rsona l, un a s is te n te d ig ita l po rtá til, un te lé fo n o m óvil, un o rd e n a d o r portá til, un o rd e n a d o r de tip o ta b le ta , una cá m a ra , una v id e o c á m a ra , un netbook, un o rd e n a d o r de so b re m e sa , un ce n tro de m e d io s o c u a lq u ie r co m b in a c ió n de los m ism os . En un e je m p lo , los c lie n te s 101 A y 101B, las fu e n te s /o b je tiv o s de d a tos 102A - 102C, las fu e n te s /o b je tiv o s de da tos 104 A -104 C , y el s is te m a de tra n s m is ió n de da tos en flu jo 108 se p ro p o rc io n a n , cad a uno de e llos, u sa nd o uno o m ás s is te m a s de o rde n ad or.
La a rq u ite c tu ra de s is te m a de tra n sm is ió n de d a tos en flu jo de a lto re n d im ie n to 100 ta m b ié n puede in c lu ir unos m e d io s de a lm a ce n a m ie n to p e rs is te n te de datos, ta le s com o un se rv id o r de a rch ivos o m e d io s de a lm a ce n a m ie n to en red, ca p a ce s de a lm a c e n a r d ive rso s tip o s de datos . En a lg u n a s fo rm a s de re a liza c ió n , los m e d io s de a lm a c e n a m ie n to de d a to s p od rían in c lu ir o tro u o tros tip o s de m e d io s de a lm a c e n a m ie n to p ers is ten te , ta le s com o una b ase de d a to s o rie n ta d a a o b je to s , u na b ase de d a to s re lac io na l, una b ase de d a to s en m e m o ria y o tros . En un e jem p lo , el ca tá log o de m e ta d a to s 110 p uede re s id ir d en tro de unos ún icos m e d io s de a lm a ce n a m ie n to de datos o sob re m ú ltip le s m e d io s d ife re n te s de a lm a c e n a m ie n to de datos , lóg icos /fís icos .
Los c lie n te s 101 A y 101B p ueden s e r a p lica c io n e s , u tilid ad es , h e rra m ie n ta s u o tro software a u to m a tiza d o s o co n tro la d o s p o r el usuario , co n e c ta d o s al s is te m a de tra n s m is ió n de d a tos en flu jo 108 y q ue se co m u n ica n con el m ism o . Los c lie n te s 101A y 101B ta m b ié n p ueden s e r s is te m a s de o rd e n a d o r que g e n e ra n y e nv ían llam ad as b a sa d a s en in te rfa ce s de p ro g ra m a c ió n de a p lica c io n e s (A P I) o en o tros se rv ic io s al s is te m a de tra n s m is ió n de d a to s en flu jo 108, p o r e je m p lo , p a ra tra n s fe r ir d a to s d e sd e una fu e n te de d a tos (p o r e je m p lo , 102A, 102B , 102 C ) h as ta un d e s tin o o b je tivo (p o r e je m p lo , 104A, 104B, 104C), o v ice v e rsa cu a n d o p roceda .
En un e je m p lo , el m o v im ie n to de d a tos e n tre dos s is te m a s de o rd e n a d o r d ife re n te s lo o rq u e s ta el s is te m a de tra n sm is ió n de d a tos en flu jo 108. Un s is te m a de o rigen con tiene d a tos que se van a tra n s fe r ir a un s is tem a obje tivo . Los d a tos que se van a tra n s fe r ir se basan en un m a peo entre el s is te m a de o rigen y el s is tem a ob je tivo . El s is tem a de tra n s m is ió n de d a to s en flu jo 108 p e rm ite el m a pe o , la o rq u e s ta c ió n y la tra n s m is ió n en flu jo de d a to s h ac ia y d esde v a r io s tip o s de so lu c io n e s d ife re n te s de a lm a ce n a m ie n to de d a tos que inc lu ye n , a u n q u e sin c a rá c te r lim ita tivo , m e d io s de a lm a ce n a m ie n to p rop ios de la red (N A S ), te cn o lo g ía s de base de datos, s is te m as de a rch ivos , a p a ra to s de a lm a ce n a m ie n to de datos , e tcé te ra .
P o r e je m p lo , se pueden tra n s m it ir en flu jo da tos e n tre c u a lq u ie r tip o de re cu rso s s im ila re s o d ife re n te s de a lm a ce n a m ie n to de da tos (p o r e je m p lo , de s is te m a de a rch ivo s a s is te m a de a rch ivos , de b ase de d a to s a b ase de datos , de s is te m a de a rch ivo s a base de datos , de base de d a tos a s is te m a de a rch ivos , de a p a ra to a apa ra to , de s is te m a de a rch ivos a apa ra to , de a p a ra to a s is te m a de a rch ivos , de a p a ra to a base de datos, de base de datos a a p a ra to , e tcé te ra ). A d e m á s, los d a tos se p ueden tra n s m it ir en flu jo de un pun to a otro, se p ueden fu s io n a r en un ún ico punto, se p ueden divid ir, filtrar, agregar, tra n s fo rm a r y /o tra n s m itir en flu jo hacia uno o m ás d es tinos d ife ren tes de fo rm a in d e p e n d ie n te y /o s im u ltá ne a .
Un p rim e r c o n ju n to de fu e n te s /o b je tiv o s de d a tos 102 A -102 C re p re se n ta en g e n e ra l s is te m a s de o rd e n a d o r que a lm a ce n a n datos , p o r e je m p lo , en una p rim e ra u b icac ión o en n om b re de una o rg a n iza c ió n particu la r. Un seg un do c o n ju n to de fu e n te s /o b je tiv o s de d a tos 104 A -104 C re p re se n ta en g e n e ra l s is te m a s de o rd e n a d o r q ue a lm a ce n a n o a lm a ce n a rá n datos , p o r e je m p lo , en una se g u n d a u b icac ión o en n o m b re de una o rg a n iza c ió n d ife re n te . En a lg u n o s e je m p lo s , se p ue de n tra n s m it ir en flu jo d a to s en la m ism a u b ica c ió n fís ica (p o r e je m p lo , ce n tro de da tos), d en tro de la m ism a o rg a n iza c ió n y en el m ism o s is te m a de o rdenador. A d e m á s, un ún ico s is te m a de o rd e n a d o r p uede c o m p re n d e r m u ch a s fu e n te s de d a tos d ife re n te s de uno o m ás tip o s d ife re n te s .
C ad a s is te m a de fu e n te /o b je tivo de d a tos y cad a s is te m a de tra n sm is ió n de d a tos en flu jo 108 p uede in c lu ir su se rv ic io p e rfila d o r (p o r e je m p lo , se rv ic io p e rfila d o r 112A -112E), se rv ic io de m o n ito riza c ió n (114A -114E ), a ge n te d e s p a c h a d o r (116 A -116 E ) y /o se rv ic io de tra n sm is ió n en flu jo (116 A -116 E ) re sp e c tivo prop io . En a lg u n a s fo rm a s de re a liza c ió n , cad a fu e n te y o b je tivo de d a to s tie n e la co le cc ió n de s e rv ic io s a n tes m e n c io n a d a . En o tra s fo rm a s de re a liza c ió n , a lg u n a s fu e n te s de d a tos y a lg u n o s o b je tivo s p ueden te n e r los se rv ic io s , pero o tro s no los ten d rán . A lg u n a s fu e n te s de d a tos y a lg u n o s o b je tivo s pueden te n e r so la m e n te un co n ju n to parc ia l de los se rv ic ios. Todavía en o tra s fo rm a s de re a liza c ió n , n in g u n a fu e n te u o b je tivo u tiliza d ich o s se rv ic io s .
El se rv ic io p e rfila d o r 112 A -112 E cap tu ra e sta d ís tica s sob re lo que está o cu rr ie n d o en un s is te m a de o rd e n a d o r (p o r e je m p lo , m e m oria , C P U , u tiliza c ió n de l d isco , e tcé te ra ). Un se rv ic io p e rfila d o r 112A -112E p ue de e sc r ib ir d a to s en un ca tá lo g o de m e ta d a to s 110 o b ien de m a n e ra d ire c ta o b ien con la a yu d a de p ro ce so s de m e ta se rv ic io 140. En un e jem p lo , un se rv ic io p e rfila d o r 112A -112E puede re co p ila r da tos de p e rfila do loca lm en te a d e m á s de e sc rib ir d ich o s d a tos en el ca tá lo g o de m e ta d a to s 110.
En una fo rm a de rea lizac ión , las fu e n te s de da tos no se com u n ica n d ire c ta m e n te con d es tino s ob je tivo . En su lugar, el s is te m a de tra n s m is ió n de d a tos en flu jo 108 o rq u e s ta una tra n s a c c ió n co m p le ta de tra n s m is ió n en flu jo en n o m b re de la fue n te y el o b je tivo u sando co m p o n e n te s y p roce so s co m p a tib le s con m e ta da tos . En a lg u n a s fo rm as de re a liza c ió n , los c o m p o n e n te s y p roce so s , co m p a tib le s con m e ta d a to s , de l s is te m a de tra n s m is ió n de d a to s en flu jo 108 no se co m u n ica n d ire c ta m e n te con parte o con n inguno de los o tros co m p o n e n te s o p roce so s del s is te m a. P o r e je m p lo , p a rte o la to ta lid a d de d ich a co m u n ica c ió n se p uede p ro d u c ir de m a n e ra in d ire c ta u sa n d o m e ta d a to s a lm a ce n a d o s en el ca tá lo g o de m e ta d a to s 110.
El s is te m a de tra nsm is ión de d a tos en flu jo 108 con su lta al ca tá log o de m e ta da tos 110 para d e te rm in a r cap ac id ad es y d is p o n ib ilid a d de s is te m a s de o rd e n a d o r im p lica d o s e n /a s o c ia d o s a una tra n s a c c ió n de tra n s m is ió n de d a to s en flu jo . E s to p erm ite q ue el s is te m a de tra n s m is ió n de da tos en flu jo 108 d ec ida de m a ne ra in te lig e n te cu á n d o in ic ia r la tra n s m is ió n de d a to s en flu jo , p o r e je m p lo , b a sá n d o se en los re cu rso s o p o d e r c o m p u ta c io n a le s d isp o n ib le s , y cóm o a s ig n a r e fica zm e n te re cu rso s cu a n d o se lleva a cab o la tra n s m is ió n de d a to s en flu jo .
En uno de los e je m p los , un se rv ic io p e rfila d o r 112A -112E a lm a ce n a in fo rm a c ión de p roce sa d o de l s is te m a de o rd e n a d o r y /o de m e d io s de a lm a ce n a m ie n to de d a tos a in te rva lo s re g u la re s /d ive rso s (p o r e je m p lo , t ie m p o , even tos, e tcé te ra ), que se p ueden b a sa r en un a jus te de la con figu ra c ió n . P o r e jem p lo , un se rv ic io p e rfila d o r 112a -112E p uede o b te n e r una ins ta n tán ea de e s ta d ís tica s de u tilizac ión en cu rso cada c inco seg un do s . Las e s ta d ís tica s de u tilizac ión p ueden in c lu ir cu a le sq u ie ra e s ta d ís tica s a so c ia d a s a la u tilizac ió n de la C P U , la u tilizac ió n de la m e m oria , la u tilizac ió n de los d iscos , la u tilizac ió n de la red y /o la u tilizac ió n de los m e d io s de a lm a c e n a m ie n to de datos. D ich as e s ta d ís tica s se p ueden a lm acenar, ana liza r, a g re g a r y p ro ce sa r a d ic io n a lm e n te a lo la rgo de l t ie m p o para d e s a rro lla r e s ta d ís tica s h is tó ricas , ta le s co m o líne as de base h is tó ricas .
En una fo rm a de re a liza c ió n , se p re se n ta un pane l de con tro l a los u su a rios y /o a d m in is tra d o re s para p ro p o rc io n a r una ins ta n tán ea del re n d im ie n to en cu rso y /o e s ta d ís tica s h is tó ricas . En un e je m p lo , se p ro p o rc io n a una in s ta n tá n e a en cu rso en fo rm a de una g rá fica en línea con co d ifica c ió n de co lo re s com o parte de un pane l de co n tro l web. Un o p e ra d o r/a d m in is tra d o r p ue de h a c e r c lic en un in d ic a d o r q ue se v u e lve ro jo para v e r d ia g n ó s tico s a so c ia d o s y para re c ib ir in fo rm a c ión a d ic ion a l sob re un tem a . En o tro e jem p lo , se usa un panel de con tro l web para p re s e n ta r d e sv ia c io n e s (en tie m p o real o p re v ia s ) con re sp e c to a los p a tro n e s de uso h is tó ricos .
Un se rv ic io de m o n ito riza c ió n 114A -114E es un a ge n te que m o n ito riza o tros se rv ic io s que se co n fig u ra n para e je cu ta rse en un a n fitr ión particu la r. P o r e je m p lo , el se rv ic io de m o n ito riza c ió n 114A -114E p uede d e te rm in a r se rv ic io s que se su p o n e que se e stán e je cu ta n d o en un s is te m a de o rd e n a d o r p a rticu la r (p o r e jem p lo , fu e n te s /o b je tiv o s de d a tos ta le s co m o 102A, 102B, 102C , 104A, y el s is te m a de tra n sm is ió n de d a tos en flu jo 108, e tcé te ra ). En e je m p lo , el se rv ic io de m o n ito riza c ió n 114A -114E hace ping en e stos se rv ic io s de una m a nera p e rió d ica y, a u to m á tica m e n te , re a liza una a u to e va lu a c ió n y re in ic ia to d o s los se rv ic io s q ue e stén fun c io n a n d o .
El a g e n te d e sp a c h a d o r 116A -116E es re spo nsa b le de re c ib ir so lic itu d e s de c lien te . Las so lic itu d e s p ueden se r para e je c u ta r a lg ú n tip o de o rde n en un a n fitr ió n p a rtic u la r q u e e s tá h a c ie n d o fu n c io n a r un a g e n te d e s p a c h a d o r 116A -116E. P o r e je m p lo , un n odo m a e s tro o p ro ce so s de tra b a jo 160 de l s is te m a de tra n s m is ió n de d a tos en flu jo 108 p ueden lla m a r a un a ge n te d e sp a c h a d o r re spe ctivo 116A -116E para m a te ria liza r una o rden en el s is te m a en el que se e je cu ta el a ge n te d e s p a c h a d o r 116A-116E . En un e je m p lo , se usa un a ge n te d e s p a c h a d o r 116A -116E para lle va r re cu e n to s sob re una fu e n te /o b je tivo de d a tos y /o para d e te rm in a r si u p ro ce so de tra n s m is ió n en flu jo se ha co m p le ta d o de m a ne ra sa tis fa c to ria .
El se rv ic io de tra n sm is ió n en flu jo 118A -118E es re sp o n sa b le de las o p e ra c io n e s “g e t” y “ p u t” . En una fo rm a de re a liza c ió n , el se rv ic io de tra n sm is ió n en flu jo 118E en el s is te m a de tra n sm is ió n de d a tos en flu jo 108 se com u n ica con a g e n te s de tra n s m is ió n en flu jo de c lie n te ta le s com o el se rv ic io de tra n s m is ió n en flu jo 118A, 118B, 118C y /o 118D. Los s e rv ic io s de tra n s m is ió n en flu jo de c lie n te p ue de n e n v ia r so lic itu d e s p ara tra n s m it ir d a to s en flu jo . P o r e je m p lo , un se rv ic io de tra n sm is ió n en flu jo de c lien te puede re a liza r una llam ad a al in te rm e d ia rio de so lic itu d e s /re sp u e s ta s 130 para tra n s m it ir d a tos en flu jo e n tre s is te m as .
En una fo rm a de re a liza c ió n , los se rv ic io s de tra n s m is ió n en flu jo 118A -118E se p ue de n u sa r para re c o p ila r d a tos de una fu e n te de d a tos loca l y p a ra e sc rib ir d a tos en una fu e n te de d a to s de d es tino . Los se rv ic io s de tra n sm is ió n en flu jo 118A -118E pueden e sc rib ir el p rog reso y los re su ltad o s del tra b a jo que lleva a cab o cada serv ic io respectivo en el ca tá lo g o de m e ta d a to s 110. A d e m á s, los se rv ic io s de tra n s m is ió n en flu jo de c lien te 118A -118D pueden tra b a ja r en c o o p e ra c ió n con el se rv ic io de tra n s m is ió n de flu jo 118E d e l s is te m a de tra n s m is ió n de d a to s en flu jo 108 para tra n s m it ir d a tos en flu jo .
El s is te m a de tra n sm is ió n de d a tos en flu jo 108 inc lu ye se rv ic io s a d a p ta d o re s de d a tos 120, el in te rm e d ia rio de so lic itu d e s /re sp u e s ta s 130, el p roce so de m e ta se rv ic io 140, el g e s to r de ca rga s de tra b a jo 150, los p ro ce so s de tra b a jo 160, los h ilos de tra b a jo 170, el m o to r de g e n e ra c ió n de ó rd e n e s 180, el se rv ic io p e rfila d o r 112E, el se rv ic io de m o n ito r iza c ió n 114E, el a g e n te d e s p a c h a d o r 116E y el se rv ic io de tra n s m is ió n en flu jo 118E.
El s is te m a de tra n s m is ió n de da tos en flu jo 108 o rq u e s ta y e je cu ta s e rv ic io s de tra n s m is ió n de d a tos en flu jo de a lta ve lo c id a d , p o r e je m p lo , e n tre p la ta fo rm a s de te c n o lo g ía d is trib u id a y no com p a tib le . En un e je m p lo , el s is te m a de tra n sm is ió n de d a tos en flu jo 108 usa uno o m ás n od os a g ru p a d o s en cluster (p o r e je m p lo , un cluster de L inux) p a ra lle v a r a cab o o p e ra c io n e s . P o r e je m p lo , los n od os p ro p o rc io n a n los re cu rso s in fo rm á tico s u sa d o s para lle va r a cab o d ive rsa s a c tiv id a d e s que inc luyen , a u n q u e sin c a rá c te r lim ita tivo , re c ib ir y p ro c e sa r so lic itud es , a n a liza r recursos, a lm a c e n a r flu jo s de tra ba jo , d e te rm in a r qué o p e ra c io n e s es n ecesa rio e jecuta r, y tra n s m itir da tos en flu jo .
En un e n to rn o fe d e ra d o de tra n s m is ió n de d a tos en flu jo , cada s is te m a de tra n s m is ió n de d a tos en flu jo 108 entre una p lu ra lida d de s is te m a s re la c io n a d o s de tra n s m is ió n de d a tos en flu jo puede h a ce r que uno o m ás de sus p rop ios n od os re sp e c tivo s q ue son u sa do s p o r él p ro ce se n datos . En un e je m p lo , cad a s is te m a de tra n s m is ió n de d a tos en flu jo 108 h ace que al m e no s un n odo a so c ia d o lleve a cab o ta rea s. Los s is te m a s de tra n sm is ió n de d a tos en flu jo 108 con m ú ltip le s n od os p ue de n te n e r un ún ico nodo m a e s tro y m ú ltip le s n odos de tra ba jo . A d e m á s, un nodo m a es tro ta m b ié n p ue de a c tu a r co m o nodo de tra b a jo en un e n to rn o de nodo ú n ico o m u ltin o d o (p o r e jem p lo , un n odo m a es tro p ue de d e s p a c h a r tra b a jo para re a liza r a su p rop ia d irecc ión IP). En una fo rm a de re a liza c ió n , los s is te m a s de tra n s m is ió n de d a tos en flu jo 108 no co m p a rte n n in g ún nodo. En o tras fo rm a s de re a liza c ió n , los s is te m a s de tra n s m is ió n de d a to s en flu jo p ue de n c o m p a rtir n od os y /o to m a r p re s ta d o s n od os (p o r e je m p lo , ta le s com o uno o m ás n od os de tra ba jo ).
En a rq u ite c tu ra s de a lta cap ac id ad , a lto re n d im ie n to y /o a lta d isp o n ib ilid a d , se p ueden a ñ a d ir n odos a d ic io n a le s (p a ra o b te n e r un cau da l, una ve lo c id a d , una to le ra n c ia a fa llo s , e tcé te ra , a d ic io n a le s ) u sa n d o una h e rra m ie n ta de in te rfaz g rá fica de u suario (G U I) de e ta pa fro n ta l o a u to m á tica m e n te de una re se rva de recursos. Se p ueden a ñ a d ir n od os a d ic io n a le s sin n in g ún tie m p o de in d isp o n ib ilid a d u sa n d o una G U I o un p ro ce so a u to m a tiza d o . En g en era l, el n úm ero de nodos a so c ia d o s al s is te m a de tra n s m is ió n de d a tos en flu jo 108 es d in á m ico ya que se pueden a ñ a d ir o e lim in a r nodos de m a ne ra fle x ib le m ie n tra s un s is te m a de tra n s m is ió n de da tos en flu jo p e rm a n e ce en líne a y o pe ra tivo .
En uno de los e je m p los , el s is te m a de tra n sm is ió n de d a to s en flu jo 108 se p ro p o rc io n a en fo rm a de un e n to rno fed e ra d o . P o r e jem p lo , el s is te m a de tra n sm is ió n de da tos en flu jo 108 puede e x is tir com o una p lu ra lida d de s is te m a s d ife re n te s de tra n s m is ió n de d a tos en f lu jo in te rco n e c ta d o s q ue fu n c io n a n , cada uno de e llos, de m a nera ind e p e n d ie n te , pero co m p a rte n y tra n s fie re n tra b a jo de fo rm a flu ida . P o r e je m p lo , un p rim e r s is te m a de tra n sm is ió n de d a tos en flu jo 108 se p uede a s ig n a r en una p rim e ra reg ión g eo g rá fica , y un se g u n d o s is te m a de tra n sm is ió n de d a tos en flu jo 108 se p uede a s ig n a r en una se g u n d a reg ión g e o g rá fica de e n tre una p lu ra lida d de re g io ne s g e o g rá fica s a las q ue p res ta se rv ic io un e n to rn o fed e rad o .
En una fo rm a de rea lizac ión , el p rim e r s is te m a de tra n sm is ió n de d a tos en flu jo 108 p uede re c ib ir una so lic itud para tra n s m it ir d a tos en flu jo e n tre d os m e d io s de a lm a ce n a m ie n to de d a tos en la se g u n d a reg ión geo g rá fica . El p rim e r s is te m a de tra n sm is ió n de d a tos en flu jo 108 puede te n e r co n o c im ie n to de l se g u n d o s is te m a de tra n s m is ió n de d a tos en flu jo 108 en o a so c ia d o a la se g u n d a re g ión geo g rá fica , y p uede tra n s fe r ir la so lic itud al se g u n d o s is te m a de tra n s m is ió n de d a to s en flu jo 108 p ara su p ro ce sa d o (p o r e je m p lo , o b ien a n tes o b ien d e sp u é s de un p roce so de a u te n tica c ió n o v a lid a c ió n ). De este m odo, el p rim e r s is te m a de tra n s m is ió n de d a tos en flu jo 108 puede tra n s fe r ir o a s ig n a r el tra b a jo al se g u n d o s is te m a de tra n sm is ió n de d a tos en flu jo 108 en la co n fig u ra c ió n fed e ra d a para g a ra n tiza r que el tra b a jo se lleva a cabo de m a ne ra e fic ie n te (p o r e jem p lo , para no a tra v e s a r una red), segura , y /o para sa tis fa c e r re q u is ito s e sp e c ífico s a n ive l de se rv ic io . A d e m á s, en un e jem p lo , un s is te m a de tra n sm is ió n de d a tos en flu jo 108 puede o rq u e s ta r una tra n sm is ió n en flu jo en tre m e d io s de a lm a ce n a m ie n to de datos en un cluster loca l, en o tro cluster, so b re cen tros de datos, o e n tre s is te m a s de o rd e n a d o r ( in c lu s ive en el m ism o s is te m a de o rde n ad or).
Los se rv ic io s a d a p ta d o re s de d a tos 120 son un co n ju n to de co m p o n e n te s de software que perm ite n que el s is tem a de tra n s m is ió n de d a to s en flu jo 108 se co n e c te e in te ra cc io n e con v a r io s tip o s de fu e n te s de d a tos . P o r e je m p lo , p uede h a b e r d isp o n ib le s uno o m ás se rv ic io s a d a p ta d o re s de d a tos para in te g ra r una fu e n te /o b je tivo de d a tos con el s is te m a de tra n sm is ió n de d a tos en flu jo 108. En uno de los e je m p los , se p uede u sa r un a d a p ta d o r de datos g en é rico , ta l com o un a d a p ta d o r de C o n e c tiv id a d de B a se s de D a tos de Ja va (J D B C ) p ara c o m u n ic a rs e con una fu e n te /o b je tivo de datos . En o tro e je m p lo , se puede d e s a rro lla r y u tiliz a r un a d a p ta d o r na tivo d e sa rro lla d o e sp e c ífica m e n te para una in te racc ión y co m u n ica c ió n de a lto re nd im ie n to con una p la ta fo rm a te cn o ló g ica a so c ia d a a una fu e n te de d a tos e sp e c ífica con el fin de p ro p o rc io n a r una tra n s m is ió n de d a tos en flu jo rá p id a /o p tim iza d a . El s is te m a de tra n s m is ió n de d a to s en flu jo 108 p ue de u sa r una a rq u ite c tu ra de s is te m a de tra n s m is ió n de d a to s en flu jo de a lto re n d im ie n to 100 q ue sea in d e p e n d ie n te de c u a lq u ie r so lu c ió n o p la ta fo rm a te cn o ló g ica . Los se rv ic io s a d a p ta d o re s de d a tos 120 pe rm ite n que el s is te m a de tra n s m is ió n de d a tos en flu jo 108 se in te rco n e c te con d ive rsa s s o lu c io n e s té cn ica s no c o m p a tib le s o fre c id a s p o r d ife re n te s p rove ed o res .
El in te rm e d ia rio de so lic itu d e s /re sp u e s ta s 130 rec ibe y re spo nd e a so lic itu d e s de c lien te s 101A, 101B. En un e jem p lo , el in te rm e d ia rio de so lic itu d e s /re sp u e s ta s 130 es un co m p o n e n te e sca la b le que, p o r e jem p lo , p e rm ite que c ien tos o m iles de c lien te s (p o r e je m p lo , 101 A y 101B ) se con ec ten al s is te m a de tra n sm is ió n de d a tos en flu jo 108. C u a n d o el in te rm e d ia rio de so lic itu d e s /re sp u e s ta s 130 rec ibe una so lic itud , el m ism o p uede a n a liza r la so lic itud para d e te rm in a r la n a tu ra le za de e sta ú ltim a (p o r e je m p lo , tra n s m is ió n en flu jo , carga , e x tra cc ió n , d up lica c ió n , e tcé te ra , de d a tos ). A c o n tin u a c ió n , el in te rm e d ia rio de re sp u e s ta s so lic itu d e s 130 p ue de s e le cc io n a r una u tilid ad co rre sp o n d ie n te y lla m a r a la m ism a para tra ta r la so lic itud (p o r e je m p lo , u tilidad de tra n sm is ió n en flu jo , u tilidad de carga , u tilid ad de e x tra cc ió n , u tilid ad de d u p lica c ió n , e tcé te ra , de datos).
El p roce so de m e ta se rv ic io 140 se co m u n ica con un ca tá lo g o de m e ta d a to s 110. P o r e je m p lo , el p roce so de m e ta se rv ic io 140 p ue de le e r d a tos de l y e sc rib ir d a tos en el ca tá lo g o de m e ta d a to s 110. El ca tá lo g o de m e ta d a to s 110 p ue de c o n te n e r in fo rm a c ió n so b re seg u rid a d , d e re cho s , m a pe o de datos , in fo rm a c ión de uso, re cu rso s del s is tem a, e tcé te ra , que e s tán a so c ia d o s al s is te m a de tra n sm is ió n de d a tos de flu jo 108. En un e je m p lo , el ca tá log o de m e ta d a to s 110 ta m b ié n p uede c o n te n e r a tr ib u to s de p ro ce sa d o fís ico s y /o lóg icos y d a tos de re n d im ie n to a so c ia d o s a uno o m ás de las d ive rsa s fu e n te s /o b je tiv o s de d a to s (p o r e je m p lo , 102A -C , 104A -C ).
En un e je m p lo , el p roce so de m e ta se rv ic io 140 con su lta al ca tá lo g o de m e ta d a to s 110 para a u te n tica r una so lic itud de u suario b asán do se en títu lo co n fig u ra d o s de un u su ario a lm a ce n a d o s en el ca tá lo g o de m e ta d a to s 110. El p ro ce so de m e ta se rv ic io 140 ta m b ié n p uede le e r/e sc r ib ir d a to s de a c tiv id a d y re n d im ie n to de l s is te m a de tra n s m is ió n de d a tos en flu jo 108 d e l/en el ca tá lo g o de m e ta d a to s 110.
El p ro ce so de m e ta se rv ic io 140 ta m b ié n p ue de a lm a c e n a r in fo rm a c ió n de m a pe o de d a tos q ue p e rm ite q ue d a tos de una p rim e ra fu e n te /o b je tivo de d a to s (p o r e je m p lo , 102A , 102B o 102 C ) se a so c ie n o v in c u le n a una se g u n d a fu e n te /o b je tivo de d a tos (p o r e je m p lo , 104A, 104B o 104C). En un e jem p lo , la in fo rm a c ión de m a pe o p erm ite la tra n s fe re n c ia de d a to s e n tre (h a c ia y /o d e sd e ) la p rim e ra fu e n te /o b je tivo de d a to s y la s e g u n d a fu e n te /o b je tivo de datos. En un e jem p lo , un m a peo o v in cu la c ió n e n tre una fu e n te y un d estino p uede e sp e c ifica r uno o m ás s is te m as e sp e c ífico s de tra n s m is ió n de d a to s en flu jo 108 (o fe d e ra c io n e s /e sp a c io de n o m b re s ) a u sa r p ara la tra n s m is ió n en flu jo de d a tos a so c ia d o s al m a p e o /v in cu la c ió n .
El g e s to r de ca rga s de tra b a jo 150 es un p roce so p la n ific a d o r in te rno a so c ia d o a un s is te m a de tra n s m is ió n de d a tos en flu jo 108. En un e je m p lo , el g e s to r de ca rga s de tra b a jo 150 se e je cu ta en un s e rv id o r m a es tro de un cluster de se rv id o re s q ue fo rm an parte de un s is te m a de tra n sm is ió n de d a tos en flu jo 108. El g e s to r de ca rga s de tra b a jo 150 p uede a n a liza r m e ta d a to s de m a pe o q ue d e sc rib e n a so c ia c io n e s e n tre una p rim e ra fu e n te /o b je tivo de d a tos y una s e g u n d a fu e n te /o b je tivo de datos.
En un e je m p lo , el g e s to r de ca rga s de tra b a jo 150 p ue de d e te rm in a r que una ta re a que re c ibe para tra n s fe r ir da tos e n tre dos m e d io s de a lm a ce n a m ie n to de d a tos se d ebe e je cu ta r en al m e no s o tro s is te m a de tra n sm is ió n de datos en flu jo 108 de e n tre una p lu ra lida d de s is te m a s de tra n sm is ió n de d a tos en flu jo (p o r e je m p lo , sob re la base de un a cu e rd o a n ive l de se rv ic io , una u b ica c ió n g eo g rá fica , una u tilizac ió n e sp e ra d a de recursos , re cu rso s d isp on ib le s , una co n fig u ra c ió n de u su a rio /fe d e ra c ió n /e sp a c io de n om b re s en un m a p e o /v in cu la c ió n , e tcé te ra ). El g e s to r de ca rg a s de tra b a jo 150 ta m b ié n in ic ia o re cu rre a uno s p ro ce so s de tra b a jo 160 para lleva r a cabo un tra b a jo a so c ia d o a la so lic itu d re c ib id a p o r el s is te m a de tra n s m is ió n de d a tos en flu jo 108.
En una fo rm a de re a liza c ió n , cada s is te m a de tra n s m is ió n de d a to s en flu jo 108 de una p lu ra lida d de s is te m a s de tra n s m is ió n de da tos en flu jo tie n e su p rop io g e s to r de ca rga s de tra b a jo 150 respectivo . P o r e jem p lo , cad a s is te m a de tra n s m is ió n de d a to s en flu jo 108 p ue de te n e r su p ro p io g e s to r de ca rg a s de tra b a jo 150 q ue se e je c u ta en el n odo m a e s tro re sp e c tivo de l s is te m a de tra n s m is ió n de d a to s en flu jo 108. En un e je m p lo , ca d a g e s to r de ca rga s de tra b a jo 150 t ie n e su p rop io g o b e rn a d o r o lím ite en té rm in o s de un n ú m e ro to ta l de ta re a s q ue p uede lle va r a cabo a la ve z (in d e p e n d ie n te m e n te de cu á n ta s ta re a s se pud ie ra n e je cu ta r fís ica m e n te en una fuen te , o b je tivo y /o tra n s m is ió n de d a tos en flu jo en c u a lq u ie r m o m e n to dado). P o r e je m p lo , un a d m in is tra d o r p uede c o n fig u ra r un p a rá m e tro de co n fig u ra c ió n de l g e s to r de ca rg a s de tra b a jo 150 de l s is te m a de tra n s m is ió n de d a tos en flu jo 108 q ue d e fina un n úm e ro m á x im o de ta re a s q ue p uede e je c u ta r s im u ltá n e a m e n te el g e s to r de ca rg a s de tra b a jo particu la r.
En un e je m p lo , el g e s to r de ca rg a s de tra b a jo 150 a c tú a com o un g o b e rn a d o r para to d o el p ro ce sa d o a so c ia d o al s is te m a de tra n s m is ió n de d a to s en flu jo 108. P o r e je m p lo , in c lu so si los re cu rso s e x te rn o s p u e d e n lle v a r a cab o tre in ta ta re a s en p a ra le lo con re sp e c to a una fuen te , el g e s to r de ca rga s de tra b a jo 150 p uede re s tr in g ir el n úm ero m á x im o de ta re a s que p uede e je c u ta r b a sá n d o se en su p rop io m á x im o co n fig u ra d o (p o r e je m p lo , m e no s de tre in ta ), si fue ra necesa rio . El g e s to r de ca rga s de tra b a jo 150 puede lleva r a cabo una o rq u e sta c ió n no so la m e n te a c tu an do com o g o b e rn a d o r de l p ro ce sa d o q ue se p ro d u ce en el s is te m a de tra n s m is ió n de d a tos en flu jo 108, s ino ta m b ié n g rac ia s a que e n tie n d e (a tra vé s del ca tá lo g o de m e ta d a to s 110) lo que es cap az de re a liza r cad a s is te m a y cuánto tra b a jo e stá lleva nd o a cabo cada s is te m a en cu a lq u ie r ins ta n te de tie m p o dado. De este m odo, el g e s to r de ca rgas de tra b a jo 150 p uede d e s p a c h a r tra b a jo y e je cu ta r ta re a s de p roce sa d o de d a tos de m a ne ra in te lige n te basán do se en d ich a in fo rm a c ión .
El g e s to r de ca rga s de tra b a jo puede s e r re sp o n sa b le de d e te rm in a r cu á nd o d eben lleva rse a cab o o p e ra c io n e s so lic itad as . En un e je m p lo , el g e s to r de ca rg a s de tra b a jo 150 re a liza lla m a d a s al ca tá lo g o de m e ta d a to s 110 para id e n tif ica r so lic itu d e s pen d ie n tes , e s ta d o s de p roce sa d o , c a p a c id a d e s de p roce sa d o , ca rga s de tra b a jo ex is ten tes , e tcé te ra , de s is te m a s de o rd e n a d o r a so c ia d o s a so lic itu d e s p e n d ie n te s cua nd o se d e sp a ch a n ta rea s. P o r e jem p lo , el g e s to r de ca rga s de tra b a jo 150 p ue de le e r el ca tá lo g o de m e ta d a to s 110 para d e te rm in a r e s ta d ís tica s en cu rso so b re d ive rso s a sp e c to s de un s is te m a de o rige n , un s is te m a de d e s tin o o b je tivo , un s is te m a de tra n s m is ió n de d a tos en flu jo 108, una o m ás redes, e q u ip o s de red y /u o tro u o tros re cu rso s in fo rm á tico s . De e ste m odo, el g e s to r de ca rga s de tra b a jo 150 p uede lle g a r a te n e r co n o c im ie n to de la co m p e te n c ia (o d is p o n ib ilid a d ) q ue e x is te en una m á qu ina , en un e q u ip o de red, en una o m ás redes, en un s e rv id o r de o rigen y /o en un s e rv id o r de destino .
En un e jem p lo , el g e s to r de ca rga s de tra b a jo 150 ide n tifica s is te m as q ue se usa rán para p ro ce sa r una tra n sa cc ió n de tra n sm is ió n de d a tos en flu jo sob re la base de un m a pe o q ue se a lm a ce n a en el ca tá lo g o de m e ta d a to s 110. El g e s to r de ca rga s de tra b a jo 150 se p uede c o n fig u ra r ta m b ié n con p a rá m e tro s para id e n tif ic a r cu á n ta s ta re a s s im u ltá n e a s se pueden e je c u ta r en c u a lq u ie r m o m e n to d ad o en el s is te m a de tra n s m is ió n de d a tos en flu jo 108. A d e m á s, cad a s is te m a de o rd e n a d o r ind iv idu a l, ta l com o un s is te m a de o rigen u o b je tivo , p ue de te n e r sus p rop ios p a rá m e tro s a so c ia d o s d e fin id o s en el ca tá lo g o de m e ta d a to s 110 que ind ican cuá n ta s ta re a s s im u ltá n e a s puede tra ta r un re curso re spe ctivo o está co n fig u ra d o para tra ta r d icho re curso re spe ctivo en un m o m en to dado. El g e s to r de ca rga s de tra b a jo 150 puede c o n s id e ra r d icha in fo rm a c ión cu a n d o se d e te rm in a si d e s p a c h a r una so lic itud p e n d ie n te de tra n s m is ió n de d a tos en flu jo para su p roce sa d o .
En un e je m p lo , el g e s to r de ca rg a s de tra b a jo 150 y /o el se rv ic io p e rfila d o r 112A -112E p uede id e n tif ic a r una s itu a c ió n c rítica en uno o m ás s is te m a s a so c ia d o s a un p roce so p en d ie n te o a c tivo de tra n sm is ió n en flu jo . P o r e je m p lo , el g e s to r de ca rg a s de tra b a jo 150 p uede id e n tif ica r p ro a c tiva m e n te q ue un s is te m a se está q u e d a n d o sin e sp a c io lib re o q ue un s is te m a e s tá fu n c io n a n d o p o r e n c im a de un u m bra l c rítico de una C P U o una m e m oria . El g e s to r de ca rga s de tra b a jo 150 p uede no d e s p a c h a r una so lic itud p en d ie n te de tra n sm is ió n de d a tos en flu jo para que se co m p le te cu a n d o e x is te d icha s itu a c ió n crítica . En su lugar, el g e s to r de ca rga s de tra b a jo 150 p uede e n v ia r una n o tifica c ió n de a le rta a un a d m in is tra d o r o u su a rio en re lac ió n con la co n d ic ió n y p uede p ro p o rc io n a r una n o tifica c ió n de que la ta re a no se p roce sa rá . En a lg u n a s fo rm a s de re a liza c ió n , el g e s to r de ca rg a s de tra b a jo 150 in te ra cc io n a con s is te m a s sob re ce n tro s de datos , u b ica c io n e s g e o g rá fica s y e n tid a d e s co m e rc ia le s d ife re n te s.
En una fo rm a de re a liza c ió n , los p ro ce so s de tra b a jo 160 re c ibe n ta re a s que se d e sp a ch a n d esde el g e s to r de ca rg a s de tra b a jo 150 para lle v a r a cab o un tra b a jo a so c ia d o a una so lic itu d e n tra n te de tra n s m is ió n de d a tos en flu jo . En un e je m p lo , los p ro ce so s de tra b a jo 160 se p ue de n e je c u ta r en uno o m ás n od os de un cluster de nodos q ue e stán a so c ia d o s al s is te m a de tra n s m is ió n de d a tos en flu jo 108.
D e sp u é s de re c ib ir una ta re a que es d e s p a c h a d a p o r el g e s to r de ca rga s de tra b a jo 150, un p ro ce so de tra b a jo 160 p ue de a c tu a liz a r el e s ta d o de la ta re a d e s p a c h a d a a a ctivo . A co n tin u a c ió n , un p ro ce so de tra b a jo 160 puede a n a liza r e in s p e c c io n a r los da tos a tra n s fe r ir d esde la p rim era fu e n te /o b je tivo de d a tos h asta una se g u n d a fu e n te /o b je tivo de datos. P o r e je m p lo , un p roce so de tra b a jo 160 puede a n a liza r da tos que se a lm a ce n a n en el ca tá lo g o de m e ta d a to s 110 y que d escribe n cóm o está e s tru c tu ra d a y se g m e n ta d a en p a rtic io n e s fís ica y /o ló g ica m e n te una ca rga útil de datos.
Un p roce so de tra b a jo 160 p uede a n a liza r d ich os m e ta d a to s para d e te rm in a r cóm o se pueden s e g m e n ta r en p a rtic io n e s /d iv id ir (y p o s te rio rm e n te in g re sa r) los d a tos en fo rm a de una p lu ra lida d de u n id ad es de ta m a ñ o m ás p eq ue ño , q ue p ue de n s e r p ro ce sa d a s y tra n s m itid a s en flu jo s im u ltá n e a m e n te p o r d ive rso s re cu rso s in fo rm á tico s q ue tie n e n d ife re n te s ca p a c id a d e s . A d e m á s , un p ro ce so de tra b a jo 160 p ue de in v o ca r una p lu ra lid a d de h ilo s de tra b a jo 170 para lle va r a cab o el p ro ce sa d o de los datos. El n ú m e ro de h ilos de tra b a jo 170 invo ca d os se p uede b a sa r en uno o m ás de los re cu rso s d isp o n ib le s del s is te m a en una fu e n te de datos , un d es tino ob je tivo , o un s is te m a de tra n s m is ió n de d a to s en flu jo 108.
En un e je m p lo , el p roce so de tra b a jo 160 es “co m p a tib le con p a rtic io n e s ” lo cua l s ig n ifica que e n tie n d e cóm o se a lm a ce n a n fís ica m e n te los da tos y p uede d e te rm in a r cóm o se pueden s e g m e n ta r en p a rtic io n e s lóg ica y /o fís ic a m e n te los d a tos para fa c ilita r un p ro ce sa d o p ara le lo . En un e je m p lo , una p artic ión fís ica p uede re fe rirse a cóm o e s tán a lm a ce n a d o s los da tos en un a rch ivo , en un s is te m a de a rch ivos , o en una base de d a tos se g m e n ta d a en p a rtic io n e s (p o r e je m p lo , un a rch ivo , d iez a rch ivos , c ien tos de a rch ivos , m iles de a rch ivos , en una e s tru c tu ra de d ire c to rio s p a rticu la r b asad a en uno o m ás crite rios , e tcé te ra ). En o tro e je m p lo , una p artic ión lóg ica p uede re ferirse a una fo rm a de p a rtir los d a tos b a sá n d o se en un va lor, ta l com o p o r fech a , p ro d u cto s , ca te go rías , e tcé te ra . U na p artic ión fís ica o lóg ica p uede e s ta r d e fin id a p o r un a d m in is tra d o r com o parte de la id e n tifica c ió n de una e s tra teg ia de p a rtic ion es para una fu e n te de d a tos particu la r. D icha e s tra te g ia de p a rtic io n e s se puede a lm a c e n a r en el ca tá lo g o de m e ta d a to s 110 para a yu d a r al p ro ce so de tra b a jo 160 a d e te rm in a r có m o p ro ce sa r los datos.
En un e jem p lo , el p roce so de tra b a jo 160 d e te rm in a un m o de lo de a s ig na c ió n o n úm e ro de h ilos a u sa r basán do se en p a rtic io n e s fís ica s y /o lóg icas id e n tifica d a s para los d a tos . En un e je m p lo , el p roce so de tra b a jo 160 puede id e n tif ica r p a rtic io n e s u sa nd o in fo rm a c ión que d e sc rib e a tr ib u to s y c a ra c te rís tica s de a lm a ce n a m ie n to de los datos, que p ueden e s ta r d isp o n ib le s en el ca tá lo g o de m e ta d a to s 110. En o tro e jem p lo , el p roce so de tra b a jo 160 tam b ién p ue de d e te c ta r d in á m ica m e n te p a rtic io n e s o d e te rm in a r có m o s e g m e n ta r en p a rtic io n e s los d a tos a n a liza n d o los p ro p io s datos , a n a liza n d o m e ta d a to s q ue d e sc rib e n los da tos , y /o a n a liza n d o c a ra c te rís tic a s de a lm a c e n a m ie n to lóg icas y fís ica s a so c ia d a s a los datos.
En un e je m p lo , un p ro ce so de tra b a jo 160 re sp o n sa b le de tra n s fe r ir d a to s d e sd e 1000 a rch ivo s h asta un d e s tin o o b je tivo p uede a s ig n a r o a d ju d ica r cua tro h ilos a s ín cron os para lleva r a cabo la tra n s fe re n c ia de datos. P o r e jem p lo , el p ro ce so de tra b a jo 160 p ue de a s ig n a r 250 a rch ivo s a cad a h ilo para a s ig n a r u n ifo rm e m e n te el tra b a jo e n tre los cu a tro h ilos. El p ro ce so de tra b a jo 160 p uede g e n e ra r un m a n ifie s to in te rn o (a rch ivo o m e ta d a to s ) para o rd e n a r q ué a rch ivo s o g rup o de a rch ivo s e sp e c ífico s d eb e p ro c e sa r un h ilo e sp e c ífico (p o r e je m p lo , H ilo1 < 1 -250 > , H ilo2 < 251 -500 > , H ilo3 < 501 -750 > , H ilo4 <751 -1000 > ).
El p ro ce so de tra b a jo 160 ta m b ié n p uede a s ig n a r se g m e n to s de d a tos a p ro c e sa r en p a ra le lo b a sá n d o se en el ta m a ñ o , p o r e je m p lo , cu a n d o los se g m e n to s de d a tos va ríe n de ta m a ñ o y no son un ifo rm es . En un e je m p lo , el p ro ce so de tra b a jo 160 o rde n a a rch ivos que se van a p ro ce sa r según el ta m a ñ o y, a co n tin u a c ió n , d is trib u ye los a rch ivo s a ca d a h ilo de una m a n e ra c íc lica com o m é to do de d is trib u c ió n u n ifo rm e de la ca rg a e n tre los h ilos.
En una fo rm a de re a liza c ió n , el g e s to r de ca rg a s de tra b a jo 150 d e sp a ch a una ta re a a uno de una p lu ra lidad de p ro ce so s de tra b a jo 160 b asán do se en una so lic itu d de tra n sm is ió n de da tos en flu jo d esde una fu e n te de d a tos h as ta un d es tino ob je tivo . P o r e jem p lo , el g e s to r de ca rgas de tra b a jo 150 p ue de d e s p a c h a r una ta re a a un p roceso de tra b a jo 160 in d ire c ta m e n te a c tu a liza n d o el ca tá lo g o de m e ta d a to s 110 en lu g a r de h ace rlo d ire c ta m e n te lla m a n d o al p ro ce so de tra b a jo 160. En un e je m p lo , el g e s to r de ca rg a s de tra b a jo 150 p u e d e d e te rm in a r q u e un p ro ce so de tra b a jo 160 e stá d isp o n ib le leye nd o el ca tá lo g o de m e ta d a to s 110 y p uede a s ig n a r una ta re a a ese p ro ce so de tra b a jo 160 a c tu a liza n d o un cam p o de a s ig n a c ió n de ta re a s a so c ia d o a un id e n tif ic a d o r e xc lu s ivo co rre sp o n d ie n te (p o r e je m p lo , un ru n _ id ) en el ca tá lo g o de m e ta d a to s 110.
Un p roce so de tra b a jo 160 se p uede e je c u ta r en uno o m ás n odos de tra b a jo en fu n c ió n de la co n fig u ra c ió n y /o de la ca p a c id a d d isp on ib le . En un e je m p lo , un p ro ce so de tra b a jo 160 m o d ifica el e s ta d o de una ta re a en el ca tá lo g o de m e ta d a to s 110 d e p e n d ie n te a a c tiva cu a n d o re c ibe la ta rea . El p ro ce so de tra b a jo 160 ta m b ié n p ue de a n a liza r e in s p e c c io n a r los d a tos a tra n s fe r ir a n a liza n d o in fo rm a c ión a lm a ce n a d a en el ca tá lo g o de m e ta d a to s 110 que d e sc rib e cóm o están e s tru c tu ra d o s y o rg a n iza d o s los da tos . P o r e je m p lo , un p roce so de tra b a jo 160 puede d e te rm in a r un fa c to r de s im u lta n e id a d b a sá n d o se en el a ná lis is de cóm o se pueden se g m e n ta r en p a rtic ion es lóg ica y /o fís ic a m e n te los d a tos de m a ne ra que d ich as p a rtic io n e s se p ueden p ro ce sa r en p a ra le lo cu a n d o se tra n sm ite n los d a tos a un d e s tin o ob je tivo .
En un e jem p lo , un p roce so de tra b a jo 160 p uede a n a liza r a tr ibu to s de a lm a ce n a m ie n to de d a tos fís icos , ta le s com o una e s tru c tu ra de d irec to rios , un n ú m e ro de a rch ivos , y /o ta m a ñ o s de a rch ivo s u sa do s para a lm a c e n a r d a tos cu a n d o se d e te rm in a una e s tra te g ia de pa rtic ion es . Un p roce so de tra b a jo 160 ta m b ié n p ue de a n a liza r a tr ib u to s lóg icos de a lm a ce n a m ie n to de datos, ta le s com o tip o s de ta m a ñ o o ca m p o cua nd o se d e te rm in a una e s tra te g ia de p a rtic io n e s . A d e m á s, el p ro ce so de tra b a jo 160 p uede a n a liza r una m u e s tra o un con ju n to co m p le to de d a tos para d e te rm in a r cóm o se e s tru c tu ra n , a lm acen an y /o d is trib uye n los d a tos cu a n d o se d e te rm in a una e s tra te g ia de p a rtic ion es . En un e jem p lo , el p roce so de tra b a jo 160 d e te rm in a cóm o p uede d e sco m p o n e rse un con ju n to de datos en una p lu ra lidad de fra g m e n to s m ás p eq ue ño s q ue se pueden p ro ce sa r e fic ie n te m e n te en p ara le lo en tre una serie de d ife re n te s re cu rso s in fo rm á tico s s im ila re s o no s im ila re s que tie n e n d ive rso s n ive les de d isp o n ib ilid a d y re nd im ie n to .
En una fo rm a de re a liza c ió n , el p roce so de tra b a jo 160 d e te rm in a un g rad o de p a ra le lism o /fa c to r de s im u lta n e id a d a so c ia d o a los datos. P o r e jem p lo , un p roce so de tra b a jo 160 p uede d e te rm in a r que un con jun to de d a tos se puede d iv id ir en cua tro , d ie c isé is , c ien tos o m iles de fra g m e n to s (p o r e je m p lo , a rch ivos , con su ltas , e tcé te ra ) para su p ro ce sa d o para le lo . A con tin u a c ió n , un p roce so de tra b a jo 160 puede in vo ca r uno o m ás h ilos (es decir, h ilos de tra b a jo 170) para lle v a r a cab o una tra n s m is ió n en flu jo p a ra le la de los d a to s d e sd e una fu e n te de d a tos h as ta un d e s tin o o b je tivo . En un e je m p lo , el p roce so de tra b a jo 160 invo ca una serie de h ilos c o rre sp o n d ie n te s a un d e te rm in a d o g rad o de p a ra le lism o /fa c to r de s im u lta ne ida d . De este m odo, si el fa c to r de s im u lta n e id a d es “c u a tro ” , el p ro ce so de tra b a jo 160 p ue de in vo ca r cu a tro h ilos para tra n s m it ir en flu jo de los d a tos en para le lo .
En un e je m p lo , el p ro ce so de tra b a jo 160 p ue de a n a liza r una ca rga útil para d e te rm in a r cóm o se p ueden p ro ce sa r en p a ra le lo e fic ie n te m e n te d a tos a so c ia d o s . En un e je m p lo , el p ro ce so de tra b a jo 160 d e sp a ch a un ú n ico h ilo de tra b a jo 170 cu a n d o la ca rga útil es un ún ico a rch ivo /fra cc ió n de datos . C u a n d o h ay m u ch os a rch ivo s /fra cc io n e s de datos , el p roce so de tra b a jo 160 p uede in vo ca r una p lu ra lida d de h ilos b a sá n d o se en un d e te rm in a d o g rado de p a ra le lis m o /fa c to r de s im u lta n e id a d , a ju s te s de co n fig u ra c ió n b a sa d o s en el c lien te , a ju s te s de co n fig u ra c ió n b a sa d o s en el s e rv id o r y /o re cu rso s in fo rm á tico s d isp o n ib le s de uno o m ás s is te m a s in fo rm á tico s . A con tin u a c ió n , uno o m ás h ilos de tra b a jo 170 a s ig n a d o s p ue de n tra n s m it ir en flu jo la ca rga útil d esde la fu e n te de d a to s h asta el d e s tin o o b je tivo . La tra n s m is ió n en flu jo p ue de in c lu ir f i ltra r y /o tra n s fo rm a r los d a tos a m e d id a q ue se tra n s fie re n d e sd e la fu e n te de d a to s h asta el d e s tin o o b je tivo . Los h ilo s de tra b a jo 170 a s ig n a d o s p u e d e n lle v a r a ca b o e ste tra b a jo b a sá n d o se en m e ta d a to s de p lan de e je cu c ió n a lm a ce n a d o s en el ca tá lo g o de m e ta d a to s 110 que se g e n e ra n d in á m ica m e n te o b te n ie n d o cód igo e je cu ta b le en tie m p o de e je cuc ión .
En un e je m p lo , ca d a uno de e n tre una p lu ra lida d de h ilos de tra b a jo 170 in vo ca d o s p o r un p ro ce so de tra b a jo 160 p ara lle va r a cabo una tra n s m is ió n de d a to s en flu jo p ara le la lee el ca tá lo g o de m e ta d a to s 110 para a cc e d e r a c ó d ig o de filtra d o y /o tra n s fo rm a c ió n g e n e ra d o so b re la m a rch a en t ie m p o de e je cu c ió n a p a rtir de m e ta d a to s de p lan de e je cuc ión a lm a ce n a d o s en el ca tá log o de m e ta d a to s 110. El cód igo de filtrado y /o tra n s fo rm a c ió n se g enera b a sá n d o se en un p lan de e je cu c ió n c re a d o p o r el g e s to r de ca rg a s de tra b a jo 150 (p o r e je m p lo , a p a rtir de un m a pe o de da tos c re ad o p or el usuario , un flu jo de tra ba jo , e tcé te ra ). En un e je m p lo , cada h ilo de tra b a jo 170 e n sa m b la su p rop ia ve rs ió n (co p ia de tra b a jo o in s ta n c ia c ió n ) de una se c u e n c ia de c o m p o n e n te s o p e ra tiv o s que usa para lle va r a cabo d ive rsa s o p e ra c io n e s sob re los da tos (p o r e je m p lo , filtrad o , a g re g ac ión , tra n s fo rm a c ió n , d e p u ra c ió n e tcé te ra ) a m e d id a q ue los d a tos e stán s ien do tra n s m itid o s en flu jo .
En un e je m p lo , se g e n e ra una se cu e n c ia de co m p o n e n te s o p e ra tivo s en tie m p o de e je cuc ión . P o r e je m p lo , un hilo de tra b a jo 170 p uede e n s a m b la r un co n ju n to de c o m p o n e n te s o p e ra tivo s en una ca d e n a d o n d e la sa lid a e s tá n d a r de un c o m p o n e n te se co n v ie rte en la e n tra d a e s tá n d a r de l s ig u ie n te c o m p o n e n te de la se cu e n c ia . De e ste m odo, cada h ilo p uede p ro ce sa r da tos en p ara le lo com o parte de una a rq u ite c tu ra de ca n a liza c ió n (pipeline) (p o r e jem p lo , cu a n d o un p rim e r fra g m e n to de d a to s se ha tra s la d a d o d e sd e una p rim e ra o p e ra c ió n com o sa lid a e s tá n d a r hasta una s e g u n d a o p e ra c ió n e n sa m b la d a co m o e n tra d a estándar, se p ro ce sa s im u ltá n e a m e n te un se g u n d o fra g m e n to de da tos u sa nd o la p rim e ra o pe ra c ió n m ie n tra s se lleva a cabo la se g u n d a o pe ra c ió n sob re el p rim e r fra g m e n to de datos, y a s í su ce s iva m e n te ). P ueden u sa rse m ú ltip les ca p a s de p a ra le lism o para lo g ra r un a u m e n to su s ta n c ia l del re n d im ie n to , p o r e je m p lo , cu a n d o cad a h ilo de tra b a jo 170 p ro ce sa su p rop io c o n ju n to de se g m e n to s de d a to s de o rigen se g m e n ta d o s en p a rtic io n e s q ue se p ro ce sa n ta m b ié n en p a ra le lo con o tro s s e g m e n to s de d a tos de o rigen s e g m e n ta d o s en p a rtic io n e s a lo la rgo de una ca n a liza c ió n de c o m p o n e n te s o p e ra tivo s co n e c ta d o s en cadena .
En una fo rm a de re a liza c ió n , los h ilos de tra b a jo 170 e sc rib en p e rió d ica m e n te su p ro g re so en el ca tá lo g o de m e ta d a to s 110. Un p roce so de tra b a jo 160 que ha a s ig n a d o los h ilos de tra b a jo 170 ta m b ié n p uede s o n d e a r p e rió d ica m e n te el ca tá lo g o de m e ta d a to s 110 para c o m p ro b a r el e s ta d o de los h ilos de tra b a jo 170. El p roce so de tra b a jo 160 ta m b ié n p uede a n a liza r m e ta d a to s para d e te rm in a r si cada uno de sus h ilos de tra b a jo 170 ha co m p le ta d o su parte re sp e c tiva de la tra n s m is ió n de d a to s en flu jo de m a n e ra sa tis fa c to ria . En ca so a firm a tivo , el p roce so de tra b a jo 160 cam b ia el e s ta do de la ta re a co m p le ta en el ca tá log o de m e ta d a to s 110 de “ a c tiva ” a “ f in a l” . P o r o tro lado, y en fu n c ió n de la s itu a c ió n , el h ilo de tra b a jo p u e d e a c tu a liz a r el e s ta d o a “ fa llid o ” si c u a lq u ie ra de los h ilos de tra b a jo 170 a so c ia d o s no se co m p le ta se sa tis fa c to ria m e n te .
En un e je m p lo , el p ro ce so de tra b a jo 160 p ue de d e te n e r ta re a s de la rga e je cu c ió n o b ien a u to m á tica m e n te o b ien b a sá n d o se en una so lic itud de u su a rio y p uede a c tu a liz a r el e s ta d o de la ta re a a “a b o rta d a ” o “c a n c e la d a ” . El p roce so de tra b a jo 160 ta m b ié n p uede a c tu a liza r el e s ta do a “v a c ía ” cua nd o no se p roducen da tos d esde la fuente , p o r e je m p lo , p o rq u e no e x is ten d a tos en la fu e n te o p o rq u e no se p ro d u je ro n d a tos re su lta n te s cu a n d o se a p licó un filtro .
En una fo rm a de re a liza c ió n , se co m p rim e n da tos de o rigen en un s is te m a de o rigen para re d u c ir el ta m a ñ o de d a tos a tra n s fe r ir a tra vé s de una red, p o r e je m p lo , cu a n d o se tra n s m ite n en flu jo d ire c ta m e n te d a to s de o rigen al s e rv id o r de d e s tin o sin n in g u n a m a n ip u la c ió n . A co n tin u a c ió n , se p ue de n d e s c o m p rim ir los d a to s en el d e s tin o de fo rm a co rre sp o n d ie n te , si e llo fue se n ecesa rio . En o tro e je m p lo , se d esco m p rim e n en la fu e n te da tos c o m p rim id o s en la fue n te cu a n d o el g e s to r de ca rga s de tra b a jo 150 d e te rm in a q ue d ebe p ro d u c irse un filtrad o y /o cu a lq u ie r tipo de tra n s fo rm a c ió n a n te s de q ue los d a to s lleguen al d e s tin o ob je tivo .
El m o to r de g e n e ra c ió n de ó rd e n e s 180 g e n e ra fu n c io n e s que se m a te ria liza n en tie m p o de e je cu c ió n sob re la base de m e ta da tos . Las fu n c io n e s c re a d a s p o r el m o to r de g e n e ra c ió n de ó rd e n e s 180 son e n sa m b la d a s y e je cu ta d a s p o r cad a hilo de tra b a jo 170, p e rm itie n d o a s í que cada h ilo fu n c io n e e fica zm e n te com o un m o to r de tra n s fo rm a c ió n c o m p a rtim e n ta d o con a cce so a una b ib lio te ca de su p rop io co n ju n to de fu n c io n e s lige ra s para re n d im ie n to o p tim izad o .
En una fo rm a de re a liza c ió n , el m o to r de g en e rac ión de ó rd e n e s 180 lee el ca tá lo g o de m e ta d a to s 110 para d e te rm in a r fu n c io n e s a g e n e ra r para h ilos de tra b a jo 170 que se han invo ca d o o se invo ca rá n con el fin de lle va r a cabo un p lan de e je cu c ió n g e n e ra d o p o r el g e s to r de ca rga s de tra b a jo 150. En un e je m p lo , el g e s to r de ca rga s de tra b a jo 150 p ue de d e te rm in a r q ue se lleve a cab o un co n ju n to de o p e ra c io n e s sob re un con ju n to de d a to s q ue se va n a tra n s m it ir en flu jo d e sd e una fu e n te de d a to s h asta un d e s tin o o b je tivo . Las o p e ra c io n e s se p ue de n defin ir, p o r e je m p lo , com o parte de un m a pe o de datos , o de m a n e ra a d ic io n a l a e ste ú ltim o , e n tre uno o m ás ca m p o s de una u b icac ión de a lm a ce n a m ie n to de da tos de una fue n te de d a tos y uno o m ás cam p os de una u b icac ión de a lm a c e n a m ie n to de d a to s de un d e s tin o o b je tivo . El g e s to r de ca rg a s de tra b a jo 150 p u e d e p ro d u c ir un p lan de e je cu c ió n para lle va r a ca b o la tra n s m is ió n en flu jo , c o m p re n d ie n d o el p lan de e je cu c ió n un co n ju n to de fu n c io n e s (p o r e je m p lo , tra n s fo rm a c ió n , filtrad o , p e rso n a liza c ió n , e tc é te ra ) a e je c u ta r en se cu e n c ia p o r cad a uno de uno o m ás h ilos de tra b a jo 170.
En un e je m p lo , un p lan de e je cu c ió n g e n e ra d o p o r el g e s to r de ca rg a s de tra b a jo 150 se p ue de re p re s e n ta r com o un co n ju n to de p a rá m e tro s de co n fig u ra c ió n o en un fo rm a to X M L q ue p uede s e r p ro ce sa d o y e je cu ta d o p o r una o m ás v e rs io n e s d ife re n te s de un m o to r del s is te m a de tra n sm is ió n de da tos en flu jo 108. P o r e je m p lo , el s is te m a de tra n sm is ió n de d a tos en flu jo 108 p uede generar, e je cu ta r y /o p o n e r en fu n c io n a m ie n to in s tru cc io n e s u ó rd e n e s del p lan de e je cu c ió n que se re p re se n ta n com o un con ju n to de p a rá m e tro s p e rso n a liza d o s o en un fo rm a to X M L p e rso n a liza d o .
La fig u ra 2 es un d ia g ra m a de flu jo que ilus tra una tra n s m is ió n de d a tos en flu jo de a lto re n d im ie n to , según una fo rm a de re a liza c ió n . El m é to d o 200 p uede s e r lleva do a cab o p o r un m ó du lo lóg ico de p ro ce sa d o q ue puede c o m p re n d e r hardware (c ircu ite ría , m ó du lo lóg ico ded ica do , m ó du lo lóg ico p ro g ra m a b le , m ic ro có d ig o , e tcé te ra ), software (ta l com o in s tru cc io n e s e je cu ta d a s en un s is te m a de o rd e n a d o r de p ro p ó s ito g en era l, una m á qu ina d e d ica d a o un d isp o s itivo de p roce sa d o ), m ic ro p ro g ra m a s o una co m b in a c ió n de los m ism os. En un e je m p lo , el m é to d o 200 se lleva a cab o u sa n d o el s is te m a de tra n s m is ió n de d a tos en flu jo 108 de la fig u ra 1.
En la e ta pa 210, se re c ibe un m a peo de d a to s q ue d e sc rib e una a so c ia c ión e n tre una fu e n te de d a tos y un d estino ob je tivo . En una fo rm a de rea lizac ión , uno o m ás e le m e n to s de d a tos de una u b icac ión de a lm a ce n a m ie n to de una p rim e ra fu e n te de d a tos se a so c ia n o v in cu la n a uno o m ás e le m e n to s de d a tos de una u b ica c ió n de a lm a ce n a m ie n to de un d e s tin o o b je tivo (p o r e je m p lo , e le m e n to s de a rch ivo s de datos , ca m p o s de b ases de datos, d a tos X M L, ca m p o s de da tos en fo rm a to s de d a to s p e rso n a liza d o s , e tcé te ra ). En g en era l, se p uede re c ib ir c u a lq u ie r m a p e o de d a to s q ue d e sc rib a una a so c ia c ió n o re la c ió n e n tre d o s o m ás e le m e n to s de d a tos , cam p os , c o n te n e d o re s , a rch ivo s u o tra s e s tru c tu ra s de datos.
En un e je m p lo , se p u e d e n m a p e a r d ire c ta m e n te d a to s de u na fu e n te de d a to s a un d e s tin o o b je tivo . Ta m b ié n se p ueden d e fin ir tra n s fo rm a c io n e s de d a tos para m o d ific a r da tos de una fu e n te de d a tos a m e d id a que se están tra n s m itie n d o en flu jo d a tos a un d e s tin o o b je tivo . P o r e je m p lo , se p ue de n d e fin ir una o m á s tra n s fo rm a c io n e s de d a tos com o parte de un m a peo de datos. Las tra n s fo rm a c io n e s de d a tos se pueden c o n fig u ra r para m o d ifica r da tos de origen, p o r e jem p lo , co m b in a n d o una p lu ra lidad de ca m p o s de d a tos de o rigen en un cam p o de d es tino ob je tivo , d iv id ie n d o ca m p o s de datos de o rige n en m ú ltip le s ca m p o s de d e s tin o o b je tivo , filtra n d o d a tos de o rigen , d e p u ra n d o d a tos de o rigen , e tcé te ra . D ich o m a pe o y tra n s fo rm a c io n e s se p ueden p ro p o rc io n a r en un flu jo de tra b a jo de fin id o p o r el usuario , co n fig u ra d o para tra n s fo rm a r d a tos de una fu e n te de d a tos cu a n d o se tra n sm ite n en flu jo los d a tos a un d e s tin o ob je tivo .
En la e ta pa 220, se g en e ra un p lan de e je cuc ión de tra n s fe re n c ia de da tos a p a rtir de l m a pe o de d a tos para tra n s fe r ir los d a tos d esde la fu e n te de da tos hasta el d e s tin o o b je tivo . En una fo rm a de re a liza c ió n , el m o to r de flu jo de tra b a jo 150 a na liza un m a peo de d a tos q ue d e sc rib e una a so c ia c ión entre una fue n te de d a tos y un destino de a lm a c e n a m ie n to o b je tivo . El m a pe o de d a to s p ue de in c lu ir tra n s fo rm a c io n e s de d a tos y o tra s o p e ra c io n e s que se d eb en re a liza r cu a n d o se tra n sm ite n d a tos en flu jo d esde la fu e n te de d a tos h asta el d e s tin o ob je tivo .
En una fo rm a de rea lización , el m o to r de flu jos de tra b a jo 150 g enera y a lm acen a un plan de e jecuc ión para m apeos y tra n s fo rm a c io n e s de d a tos en fo rm a de m e ta da tos en el ca tá logo de m e ta da tos 110. En un e jem p lo , los m e ta da tos de l p lan de e je cu c ió n g e n e ra d o s p o r el m o to r de flu jo s de tra b a jo 150 se p ueden p roce sa r, in te rp re ta r y /o e je cu ta r p o r m e d io de una o m á s v e rs io n e s d ife re n te s de l s is te m a de tra n s m is ió n de d a to s en flu jo 108. Los m e ta d a to s ta m b ié n se pueden u sa r para g e n e ra r un cód igo e je cu ta b le , q ue p uede se r e je cu ta d o p o r cu a lq u ie r p roce so (p o r e je m p lo , h ilos de tra b a jo 170).
En la e ta p a 230 , se tra n s fie re n d a to s d e sd e la fu e n te de d a to s h asta el d e s tin o o b je tivo u sa nd o el p lan g e n e ra d o de e je cuc ión de tra n s fe re n c ia de datos. En una fo rm a de re a liza c ió n , el s is te m a de tra n sm is ió n de d a tos en flu jo 108 usa un p lan de e je cuc ión de tra n s fe re n c ia de d a tos a lm a ce n a d o en el ca tá log o de m e ta d a to s 110 para g e n e ra r có d ig o e je cu ta b le en tie m p o de e je cuc ión . A con tin u a c ió n , el s is te m a de tra n sm is ió n de d a tos en flu jo puede e je c u ta r el cód igo e je cu ta b le g en e rad o a p a rtir de los m e ta d a to s del p lan de e je cu c ió n de tra n s fe re n c ia de d a tos u sa nd o h ilos de tra b a jo 170. D e e ste m odo, los h ilos de tra b a jo 170 p ueden e je cu ta r el cód igo g en e rad o en tie m p o de e je cu c ió n para tra n s m it ir en flu jo d a tos d esde una fu e n te de d a tos h as ta un d e s tin o ob je tivo .
La fig u ra 3 es un d ia g ram a de flu jo que ilustra o tros a sp ec tos de la tra nsm is ión de d a tos en flu jo de a lto re nd im ie n to , seg ún una fo rm a de re a liza c ió n . El m é to d o 300 p uede s e r lleva do a cabo p o r un m ó du lo lóg ico de p ro ce sa d o que p ue de c o m p re n d e r hardware (c ircu ite ría , m ó d u lo lóg ico d ed ica do , m ó du lo lóg ico p ro g ra m a b le , m ic ro có d ig o , e tcé te ra ), software (ta l com o in s tru cc io n e s e je cu ta d a s en un s is te m a de o rd e n a d o r de p rop ó s ito g en era l, una m á q u in a d e d ica d a o un d isp o s itivo de p roce sa d o ), m ic ro p ro g ra m a s o una co m b in a c ió n de los m ism os . En un e je m p lo , el m é to do 300 se lleva a cab o u sa n d o el s is te m a de tra n s m is ió n de d a tos en flu jo 108 de la fig u ra 1.
En la e ta pa 310, se re c ibe in fo rm a c ió n sob re una p rim e ra fu e n te de datos . En la e ta pa 320, se rec ibe in fo rm a c ió n sob re un d es tino ob je tivo . En una fo rm a de rea lizac ión , un u suario re g is tra una fue n te de da tos en un c lien te 101A, 101B, u sando una in te rfaz g rá fica de u suario (G U I) com o parte de un p roce so de registro . El s is te m a de tra nsm is ión de d a tos en flu jo 108 p ue de d e s c u b rir re g is tra r a u to m á tica m e n te ta m b ié n una o m ás fu e n te s de datos.
C om o parte de un p roce so de d e scu b rim ie n to o reg is tro , se p uede a s im ila r o a d q u irir in fo rm a c ión so b re una fue n te de datos . P o r e je m p lo , la in fo rm a c ió n de la fu e n te de d a to s p ue de in c lu ir uno o m á s de re cu rso s in fo rm á tico s fijos o d isp on ib le s de un s is te m a de o rd e n a d o r q ue a lo ja la fue n te de datos, in fo rm a c ión sob re el tip o de fue n te de datos (p o r e je m p lo , b ase de da tos re lac io na l, base de d a tos en m e m oria , base de da tos re la c io n a l de ob je to s , s is te m a de a rch ivo s , a p a ra to , e tcé te ra ), in fo rm a c ió n de p ro ve e d o re s , in fo rm a c ió n de la ve rs ió n , a ju s te s de co n fig u ra c ió n de l s is te m a de o rd e n a d o r y /o de la fu e n te de datos , d is p o n ib ilid a d de l s is te m a de o rd e n a d o r y /o c a ra c te rís tic a s o c o m p a tib ilid a d de la fu e n te de datos , e tcé te ra .
En un e je m p lo , u na p rim e ra fu e n te de d a to s p ue de in c lu ir uno o m á s de fu e n te s /o b je tiv o s de d a tos 102 A -102 C , y una se g u n d a fu e n te de d a tos p uede inc lu ir uno o m ás de los re cu rso s /o b je tivo s 104 A -104 C (o v ice ve rsa ). A d e m á s, la in fo rm a c ión re c ib id a , re cog ida , d e scu b ie rta o a dq u irid a sob re una p rim e ra fu e n te de da tos y /o una se g u n d a fu e n te de d a tos se p u e d e a lm a c e n a r en fo rm a de m e ta d a to s en el c a tá lo g o de m e ta d a to s 110 p a ra una p o s te rio r re fe re n c ia p o r parte del s is te m a de tra n s m is ió n de d a tos en flu jo 108.
En la e ta pa 330, se rec ibe un m a pe o de da tos que a so c ia una u b icac ión de a lm a ce n a m ie n to de d a tos de la p rim era fu e n te de d a to s a una u b ica c ió n de a lm a c e n a m ie n to de d a to s de l d e s tin o o b je tivo . En un e je m p lo , los e le m e n to s de d a tos id e n tif ica d o s de una p rim e ra fu e n te de d a tos se a so c ia n o v in cu la n con e le m e n to s de d a tos id e n tifica d o s q ue e x is ten en una se g u n d a fu e n te /d e s tin o o b je tivo de da tos (p o r e je m p lo , ca m p o s de una base de da tos). En gen e ra l, se p uede re c ib ir un m apeo, a so c ia c ió n o re lac ió n e n tre dos e le m e n to s de a lm a ce n a m ie n to de datos, ca m p o s , c o n te n e d o re s , a rch ivos , e tcé te ra , cu a le sq u ie ra .
En un e jem p lo , un u su a rio p ue de d e s ig n a r un m a pe o e n tre una fu e n te de d a tos y un d e s tin o o b je tivo com o un flu jo de tra b a jo q ue tra n s fo rm a d a tos de un fo rm a to de l s is te m a de o rigen en una fo rm a que es co m p a tib le con un s is te m a de d e s tin o o b je tivo (p o r e je m p lo , usa nd o un d is e ñ a d o r de flu jo s de tra b a jo ). De este m odo, un m a peo p ue de c o m p re n d e r o p e ra c io n e s que se usan para m o d ifica r da tos que se van a tra n s fe r ir o co p ia r d esde un s is tem a de o rige n al s is te m a de d e s tin o o b je tivo (p o r e je m p lo , com o p arte de una ta re a de tra n s m is ió n de d a tos en flu jo ).
En o tra fo rm a de re a liza c ió n , se p ueden m a p e a r d a tos de o rigen b a sá n d o se en un p a trón de tec tad o . P o r e jem p lo , si un a d m in is tra d o r o p re p ro ce so no ha c re ad o un m a pe o de m e ta da tos , d icho m a peo se p uede g e n e ra r en tie m p o real. El m a pe o de d a to s en tie m p o real se p uede b a sa r en una o m ás á rea s te m á tica s (p o r e jem p lo , tra n sa cc io n e s ) q ue se ide n tifiq ue n com o parte de una so lic itud . Las á re a s te m á tica s se p ueden u sa r para b u sca r en m e ta d a to s d in á m ica m e n te en tie m p o real, p o r e je m p lo , u sando d a tos de o rigen id e n tifica d o s com o co in c id e n te s con una o m ás á rea s te m á tica s pa rticu la re s .
En un e je m p lo , un p roce so de tra b a jo 160 p uede e je c u ta r una b ú sq u e d a p or p a tro ne s b asad a en un á rea te m á tica y lle v a r a ca b o una in sp e cc ió n sob re d a to s a so c ia d o s a un á re a te m á tica p a rtic u la r para d e te rm in a r cu á n to s h ilos de tra b a jo 170 in vo ca rá para p ro c e sa r los d a to s id e n tif ica d o s d in á m ica m e n te . P o r e je m p lo , un p ro ce so de tra b a jo 160 p uede te n e r co n o c im ie n to de que los da tos de tra n sa cc io n e s para cada uno de una p lu ra lida d de ins tru m e n tos fin a n c ie ro s e stán a lm a ce n a d o s en un a rch ivo re sp e c tivo co rre sp o n d ie n te a cada uno de los in s tru m e n to s . El p ro ce so de tra b a jo 160 p uede d e s c u b rir y /o se le p ue de o rd e n a r que p roce se un co n ju n to to ta l o p arc ia l de los d a tos de tra n sa cc io n e s . En un e je m p lo , el p ro ce so de tra b a jo 160 a s ig n a un h ilo de tra b a jo 170 para tra n s m it ir en flu jo cada re sp e c tivo a rch ivo d ife re n te q ue se le ha o rd e n a d o procesar.
En la e ta pa 340, se rec ibe una so lic itud para tra n s fe r ir d a tos d esde la p rim e ra fu e n te de da tos hasta el d es tino o b je tivo b a sá n d o s e en el m a pe o . En una fo rm a de re a liza c ió n , se re c ib e una s o lic itu d p ara m o ve r d a tos e n tre un s is te m a de o rigen y un s is te m a ob je tivo . P o r e jem p lo , la so lic itud para tra n s m itir en flu jo , cargar, e x tra e r y /o d u p lica r d a to s e n tre uno o m á s s is te m a s de o rd e n a d o r se p ue de re c ib ir en una so lic itu d . P o r e je m p lo , el in te rm e d ia rio de so lic itu d e s /re sp u e s ta s 130 p ue de re c ib ir una so lic itu d para m o ve r d a to s e n tre d os ce n tro s de d a to s d ife re n te s . En un e je m p lo , una so lic itu d p uede id e n tif ic a r re cu rso s de d a tos lóg icos y /o fís ic o s que se tra n s m itirá n en flu jo (p o r e je m p lo , tra n s fe r irá n , cop ia rán , e tcé te ra ) de una fu e n te de d a tos a un d e s tin o ob je tivo .
En una fo rm a de re a liza c ió n , el in te rm e d ia rio de so lic itu d e s /re sp u e s ta s 130 a na liza una so lic itud e n tra n te para d e te rm in a r in fo rm a c ión sob re la so lic itud . P o r e je m p lo , el in te rm e d ia rio de so lic itu d e s /re sp u e s ta s 130 p uede d e te rm in a r el tip o de so lic itud q ue se rec ibe de m a n e ra que p uede lla m a r a una u tilidad , c o m p o n e n te o se rv ic io de p ro ce sa d o co rre sp o n d ie n te adecuado . En un e jem p lo , el in te rm e d ia rio de so lic itu d e s /re sp u e s ta s 130 puede invo ca r una u tilidad de tra n sm is ió n en flu jo que va lid a y a u te n tica la so lic itud . P o r e je m p lo , la u tilidad de tra n s m is ió n en flu jo p ue de a u te n tica r a un u suario p a rtic u la r q ue in ic ia la so lic itu d y c o n firm a r q ue la so lic itu d es vá lid a .
En un e je m p lo , una so lic itud de tra n s m is ió n en flu jo rem ite a un m a peo p re d e fin id o e n tre dos m e d io s de a lm a ce n a m ie n to de datos . U na u tilidad de tra n sm is ió n en flu jo lleva a cabo una b úsqu ed a en el ca tá lo g o de m e ta d a to s 110 para d e te rm in a r si d ich o m a pe o ex is te . En ca so a firm a tivo , la u tilid ad de tra n sm is ió n en flu jo usa el ca tá lo g o de m e ta d a to s 110 para v a lid a r a d ic io n a lm e n te la so lic itud . P o r e je m p lo , una u tilid ad de tra n s m is ió n en flu jo p ue de v a lid a r una d im e n s io n a lid a d en el t ie m p o de un con jun to de d a tos so lic itad o a n tes de in te n ta r re a lm en te tra n s m it ir en flu jo el co n ju n to de datos.
En u na fo rm a de re a liza c ió n , u na ve z q u e se ha a u te n tica d o una s o lic itu d de u su a rio y se ha v a lid a d o un m a pe o de d a to s c o n s id e ra n d o los d a to s s o lic ita d o s , la so lic itu d se s itú a en co la de e sp e ra p ara su p ro c e sa r y su e s ta d o se a c tu a liza a “ p e n d ie n te ” . En un e je m p lo , se g en e ra un id e n tif ic a d o r e xc lu s iv o ru n_ id p ara una s o lic itu d que ha s ido p re se n ta d a para p roce sa rse . P o r e je m p lo , un p ro ce so de m e ta se rv ic io 140 p ue de g e n e ra r un id e n tif ica d o r e xc lus ivo de 24 d íg itos para la so lic itu d . A co n tinu ac ión , el p roce so de m e ta se rv ic io 140 p uede in tro d u c ir la so lic itud en el ca tá lo g o de m e ta d a to s 110 para p e rm itir el se g u im ie n to de la so lic itud y sus d a tos a so c ia d o s d u ra n te to d o el c ic lo de v id a de la so lic itud .
U na ve z que se ha e n v ia d o una so lic itud para un p roce sa d o en el ca tá lo g o de m e ta d a to s 110, p ro ce so s de m e ta se rv ic io 140 p ueden re g is tra r en el ca tá lo g o de m e ta d a to s 110 in fo rm a c ió n a so c ia d a a la so lic itud . P o r e je m p lo , en ca tá lo g o de m e ta d a to s 110 se p ueden a lm a ce n a r una ID de usuario , una cue n ta de usuario , una ID de a p licac ión , una d ire cc ió n IP en la que se o rig in ó la so lic itud , un tip o de so lic itud , in fo rm a c ión de v in cu la c ió n (re la c ió n /m a p e o de fu e n te -a -o b je tiv o ) y o tra in fo rm a c ió n y d e ta lle s sob re la so lic itud . A d e m á s , el e s ta d o de la so lic itu d se puede a c tu a liz a r a un e s ta d o “ p e n d ie n te ” , que id e n tifica rá la so lic itud com o d isp o n ib le para su p ro ce sa d o en una lis ta de so lic itu d e s s itu a d a s en co la de e sp e ra que son a n a liza d a s p o r el g e s to r de ca rga s de tra b a jo 150.
En un e jem p lo , el g e s to r de ca rga s de tra b a jo 150 busca so lic itud es en un e s tado “ p en d ie n te ” q ue estén p repa radas para el p roce sa d o . A d e m á s, cu a n d o el g e s to r de ca rga s de tra b a jo 150 tie n e d isp o n ib le s p ro ce so s de tra b a jo 160, p ue de a s ig n a r un p ro ce so de tra b a jo 160 para c o m p le ta r una so lic itud “ p e n d ie n te ” .
En la e ta pa 350, se g e n e ra un p lan de e je cu c ió n de tra n s fe re n c ia de d a to s b a sá n d o se en un m a p e o de datos . En un e jem p lo , el m o to r de flu jo s de tra b a jo 150 a na liza in fo rm a c ión de m a pe o que d e sc rib e una a so c ia c ió n e n tre una fu e n te de da tos y un d es tino de a lm a ce n a m ie n to o b je tivo . El m a p e o p uede inclu ir, se puede b a sa r o p uede usa r para g e n e ra r un flu jo de tra b a jo o se cu e n c ia de p asos in te rco n e c ta d o s que se p ue de n u tiliza r para p ro c e sa r da tos de o rigen de m a nera que sean com p a tib les y enca jen den tro del p a ra d ig m a del d es tino de a lm a ce n a m ie n to ob je tivo ( ló g ica y /o fís ica m e n te ). P o r e je m p lo , com o parte de l p roce so de tra n s m is ió n en flu jo p uede que sea n ecesa rio filtra r, a n a liza r s in tá c tica m e n te , tra ns fo rm ar, con vertir, e tcé te ra , los d a tos de origen.
En un e je m p lo , el g e s to r de ca rga s de tra b a jo 150 g en e ra y a lm a ce n a un p lan de e je cu c ió n que p e rm ite q ue uno o m ás h ilos de tra b a jo 170 co n s tru ya n o e nsam b len una serie de ó rd e n e s usa da s para e je c u ta r el p roce so (m a p e o /flu jo de tra b a jo ) en tie m p o de e je cuc ión . En un e jem p lo , el g e s to r de ca rga s de tra b a jo 150 g e n e ra un p lan de e je cu c ió n en fo rm a de un co n ju n to de d a tos con fo rm a to X M L, q ue se a lm a ce n a n en el ca tá lo g o de m e ta d a to s 110.
En la e ta pa 360, los da tos se tra n s fie re n d esde la p rim e ra fu e n te de d a tos hasta el d e s tin o o b je tivo en p ara le lo so b re la base de l p lan de e je cuc ión de tra n s fe re n c ia de datos . En una fo rm a de re a liza c ió n , en el ca tá lo g o de m e ta d a to s 110 se a lm a ce n a un p lan de e je cu c ió n de tra n s fe re n c ia de d a to s g e n e ra d o p o r el g e s to r de ca rg a s de tra b a jo . El p lan de e je cu c ió n de tra n s fe re n c ia de d a tos p ue de in c lu ir in fo rm a c ió n q ue p e rm ite q ue h ilos de tra b a jo 170 lleven a cabo o p e ra c io n e s de flu jo de tra b a jo /m a p e o de da tos a m e d ida que se tra n sm ite n d a tos en flu jo d esde una fu e n te h asta un d e s tin o ob je tivo .
P o r e je m p lo , co m o parte de un p ro ce so de tra n s m is ió n en flu jo p ue de q ue sea n e ce sa rio filtra r d a tos re cu p e ra d o s de una fue n te de d a tos con pe tic ión previa . A d ic io n a lm e n te , p uede q ue sea n ecesa rio tra n s fo rm a r los d a tos de una o m á s m a n e ra s para p e rm itir q ue los m ism o s sean c o m p a tib le s en cu a n to a fo rm a (p o r e je m p lo , fís ica m e n te ) o en cu a n to a su s ta n c ia (p o r e je m p lo , ló g ica m e n te ) sob re la base de una c o n fig u ra c ió n de d e s tin o o b je tivo . De este m odo, p uede q ue sea n ecesa rio m o d ific a r los da tos de d ive rsa s m a ne ra s , q ue p ueden inclu ir, a u n q u e sin c a rá c te r lim ita tivo , co n ca te n a c ió n , tru n ca m ie n to , sus titu c ión , a c tu a liza c io n e s , fu n c io n e s p e rso n a liza d a s , e tcé te ra .
D e p e n d ie n d o de cóm o se d ise ñe un m a pe o o flu jo de tra b a jo particu la r, puede que sea n ece sa rio lle va r a cabo e s ta s o p e ra c io n e s en una se cu e n c ia particu la r. A d e m á s, se p ueden u tiliza r o p e ra c io n e s c o n ve n c io n a le s o p e rso n a liza d a s (p o r e je m p lo , fu n c io n e s , p ro ce d im ie n to s , e tcé te ra , d e fin id o s p or el usuario ). En una fo rm a de re a liza c ió n , un u suario p ue de c re a r fu n c io n e s y p ro ce d im ie n to s p e rso n a liza d o s y los m ism o s se p ueden in te g ra r en el flu jo de tra b a jo /m a p e o de d a tos en fo rm a de uno o m ás p asos o rd e n a d o s . En un e je m p lo , un u su a rio p uede d e fin ir fu n c io n e s /p ro c e d im ie n to s p e rso n a liza d o s en un len g u a je de se cu e n c ia de in s tru cc io n e s (scripting) p riva tivo (p o r e je m p lo , se cu e n c ia de in s tru cc io n e s de tra n s m is ió n de d a tos en flu jo bajo d em a nd a). En o tro e je m p lo , un u su a rio ta m b ié n p uede d e fin ir fu n c io n e s /p ro c e d im ie n to s p e rso n a liza d o s usa nd o el len g ua je de con su lta e s tru c tu ra d o (S Q L ) u o tro le n g u a je de o rdenador.
En una fo rm a de re a liza c ió n , d e sp u é s de q u e el g e s to r de ca rga s de tra b a jo 150 g e n e re un p lan de e je cu c ió n y e n cu e n tre un p roce so de tra b a jo 160 d isp o n ib le para tra ta r una so lic itu d e n tra n te , el g e s to r de ca rga s de tra b a jo 150 a s ig n a la so lic itud al p ro ce so de tra b a jo 160 d isp on ib le .
En un e je m p lo , un p ro ce so de tra b a jo 160 d e te rm in a có m o p ro ce sa rá tra b a jo a so c ia d o a la so lic itud . P o r e je m p lo , el p roce so de tra b a jo 160 p uede a n a liza r la ca rga útil de los da tos de o rigen que es n ecesa rio procesar. El p roce so de tra b a jo 160 p uede a n a liza r da tos de o rigen para d e te rm in a r cóm o los da tos se p ueden s e g m e n ta r en p artic ion es o p o d a r de m a n e ra fís ica , lóg ica , h o rizo n ta l, ve rtica l, e tcé te ra . El p ro ce so de tra b a jo 160 p ue de a n a liz a r d a tos de o rige n b a sá n d o se en in fo rm a c ión del ca tá lo g o de m e ta d a to s 110, o a cce d ie n d o a los d a tos d ire c ta m e n te (p o r e je m p lo , p o r m u es tre o , e xa m in a n d o có m o están a lm a ce n a d o s los da tos , e tcé te ra ). El p ro ce so de tra b a jo 160 ta m b ié n p ue de a n a liza r la u tilizac ión y la cap ac id ad de la m á q u in a de origen, a sí com o la u tilizac ión y la cap ac id ad de la m á q u in a o b je tivo . El p roce so de tra b a jo 160 puede u sa r esta in fo rm a c ión para d e te rm in a r un g rad o de p a ra le lism o q ue se p uede u sa r para p ro c e sa r d a to s de o rigen en para le lo .
En una fo rm a de re a liza c ió n , el p ro ce so de tra b a jo 160 invo ca uno o m ás h ilos de tra b a jo 170 a s ín c ro n o s , con los cu a le s no e s tá en co m u n ica c ió n d ire c ta m e n te . En un e je m p lo , el p ro ce so de tra b a jo 160 p ue de in te ra cc io n a r con h ilos a so c ia d o s in d ire c ta m e n te leye nd o y /o e sc rib ie n d o m e ta d a to s a lm a ce n a d o s en el ca tá lo g o de m e ta d a to s 110. Los h ilos de tra b a jo 170, p o r e je m p lo , se p ueden e je cu ta r en el m ism o nodo o pueden e s ta r d ise m in a d o s e n tre d ife re n te s n o d o s de tra b a jo a so c ia d o s a uno o m ás s is te m a s de tra n s m is ió n de d a to s en flu jo 108 en un e n to rn o fed e ra d o . Los h ilos de tra b a jo 170 p ueden lle va r a cabo las o p e ra c io n e s q ue es n e ce sa rio re a liz a r p a ra co m p le ta r una so lic itud a s ig n a d a p o r el g e s to r de ca rg a s de tra b a jo 150. En un e je m p lo , los h ilos de tra b a jo 170 e je cu ta n o p e ra c io n e s d e fin id a s en un p lan de e je cu c ió n c re a d o p o r el g e s to r de ca rg a s de tra b a jo 150.
En una fo rm a de re a liza c ió n , el ca tá lo g o de m e ta d a to s 110 a lm a ce n a un lis ta do de cad a p ro ce d im ie n to /fu n c ió n (in c lu id a se cu e n c ia de p ro ce sa d o ) a so c ia d o a un p lan de e je cu c ió n para una ta re a q ue ha s ido g e n e ra d a p o r el g e s to r de ca rg a s de tra b a jo 150. En un e je m p lo , el m o to r de g e n e ra c ió n de ó rd e n e s 180 g e n e ra fu n c io n e s q ue se m a te ria liza n en tie m p o de e je cu c ió n b a sá n d o se en m e ta d a to s a lm a ce n a d o s en el ca tá lo g o de m e ta d a to s p or el g e s to r de ca rg a s de tra b a jo . Las fu n c io n e s c re a d a s p o r el m o to r de g e n e ra c ió n de ó rd e n e s 180 son e n sa m b la d a s y e je cu ta d a s p o r h ilos de tra b a jo 170, con lo cua l se p e rm ite q ue cad a h ilo fu n c io n e e fe c tiva m e n te com o un m o to r de tra n s fo rm a c ió n a u tó n o m o con a cce so a una b ib lio te ca de su p rop io co n ju n to re sp e c tivo de fu n c io n e s ligeras.
En una fo rm a de rea lizac ión , el m o to r de g e n e ra c ió n de ó rd e n e s 180 a na liza un p lan de e je cuc ión de tra n s fe re n c ia de d a tos g e n e ra d o p o r el g e s to r de ca rga s de tra b a jo 150 a lm a ce n a d o en el ca tá lo g o de m e ta d a to s 110. A co n tin u a c ió n , el m o to r de g e n e ra c ió n de ó rde n es 180 g en e ra fra g m e n to s de cód igo (fu n c io n e s /p ro c e d im ie n to s ) q ue son e je cu ta b le s p o r h ilos de tra b a jo 170.
En una fo rm a de re a liza c ió n , el m o to r de g e n e ra c ió n de ó rd e n e s 180 puede g e n e ra r cód igo e je cu ta b le para fu n c io n e s /p ro c e d im ie n to s co n v e n c io n a le s p ro p o rc io n a d o s p o r el s is te m a. El m o to r de g e n e ra c ió n de ó rd e n e s 180 ta m b ié n p u e d e g e n e ra r c ó d ig o e je cu ta b le p ara fu n c io n e s y p ro c e d im ie n to s d e fin id o s p o r el u su a rio e sc rito s en el le n g u a je de o rd e n a d o r ta l com o un len g ua je de s e cu e n c ia s de in s tru cc io n e s p riva tivo o el le n g u a je de con su lta e s tru c tu ra d a (S Q L). En un e je m p lo , el m o to r de g e n e ra c ió n de ó rd e n e s 180 g e n e ra cód igo en tie m p o de e je cuc ión y al m ism o le pueden lla m a r p ro ce so s de tra b a jo 160. En un e je m p lo , el m o to r de g e n e ra c ió n de ó rde n es 180 p ue de g e n e ra r cód igo en cu a lq u ie r m o m en to .
En una fo rm a de re a liza c ió n , cad a h ilo de tra b a jo 170 a s ig n a d o a una ta re a usa c ó d ig o g e n e ra d o p o r el m o to r de g e n e ra c ió n de ó rde n es 180 para c o n fig u ra r una ins ta n c ia au tón om a, re spe ctiva , de un m o to r de m a p e o /tra n s fo rm a c ió n /flu jo de tra b a jo con el fin de p ro c e sa r y tra n s m it ir en flu jo d a tos de o rigen a un d estino o b je tivo . En un e je m p lo , los h ilo s de tra b a jo 170 e n sa m b la n los fra g m e n to s e je cu ta b le s de c ó d ig o g e n e ra d o s p o r el m o to r de g e n e ra c ió n de ó rd e n e s 180 de a cu e rd o con un p lan de e je cu c ió n c re a d o p re v ia m e n te p o r el g e s to r de ca rg a s de tra b a jo 150.
En una fo rm a de re a liza c ió n , los h ilos de tra b a jo 170 e n sa m b la n fra g m e n to s e je cu ta b le s de cód igo en una se cu e n c ia y de una m a ne ra d e fin id a s p o r un p lan de e je cuc ión . C ad a h ilo de tra b a jo p uede e n s a m b la r fra g m e n to s de cód igo e je cu ta b le s d ife re n te s e n ca d e n a n d o e n tre s í los d ife re n te s fra g m e n to s de cód igo . P o r e je m p lo , el p rim e r fra g m e n to de cód igo (co m p o n e n te ) e je cu ta b le p uede re c ib ir la un idad de d a tos com o e n tra da co n ve n c io n a l. A co n tin u a c ió n , los h ilos de tra b a jo 170 p ueden e n c a d e n a r el p rim e r co m p o n e n te con un se g u n d o c o m p o n e n te de m a n e ra que la sa lid a co n ve n c io n a l de l p rim e r co m p o n e n te a lim e n ta la e n tra d a c o n ve n c io n a l de l se g u n d o co m p o n e n te . C o n tin u a n d o con e ste e je m p lo no lim ita tivo , a co n tin u a c ió n , la sa lid a co n ve n c io n a l de l se g u n d o c o m p o n e n te puede a lim e n ta r la e n tra d a co n ve n c io n a l de l te rc e r co m p o n e n te , y a s í su ce s iva m e n te . De esta m anera , la e n tra d a de c u a lq u ie r fu n c ió n es la sa lid a de la fu n c ió n p rev ia d u ra n te to d a una se cu e n c ia com p le ta .
En el e je m p lo prev io , cad a h ilo de tra b a jo se co n v ie rte e fe c tiva m e n te en un m o to r de tra n s fo rm a c ió n con a cce so a una b ib lio te ca de fu n c io n e s q ue se m a te ria liza n en tie m p o de e je cuc ión . De e ste m odo, los d a to s de o rige n se p ueden p ro ce sa r sin fisu ra s a m e d id a q ue son tra n s m itid o s en flu jo en un e n to rno sin e s ta do y sin n ingún b loqueo.
En la e ta pa 370, se p ro p o rc io n a un m a n ifies to q ue co m p re n d e in fo rm a c ión q ue d e sc rib e la tra n s fe re n c ia de datos. En una fo rm a de re a liza c ió n , al co m p le ta rse s a tis fa c to ria m e n te una ta re a de tra n s m is ió n de d a to s en flu jo se e sc rib e un m a n ifie s to de e n tre ga . En un e je m p lo , se e sc rib e n m a n ifie s to s de e n tre g a id é n tico s o d ife re n te s en un s is te m a de o rigen y en un s is te m a de d es tino o b je tivo cu a n d o la ta re a de tra n sm is ió n de d a tos en flu jo ha fin a liza d o sa tis fa c to ria m e n te . El m a n ifie s to de e n tre g a p ue de in c lu ir uno o m ás de e n tre una d e sc rip c ió n de los da tos que se e n tre g a ro n , un tie m p o de inicio, un tie m p o fina l, a rch ivo s que se e n tre ga ro n , un ta m a ñ o de cad a a rch ivo e n tre ga do , c a ra c te rís tica s de cad a a rch ivo e n tre ga do , e tcé te ra .
En un e je m p lo , un m a n ifie s to de e n tre g a in c lu ye ta m b ié n un e s ta d o e in fo rm a c ió n so b re el fo rm a te o de los d a tos q ue se e n tre ga ro n . P o r e je m p lo , d icha in fo rm a c ión p uede in c lu ir un de lim itador, m e n sa je s de error, fo rm a te o de d a tos (p o r e je m p lo , t ip o s de cam po, fo rm a to s de tie m p o , fo rm a to s de datos , fo rm a to s n um é ricos , va lo re s N ULL, uso de c a ra c te re s e sp e c ia le s ), e tcé te ra .
En un e je m p lo , un p la n ific a d o r de ta re a s en un d e s tin o o b je tivo b u sca rá un a rch ivo de m a n ifies to de e n tre g a a n tes de c o m e n z a r a p ro c e sa r cu a le sq u ie ra d a tos e n tra n te s . En a lg u n a s fo rm a s de re a liza c ió n , e sto g a ra n tiza q ue el p la n ifica d o r de ta re a s no dé in ic io a un p roce sa d o sub s ig u ie n te de fo rm a p rem a tu ra p o rque el m a n ifies to de entrega p ue de s e r el ú ltim o fra g m e n to de in fo rm a c ió n q ue se e sc rib e cu a n d o se ha c o m p le ta d o una ta re a de tra n s m is ió n en flu jo .
En una fo rm a de re a liza c ió n , en el m a n ifie s to de e n tre g a se d e sc rib e n da tos q ue se han e n tre g a d o al d es tino ob je tivo , lo cua l p e rm ite tra n s fe r ir los da tos a una o rg a n iza c ió n de a gu as a ba jo sin re q u e rir n ingún ca m b io sob re el s is te m a de tra n s m is ió n de d a tos en flu jo 108. En un e je m p lo , se d esc ribe n d a tos que han s id o e n tre g a d o s y los m ism os p ueden se r p ro ce sa d o s p o r una o rg a n iza c ió n re cep to ra b a sá n d o se en la d e sc rip c ió n p ro p o rc io n a d a p o r el m a n ifie s to . D e e s te m odo, los c a m b io s de a gu as a rrib a so b re d a tos de o rigen p o r parte de u na o rg a n iza c ió n no d eb e ría n te n e r im p ac to a lg u n o sob re las o p e ra c io n e s en el s is te m a de tra n s m is ió n de d a tos en flu jo 108 ya q ue la o rg a n iza c ió n q ue re c ibe los d a tos en el d e s tin o o b je tivo p ue de fia rse de l m a n ifie s to de d e s tin o g e n e ra d o para una ta re a de tra n s m is ió n de d a tos en flu jo .
La fig u ra 4 ilus tra un d ia g ra m a de una m á q u in a en la fo rm a e je m p lifica tiva de un s is te m a de o rd e n a d o r 400 d en tro del cua l se p uede e je cu ta r un con ju n to de ins tru cc io ne s , para p ro vo ca r que la m á qu ina lleve a cabo una cua lqu ie ra o m ás de las m e to d o lo g ía s d e sc rita s en la p resen te . En fo rm a s de re a liza c ió n a lte rn a tivas , la m á qu ina se puede c o n e c ta r (p o r e je m p lo , en re d ) a o tra s m á q u in a s en una LAN , una in trane t, una e xtra ne t, o In te rnet. La m á q u in a p uede fu n c io n a r en ca lid ad de s e rv id o r o m á q u in a de c lien te en un e n to rn o de red c lien te -se rv id o r, o com o una m á q u in a p a r en un e n to rno de red e n tre e n tid a d e s pares (o d is trib u id o ). La m á q u in a puede s e r un o rd e n a d o r p e rso n a l (P C ), un PC de tip o ta b le ta , una ca ja de a d a p ta c ió n del te le v is o r (S T B ), un A s is te n te P e rson a l D ig ita l (P D A ), un te lé fo n o ce lu lar, un a p a ra to web, un se rv ido r, un rú te r de red, un c o n m u ta d o r o puen te , o cu a lq u ie r m á q u in a cap az de e je c u ta r un c o n ju n to de in s tru cc io n e s (se cu e n c ia l o de o tro tip o ) que e sp e c ifiq u e n a cc io n e s a re a liz a r p o r e sa m á q u in a . A d e m á s , a u n q u e se ilus tra so la m e n te una ú n ica m á q u in a , se c o n s id e ra rá ta m b ié n que el té rm in o “ m á q u in a ” inc lu ye cu a lq u ie r con ju n to de m á q u in a s que, de m a ne ra ind iv idu a l o con jun ta , e je cu te n un c o n ju n to (o m ú ltip le s c o n ju n to s ) de in s tru c c io n e s p ara lle v a r a ca b o una o m ás c u a le s q u ie ra de las m e to d o lo g ía s d e sc rita s en la p re se n te m em oria .
El s is te m a de o rd e n a d o r 400 e je jm p lfica itvo inc lu ye un d isp o s itivo de p roce sa d o (p ro ce sa d o r) 402, una m e m o ria p rinc ip a l 404 (p o r e je m p lo , m e m o ria de so lo lec tu ra (R O M ), m e m o ria flash, m e m o ria d in á m ica de a cce so a le a to rio (D R A M ) ta l com o una D R A M s ín c ro n a (S D R A M ), una S D R A M de d ob le v e lo c id a d de d a tos (D D R ) o una D R A M (R D R A M ), e tcé te ra ), una m e m o ria e s tá tica 406 (p o r e je m p lo , m e m o ria flash, m e m o ria e s tá tica de a cce so a le a to rio (S R A M ), e tcé te ra ), y un d isp o s itivo de a lm a c e n a m ie n to de d a to s 418, q ue se co m u n ica n e n tre s í p o r m e d io de un bus 430.
El p ro c e sa d o r 402 re p re se n ta uno o m ás d isp o s itivo s de p ro ce sa d o de p ro p ó s ito g e n e ra l ta le s com o un m ic ro p ro ce sa d o r, una u n idad de p ro ce sa d o cen tra l o s im ila res . M ás p a rticu la rm e n te , el p ro c e sa d o r 402 p ue de se r un m ic ro p ro c e s a d o r de co m p u ta c ió n con co n ju n to com p le jo de in s tru cc io n e s (C IS C ), un m ic ro p ro c e s a d o r de co m p u ta c ió n con co n ju n to re du c ido de ins tru cc io n e s (R IS C ), un m ic ro p ro c e s a d o r de p a la b ra s de ins tru cc io n e s m uy la rga s (V L IW ), o un p ro c e sa d o r q ue im p le m e n te o tros con ju n to s de ins tru cc io n e s o p ro ce sa d o re s que im p lem e n te n una c o m b in a c ió n de c o n ju n to s de in s tru cc io n e s . El p ro c e sa d o r 402 ta m b ié n p ue de s e r uno o m á s d is p o s itivo s de p ro ce sa d o de p ro p ó s ito e sp e c ia l, ta le s co m o un c ircu ito in te g ra d o de a p lica c ió n e sp e c ífica (A S IC ), una m a triz de p u e rtas p ro g ra m a b le in s itu (F P G A ), un p ro c e sa d o r de señ a l d ig ita l (D S P ), un p ro c e sa d o r de red, o s im ila re s . El p ro c e sa d o r 402 e stá c o n fig u ra d o para e je c u ta r in s tru cc io n e s 422 con el fin de lle va r a cabo las o p e ra c io n e s y p asos d e sc rito s en la p resen te .
El s is te m a de o rd e n a d o r 400 p uede inclu ir, a de m ás, un d isp o s itivo de in te rfaz de red 408. El s is te m a de o rd e n a d o r 400 ta m b ié n p uede in c lu ir una u n id ad de v isu a liza c ió n de v íd e o 410 (p o r e je m p lo , una p an ta lla de c ris ta l líqu ido (L C D ) o un tu b o de ra yos ca tó d ico s (C R T )), un d isp o s itivo de e n tra d a a lfa n u m é ric a 412 (p o r e je m p lo , un te c la d o ), un d isp o s itivo de con tro l p o r cu rso r 414 (p o r e je m p lo , un ra tón ) y un d isp o s itivo de g e n e ra c ió n de se ñ a le s 416 (p o r e je m p lo , un a ltavoz).
El d isp o s itivo de a lm a ce n a m ie n to de d a tos 418 p ue de in c lu ir un so p o rte de a lm a ce n a m ie n to leg ib le p o r o rd e n a d o r 428 en el cua l se a lm a ce n a n uno o m á s c o n ju n to s de in s tru c c io n e s 422 (p o r e je m p lo , software) q ue m a te ria liza n una o m ás cu a le s q u ie ra de las m e to d o lo g ía s o fu n c io n e s d e sc rita s en la p rese n te . Las in s tru cc io n e s 422 ta m b ié n p u e d e n resid ir, de m a n e ra co m p le ta o al m e no s p a rc ia lm e n te , d en tro de la m e m o ria p rinc ip a l 404 y /o d en tro del p ro ce sa d o r 402 d u ra n te la e je cu c ió n de las m ism as p or p arte del s is te m a de o rd e n a d o r 400 , co n s titu ye n d o tam b ién la m e m o ria p rin c ip a l 404 y el p ro c e sa d o r 402 so p o rte s de a lm a ce n a m ie n to leg ib le s p o r o rdenador. Las in s tru cc io n e s 422 a d e m á s se p ueden tra n s m it ir o re c ib ir a tra vé s de una red 420 p o r m e d io de l d isp o s itivo de in te rfa z de red 408.
En una fo rm a de re a liza c ió n , las in s tru cc io n e s 422 inc luyen in s tru cc io n e s para una a rq u ite c tu ra de s is te m a de tra n sm is ió n de d a tos en flu jo de a lto re n d im ie n to 100 (p o r e jem p lo , el s is te m a de tra n sm is ió n de da tos en flu jo 108 de la fig u ra 1) y /o una b ib lio te ca de software que co n tie n e m é to d o s que llam an a un s is te m a de tra n s m is ió n de d a tos en flu jo 108. A u n q u e , en una fo rm a de re a liza c ió n e je m p lifica tiva , el so p o rte de a lm a c e n a m ie n to leg ib le por o rd e n a d o r 428 (so p o rte de a lm a c e n a m ie n to leg ib le p o r m á q u in a ) se m u e s tra de m a ne ra q ue es un ú n ico sop orte , d ebe co n s id e ra rse que el té rm in o “so p o rte de a lm a ce n a m ie n to leg ib le p o r o rd e n a d o r” inc lu ye un ún ico so p o rte o m ú ltip le s so p o rte s (p o r e je m p lo , una base de d a tos ce n tra liza d a o d is trib u id a , y /o m e m o ria s ca ch é y se rv id o re s a so c ia d o s ) que a lm a ce n a n el con ju n to o co n ju n to s de in s tru cc io n e s . Tam bién d ebe co n s id e ra rse que el té rm in o “so p o rte de a lm a ce n a m ie n to leg ib le p o r o rd e n a d o r” inc lu ye cu a lq u ie r so p o rte que sea cap az de a lm acenar, c o d ific a r o lle va r un co n ju n to de in s tru cc io n e s para su e je cu c ió n p o r parte de la m á q u in a y q u e p ro vo ca n q ue la m á q u in a lleve a cab o una o m á s c u a le sq u ie ra de las m e to d o lo g ía s de la p re se n te inve nc ión . P o r co n s ig u ie n te , se co n s id e ra rá que el té rm in o “so p o rte de a lm a ce n a m ie n to leg ib le p o r o rd e n a d o r” inc luye , a un qu e sin c a rá c te r lim ita tivo , m e m o ria s de e s ta d o só lido , s o p o rte s ó p tico s y so p o rte s m a gn é ticos .
En la d e sc rip c ió n anterio r, se e xp on en n u m e ro so s de ta lles . No o bs tan te , se p ondrá de m a n ifies to para a lg u ien con co n o c im ie n to s en la m a te ria que p ueda sa c a r p ro ve ch o de esta e xp os ic ión , que la p rese n te inve nc ión puede p o n e rse en p rác tica sin e s to s d e ta lle s e sp e c ífico s . En a lg u n o s casos, e s tru c tu ra s y d isp o s itivo s a m p lia m e n te co n o c id o s se m u es tra n en fo rm a de d ia g ra m a de b lo q ue s, m ás que de m a ne ra de ta lla da , con el fin de e v ita r e n to rp e c e r la p re se n te inve nc ión .
A lg u n a s partes de la d e sc rip c ió n d e ta lla d a se han p re se n ta d o en té rm in o s de a lg o ritm o s y re p re se n ta c io n e s s im b ó lica s de o p e ra c io n e s sob re b its de d a tos d en tro de una m e m o ria de o rdenador. En la p re se n te m e m oria , y de m a n e ra g en era l, se co n c ib e un a lg o ritm o de m a n e ra q ue es una se cu e n c ia a u tó n o m a de p asos q ue con d u ce n a un re su lta d o d esea do . Los p asos son a q u e llo s que re q u ie re n m a n ip u la c io n e s fís ica s de m a g n itu d e s fís icas . H a b itu a lm e n te , a un qu e no de fo rm a n ecesa ria , e stas m a g n itu d e s a do p tan la fo rm a de señ a le s e lé c trica s o m a g n é tica s con ca p a c id a d de s e r a lm a ce n a d a s , tra n s fe r id a s , co m b in a d a s , co m p a ra d a s y m a n ip u la d a s de o tro m odo . En o ca s io n e s se ha d e m o s tra d o q ue es co n ve n ie n te , p o r m o tivo s de uso com ú n , re fe rirse a e s ta s se ñ a le s com o bits, va lo re s , e le m e n to s , s ím bo los , ca rac te res , té rm in o s , n ú m e ro s o s im ila res .
No o bs ta n te , d ebe te n e rse en cue n ta q ue la to ta lid a d de e stos té rm in o s y o tros s im ila re s d eben a so c ia rse a las m a g n itu d e s fís ica s a d e cu a d a s y son m e ra m e n te e tiq u e ta s c o n ve n ie n te s a p lica d a s a e stas m a gn itu d es . A no s e r q ue se e s ta b le zc a e sp e c íf ica m e n te lo co n tra r io seg ún se m a n ifie s te a p a rtir de la s ig u ie n te a rg u m e n ta c ió n , d ebe a p re c ia rse que en la to ta lid a d de la d e sc rip c ió n , las a rg u m e n ta c io n e s que u tilizan té rm in o s ta le s com o “c o m p u ta c ió n ” , “c o m p a ra c ió n ” , “a p lic a c ió n ” , “ c re a c ió n ” , “o rd e n a c ió n ” , “ c la s if ica c ió n ” o s im ila res , se re fie ren a las a cc io n e s y p roce so s de un s is te m a de o rdenador, o d isp o s itivo in fo rm á tico e le c tró n ico s im ilar, que m a n ip u la y tra n s fo rm a d a tos re p re se n ta d o s en fo rm a de m a g n itu d e s fís ica s (p o r e je m p lo , e le c tró n ica s ) d en tro de los re g is tro s y m e m orias de l s is te m a de o rd e n a d o r para o b te n e r o tros d a tos re p re se n ta d o s de m a ne ra s im ila r co m o m a gn itu d es fís ica s d en tro de las m e m o ria s o re g is tro s de l s is te m a de o rd e n a d o r u o tros d isp o s itivo s de e ste tip o de a lm a ce n a m ie n to , tra n s m is ió n o v isu a liz a c ió n de in fo rm a c ión .
C ie rta s fo rm a s de re a liza c ió n de la p rese n te inve nc ión se re fie ren ta m b ié n a un a p a ra to para lle va r a cab o las o p e ra c io n e s de la p rese n te m e m oria . E ste a p a ra to se puede c o n s tru ir con los fin e s p re te nd ido s , o p uede c o m p re n d e r un o rd e n a d o r de p ro p ó s ito g e n e ra l a c tiva d o o re co n fig u ra d o de m a n e ra se le c tiva p o r un p ro g ra m a de o rd e n a d o r a lm a ce n a d o en el o rdenador. D icho p ro g ra m a de o rd e n a d o r se p uede a lm a c e n a r en un so p o rte de a lm a c e n a m ie n to leg ib le p o r o rdenador, ta l com o , a u n q u e sin c a rá c te r lim ita tivo , c u a lq u ie r tip o de d isco inc lu ido s d iscos flex ib le s , d iscos óp ticos , C D -R O M y d iscos m a gn e to óp tico s , m e m o ria s de so lo lec tu ra (R O M ), m e m o ria s de a cce so a le a to rio (R A M ), E P R O M , E E P R O M , ta r je ta s m a g n é tica s u ópticas , o cu a lq u ie r tip o de so p o rte s a d e cu a d o para a lm a c e n a r in s tru cc io n e s e le c trón icas .
D ebe e n te n d e rse que la d e sc rip c ió n a n te r io r e s tá d e s tin a d a a s e r ilus tra tiva , y no lim ita tiva . A los e xp e rto s en la m a te ria les re su lta rán e v id e n te s m u ch as o tras fo rm a s de re a liza c ió n al le e r y e n te n d e r la d e sc rip c ió n anterior. El a lca n ce de la inve n c ió n q u e d a d e fin id o p o r las re iv in d ica c io n e s a d ju n tas .

Claims (11)

REIVINDICACIONES
1. M é to do im p le m e n ta d o p o r o rdenador, q ue com p re nd e :
recib ir, p o r parte de un p ro c e sa d o r (402), un m a peo de d a tos que d e sc rib e una a so c ia c ió n entre uno o m ás cam p os de una ub icac ión de a lm a ce n a m ie n to de datos de una fue n te de datos (102A , 102B, 102C, 104A, 104B, 104C ) y uno o m ás ca m p o s de una u b icac ión de a lm a ce n a m ie n to de d a tos de un d es tino o b je tivo (102A, 102B, 102C , 104A, 104B, 104C);
a n a liza r p o r lo m e no s uno de los d a tos de la fuen te de datos (102A , 102B, 102C, 104A, 104B, 104C), m e ta da tos q ue d esc rib e n los d a tos de la fu e n te de datos, y c a ra c te rís tica s de a lm a ce n a m ie n to lóg icas y fís ica s a so c ia d a s a los da tos de la fuen te de datos, para d e te c ta r d in á m ica m e n te p artic ion es a so c ia d as a d ich os datos, de m anera q ue d ich a s p a rtic io n e s co m p re n d e n p a rtic io n e s fís ica s y /o lóg icas;
d e te rm in a r un g rado de p a ra le lism o que se va a u tiliz a r cu a n d o se tra n s fie re n los d a tos e n tre la fu e n te de datos (102A , 102B, 102C, 104A, 104B, 104C ) y el d es tino o b je tivo (102A , 102B, 102C, 104A, 104B, 104C ) basán do se en las p a rtic io n e s d e te c ta d a s d in á m ica m e n te ,
g en era r, p o r parte de l p ro c e sa d o r (402 ), un p lan de e je cu c ió n de tra n s fe re n c ia de d a to s a p a rtir de l m a pe o de d a tos para tra n s fe r ir da tos d esde la fu e n te de d a to s (102A , 102B , 102C, 104A, 104B, 104 C ) hasta el d es tino o b je tivo (102A , 102B, 102C, 104A, 104B, 104C), co m p re n d ie n d o el p lan de e je cuc ión de tra n s fe re n c ia de datos el g rad o d e te rm in a d o de p a ra le lism o q ue se va a u tiliz a r cu a n d o se tra n s fie re n los da tos d e sd e la u b icac ión de a lm a c e n a m ie n to de d a to s de la fu e n te de d a to s (102 A , 102B , 102C , 104A , 104B, 104 C ) h as ta la u b ica c ió n de a lm a c e n a m ie n to de d a tos de l d e s tin o o b je tivo (102A , 102B, 102C, 104A, 104B, 104C); y
tra ns fe rir, p o r parte del p ro ce sa d o r (402), los d a tos d esde la ub icac ión de a lm a ce n a m ie n to de da tos de la fu e n te de d a to s (102 A , 102B , 102C , 104A, 104B, 104 C ) h as ta la u b ica c ió n de a lm a c e n a m ie n to de d a to s de l d e s tin o o b je tivo (102 A , 102B, 102C , 104A, 104B, 104 C ) u sa nd o el p lan de e je cu c ió n de tra n s fe re n c ia de datos gen e rad o .
2. M é to do seg ún la re iv in d ica c ió n 1, q ue co m p re n d e a s im ism o :
re c ib ir in fo rm a c ió n q ue d e sc rib e la fu e n te de d a tos (102A , 102B, 102C , 104A, 104B, 104C ), c o m p re n d ie n d o la fu e n te de da tos (102A , 102B, 102C , 104A, 104B, 104C ) los d a tos que se van a tra n s fe r ir al d es tino o b je tivo (102A , 102B, 102C , 104A, 104B, 104C); y
re c ib ir in fo rm a c ión que d e sc rib e el d es tino o b je tivo (102A , 102B, 102C, 104A, 104B, 104C), d es tino o b je tivo (102 A , 102B, 102C , 104A, 104B, 104 C ) que va a re c ib ir los d a to s de la fu e n te de d a to s (102A , 102B , 102C, 104A, 104B, 104C).
3. M é to do seg ún la re iv in d ica c ió n 1, q ue co m p re n d e a s im ism o :
re c ib ir una so lic itud para tra n s fe r ir los d a tos d esde la u b icac ión de a lm a ce n a m ie n to de d a tos de la fu e n te de datos (102A , 102B, 102C, 104A, 104B, 104C ) h as ta la u b icac ión de a lm a ce n a m ie n to de da tos de l d es tino o b je tivo (102A , 102B, 102C , 104A, 104B, 104C).
4. M é to do según la re iv in d ica c ió n 1, q ue co m p re n d e a s im ism o :
p ro p o rc io n a r un m a n ifies to que co m p re n d e in fo rm a c ión q ue d e sc rib e un re su ltad o p rod u c id o cua nd o se tra n s fie re n los d a tos d e sd e la fu e n te de d a to s (102 A , 102B , 102C , 104A, 104B, 104 C ) h as ta el d e s tin o o b je tivo (102A , 102B, 102C , 104A, 104B, 104C).
5. M é to d o según la re iv in d ica c ió n 1, en el que los d a tos se tra n s fie re n d esde la fu e n te de d a tos (102A , 102B, 102C, 104A, 104B, 104 C ) hasta el d es tino o b je tivo (102A , 102B, 102C, 104A, 104B, 104C ) en p a ra le lo de a cu e rdo con el g ra d o de p a ra le lism o d e te rm in a d o .
6. S is te m a (400), q ue com p re nd e :
una m e m o ria (404); y
un p ro c e sa d o r (402 ) a co p la d o a la m e m o ria (404 ) para:
re c ib ir un m a pe o de d a tos que d e sc rib e una a so c ia c ió n e n tre uno o m ás ca m p o s de una u b ica c ió n de a lm a ce n a m ie n to de d a tos de una fue n te de d a tos (102A , 102B, 102C, 104A, 104B, 104C ) y uno o m ás cam p os de una u b ica c ió n de a lm a c e n a m ie n to de d a tos de un d e s tin o o b je tivo (102A , 102B, 102C , 104A, 104B, 104C); a n a liza r p o r lo m enos uno de e n tre los d a tos de la fu e n te de d a tos (102A , 102B, 102C, 104A, 104B, 104C), los m e ta d a to s que d esc ribe n los da tos de la fu e n te de datos, y las ca ra c te rís tica s de a lm a ce n a m ie n to lóg icas y fís ica s a so c ia d a s a los da tos de la fue n te de datos, para d e te c ta r d in á m ica m e n te p a rtic ion es a so c ia d a s a d ichos datos , de m a n e ra q ue d ich a s p a rtic io n e s co m p re n d e n p a rtic io n e s fís ica s y /o lóg icas;
d e te rm in a r un g rad o de p a ra le lism o que se va a u tiliza r cu a n d o se tra n s fie re n los d a tos e n tre la fue n te de datos (102A , 102B, 102C, 104A, 104B, 104C ) y el d es tino o b je tivo (102A , 102B, 102C, 104A, 104B, 104C ) basán do se en las p a rtic io n e s d e te c ta d a s d in á m ica m e n te ;
g e n e ra r un p lan de e je cuc ión de tra n s fe re n c ia de d a tos a p a rtir de l m a pe o de d a tos para tra n s fe r ir da tos d esde la fu e n te de d a to s (102A , 102B, 102C , 104A, 104B, 104 C ) h asta el d e s tin o o b je tivo (102A , 102B, 102C , 104A, 104B, 104C), c o m p re n d ie n d o el p lan de e je cuc ión de tra n s fe re n c ia de d a tos el g rad o d e te rm in a d o de p a ra le lism o q ue se va a u tiliza r cu a n d o se tra n s fie re n los d a to s d esde la u b icac ión de a lm a ce n a m ie n to de datos de la fu e n te de d a tos (102 A , 102B, 102C , 104A, 104B, 104 C ) h as ta la u b icac ión de a lm a c e n a m ie n to de d a tos de l d e s tin o o b je tivo (102A , 102B, 102C , 104A, 104B, 104C); y
tra n s fe r ir los d a to s d e sd e la u b ica c ió n de a lm a c e n a m ie n to de d a tos de la fu e n te de d a to s (102A , 102B, 102C , 104A, 104B, 104C ) h asta la u b icac ión de a lm a ce n a m ie n to de da tos del d es tino o b je tivo (102A , 102B, 102C , 104A, 104B, 104 C ) u sa n d o el p lan de e je cu c ió n de tra n s fe re n c ia de d a tos g en e rad o .
7. S is te m a seg ún la re iv in d ica c ió n 6 , en el q ue el p ro c e sa d o r (402 ) es a s im ism o para:
re c ib ir in fo rm a c ió n q ue d e sc rib e la fu e n te de d a tos (102A , 102B, 102C , 104A, 104B, 104C), c o m p re n d ie n d o la fu e n te de da tos (102A , 102B, 102C , 104A, 104B, 104C ) los d a tos que se van a tra n s fe r ir al d es tino o b je tivo (102A , 102B, 102C , 104A, 104B, 104C); y
re c ib ir in fo rm a c ión que d e sc rib e el d es tino o b je tivo (102A , 102B, 102C, 104A, 104B, 104C), d es tino o b je tivo (102 A , 102B, 102C , 104A, 104B, 104 C ) que va a re c ib ir los d a to s de la fu e n te de d a to s (102A , 102B, 102C , 104A, 104B, 104C).
8. S is te m a seg ún la re iv in d ica c ió n 6 , en el q ue el p ro c e sa d o r (402 ) es a s im ism o para:
re c ib ir una so lic itud para tra n s fe r ir los d a tos d esde la u b icac ión de a lm a ce n a m ie n to de d a tos de la fu e n te de datos (102A , 102B, 102C, 104A, 104B, 104C ) h as ta la u b icac ión de a lm a ce n a m ie n to de da tos de l d es tino o b je tivo (102A , 102B, 102C, 104A, 104B, 104C).
9. S is te m a seg ún la re iv in d ica c ió n 6 , en el q ue el p ro c e sa d o r (402 ) es a s im ism o para:
p ro p o rc io n a r un m a n ifies to que co m p re n d e in fo rm a c ión q ue d e sc rib e un re su ltad o p rod u c id o cua nd o se tra n s fie re n los d a tos d e sd e la fu e n te de d a tos (102 A , 102B, 102C , 104A, 104B, 104 C ) h as ta el d e s tin o o b je tivo (102A , 102B, 102C , 104A, 104B, 104C).
10. S o p o rte leg ib le p o r o rd e n a d o r (428 ) que tie n e in s tru cc io n e s g ra b a d a s en el m ism o que, cu a n d o son e je cu ta da s p o r un p ro c e sa d o r (402 ), p ro vo ca n q ue el p ro c e sa d o r (402 ) lleve a cab o o p e ra c io n e s q ue com p re n d e n :
recib ir, p o r parte del p ro ce sa d o r (402), un m a pe o de da tos que d e sc rib e una a so c ia c ió n entre uno o m ás cam p os de una ub icac ión de a lm a ce n a m ie n to de datos de una fue n te de datos (102A , 102B, 102C, 104A, 104B, 104C ) y uno o m ás ca m p o s de una u b icac ión de a lm a ce n a m ie n to de d a to s de un d es tino o b je tivo (102A, 102B, 102C , 104A, 104B, 104C);
a n a liza r p o r lo m enos uno de e n tre los d a tos de la fu e n te de d a tos (102A , 102B, 102C , 104A, 104B, 104C), los m e ta d a to s que d esc ribe n los da tos de la fu e n te de datos, y las ca ra c te rís tica s de a lm a ce n a m ie n to lóg icas y fís ica s a so c ia d a s a los d a tos de la fue n te de datos, para d e te c ta r d in á m ica m e n te p a rtic ion es a so c ia d a s a d ichos datos , de m a ne ra que d ich as p a rtic io n e s co m p re n d e n p a rtic io n e s fís ica s y /o lóg icas;
d e te rm in a r un g rad o de p a ra le lism o que se va a u tiliza r cu a n d o se tra n s fie re n los d a tos e n tre la fu e n te de datos (102A , 102B, 102C, 104A, 104B, 104C ) y el d es tino o b je tivo (102A , 102B, 102C, 104A, 104B, 104C ) basán do se en las p a rtic io n e s d e te c ta d a s d in á m ica m e n te ;
g en e ra r, p o r p a rte de l p ro c e sa d o r (402 ), un p lan de e je cu c ió n de tra n s fe re n c ia de d a to s a p a rtir de l m a p e o de d a tos p ara tra n s fe r ir da tos d esde la fu e n te de d a to s (102A , 102B , 102C, 104A, 104B, 104 C ) hasta el d es tino o b je tivo (102A , 102B, 102C, 104A, 104B, 104C), co m p re n d ie n d o el p lan de e je cuc ión de tra n s fe re n c ia de datos el g rad o d e te rm in a d o de p a ra le lism o q ue se va a u tiliz a r cu a n d o se tra n s fie re n los da tos d e sd e la u b icac ión de a lm a c e n a m ie n to de d a to s de la fu e n te de d a to s (102 A , 102B , 102C , 104A , 104B, 104 C ) h as ta la u b ica c ió n de a lm a c e n a m ie n to de d a tos de l d e s tin o o b je tivo (102A , 102B, 102C, 104A, 104B, 104C); y
tra ns fe rir, p o r parte del p ro ce sa d o r (402), los d a tos d esde la ub icac ión de a lm a ce n a m ie n to de da tos de la fu e n te de d a to s (102 A , 102B , 102C , 104A, 104B, 104 C ) hasta la u b ica c ió n de a lm a c e n a m ie n to de d a to s de l d e s tin o o b je tivo (102 A , 102B, 102C , 104A, 104B, 104 C ) u sa nd o el p lan de e je cu c ió n de tra n s fe re n c ia de datos gen e rad o .
11. S o p o rte leg ib le p o r o rd e n a d o r de la re iv in d ica c ió n 10, que co m p re n d e a s im ism o p o r lo m e no s uno de entre : re c ib ir in fo rm a c ió n q ue d e sc rib e la fu e n te de d a tos (102A , 102B, 102C , 104A, 104B, 104C), c o m p re n d ie n d o la fu e n te de da tos (102A , 102B, 102C , 104A, 104B, 104C ) los d a tos que se van a tra n s fe r ir al d es tino o b je tivo (102 A , 102B, 102C , 104A, 104B, 104C ), y re c ib ir in fo rm a c ión q ue d e sc rib e el d e s tin o o b je tivo (102A , 102B, 102C , 104A , 104B , 104C ), d e s tin o o b je tivo (102A , 102B , 102C , 104A , 104B , 104 C ) q ue va a re c ib ir los d a tos de la fu e n te de d a tos (102A , 102B, 102C , 104A, 104B, 104C),
re c ib ir una so lic itud p ara tra n s fe r ir los d a tos d esde la u b ica c ió n de a lm a ce n a m ie n to de da tos de la fu e n te de d a tos (102A , 102B, 102C , 104A, 104B, 104C ) h as ta la u b icac ión de a lm a ce n a m ie n to de d a to s del d es tino o b je tivo (102A , 102B, 102C , 104A, 104B, 104C),
p ro p o rc io n a r un m a n ifie s to que co m p re n d e in fo rm a c ió n que d e sc rib e un re su lta d o p rod u c id o cu a n d o se tra n s fie re n los d a tos d esde la fu e n te de d a tos (102A , 102B, 102C , 104A, 104B, 104 C ) h asta el d e s tin o o b je tivo (102A , 102B, 102C , 104A, 104B, 104C ), y
los d a tos son tra n s fe r id o s d esde la fu e n te de d a to s (102 A , 102B , 102C , 104A , 104B, 104 C ) hasta el d es tino o b je tivo (102A , 102B, 102C , 104A, 104B, 104 C ) en p ara le lo de a cu e rd o con el g rad o de p a ra le lism o d e te rm in a d o .
ES13839088T 2012-09-21 2013-09-18 Transmisión de datos en flujo de alto rendimiento Active ES2845299T3 (es)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201261704302P 2012-09-21 2012-09-21
US201361778872P 2013-03-13 2013-03-13
US201361832075P 2013-06-06 2013-06-06
PCT/US2013/060409 WO2014047182A2 (en) 2012-09-21 2013-09-18 High performance data streaming

Publications (1)

Publication Number Publication Date
ES2845299T3 true ES2845299T3 (es) 2021-07-26

Family

ID=50340011

Family Applications (1)

Application Number Title Priority Date Filing Date
ES13839088T Active ES2845299T3 (es) 2012-09-21 2013-09-18 Transmisión de datos en flujo de alto rendimiento

Country Status (6)

Country Link
US (3) US9450999B2 (es)
EP (2) EP3737047A1 (es)
CA (1) CA2883159C (es)
ES (1) ES2845299T3 (es)
SG (1) SG11201501405XA (es)
WO (1) WO2014047182A2 (es)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2271984A4 (en) 2008-04-28 2012-01-18 Salesforce Com Inc OBJECT-BASED SYSTEM FOR CREATING AND MANAGING WEB SITES AND THEIR CONTENT
US9223892B2 (en) 2010-09-30 2015-12-29 Salesforce.Com, Inc. Device abstraction for page generation
US8935360B2 (en) 2010-12-03 2015-01-13 Salesforce.Com, Inc. Techniques for metadata-driven dynamic content serving
EP3737047A1 (en) 2012-09-21 2020-11-11 NYSE Group, Inc. High performance data streaming
US9251226B2 (en) * 2013-03-15 2016-02-02 International Business Machines Corporation Data integration using automated data processing based on target metadata
US10635644B2 (en) * 2013-11-11 2020-04-28 Amazon Technologies, Inc. Partition-based data stream processing framework
US10496517B2 (en) * 2014-02-04 2019-12-03 ZeroTurnaround AS System and method for providing runtime diagnostics of executing applications
US20150229701A1 (en) * 2014-02-12 2015-08-13 Bank Of America Corporation Sending files with multiple job sessions
CN107729147B (zh) * 2014-03-06 2021-09-21 华为技术有限公司 流计算系统中的数据处理方法、控制节点及流计算系统
US10061780B2 (en) * 2014-04-28 2018-08-28 Bank Of America Corporation Information management command process device
US9823982B1 (en) * 2015-06-19 2017-11-21 Amazon Technologies, Inc. Archiving and restoration of distributed database log records
US10063651B2 (en) * 2015-06-30 2018-08-28 Spectra Logic, Corp. Parallel streams to maintain a target data transfer rate
US10541930B2 (en) 2015-08-28 2020-01-21 Softnas Operating Inc. Automated data flows using flow-based data processor blocks
US10198298B2 (en) * 2015-09-16 2019-02-05 Salesforce.Com, Inc. Handling multiple task sequences in a stream processing framework
US10146592B2 (en) 2015-09-18 2018-12-04 Salesforce.Com, Inc. Managing resource allocation in a stream processing framework
US9602617B1 (en) 2015-12-16 2017-03-21 International Business Machines Corporation High performance and scalable telematics message dispatching
US10437635B2 (en) 2016-02-10 2019-10-08 Salesforce.Com, Inc. Throttling events in entity lifecycle management
US10601681B2 (en) 2017-03-20 2020-03-24 International Business Machines Corporation Optimizing streaming graph topology based on service level agreement
US10621193B2 (en) 2017-08-16 2020-04-14 International Business Machines Corporation Data migration from a source system to a data schema of a medical study on a target system
US10542086B2 (en) * 2017-10-30 2020-01-21 General Electric Company Dynamic flow control for stream processing
US11360216B2 (en) 2017-11-29 2022-06-14 VoxelMaps Inc. Method and system for positioning of autonomously operating entities
US10791168B1 (en) * 2018-05-21 2020-09-29 Rafay Systems, Inc. Traffic aware network workload management system
US11539788B2 (en) * 2019-05-28 2022-12-27 Hitachi, Ltd. Information processing system and method of controlling information processing system
US11169855B2 (en) * 2019-12-03 2021-11-09 Sap Se Resource allocation using application-generated notifications
US20220075796A1 (en) * 2020-09-10 2022-03-10 Open Text Holdings, Inc. Architecture for data map converters
US11693579B2 (en) * 2021-03-09 2023-07-04 International Business Machines Corporation Value-based replication of streaming data
US20230033609A1 (en) * 2021-07-30 2023-02-02 Rakuten Mobile, Inc. Method of managing at least one network element
US20230237016A1 (en) * 2022-01-21 2023-07-27 Dell Products, L.P. Extending filesystem domains with a domain membership condition
US11936757B1 (en) 2022-04-29 2024-03-19 Rafay Systems, Inc. Pull-based on-demand application deployment to edge node

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6101495A (en) 1994-11-16 2000-08-08 Hitachi, Ltd. Method of executing partition operations in a parallel database system
US7599910B1 (en) 1993-11-16 2009-10-06 Hitachi, Ltd. Method and system of database divisional management for parallel database system
JP3023441B2 (ja) * 1993-11-16 2000-03-21 株式会社日立製作所 データベース分割管理方法および並列データベースシステム
US5574900A (en) 1994-02-25 1996-11-12 International Business Machines Corporation System and method for optimizing parallel processing of database queries
US5680640A (en) * 1995-09-01 1997-10-21 Emc Corporation System for migrating data by selecting a first or second transfer means based on the status of a data element map initialized to a predetermined state
US6208990B1 (en) * 1998-07-15 2001-03-27 Informatica Corporation Method and architecture for automated optimization of ETL throughput in data warehousing applications
US6230313B1 (en) 1998-12-23 2001-05-08 Cray Inc. Parallelism performance analysis based on execution trace information
JP3667585B2 (ja) * 2000-02-23 2005-07-06 エヌイーシーコンピュータテクノ株式会社 分散メモリ型並列計算機及びそのデータ転送終了確認方法
US6904454B2 (en) * 2001-03-21 2005-06-07 Nokia Corporation Method and apparatus for content repository with versioning and data modeling
AUPR645701A0 (en) * 2001-07-18 2001-08-09 Tralee Investments Ltd Database adapter
US8606744B1 (en) * 2001-09-28 2013-12-10 Oracle International Corporation Parallel transfer of data from one or more external sources into a database system
JP4087097B2 (ja) 2001-11-12 2008-05-14 株式会社日立製作所 データベース管理システム情報を考慮したデータ再配置方法およびデータ再配置を行う計算機システム
US20040068575A1 (en) * 2002-10-02 2004-04-08 David Cruise Method and apparatus for achieving a high transfer rate with TCP protocols by using parallel transfers
US7552192B2 (en) * 2002-12-18 2009-06-23 Ronnie Gerome Carmichael Massively parallel computer network-utilizing MPACT and multipoint parallel server (MPAS) technologies
US7010538B1 (en) * 2003-03-15 2006-03-07 Damian Black Method for distributed RDSMS
US8341120B2 (en) 2003-09-05 2012-12-25 Oracle International Corporation Apparatus and methods for transferring database objects into and out of database systems
JP2005149082A (ja) * 2003-11-14 2005-06-09 Hitachi Ltd ストレージ制御装置、及びストレージ制御装置の制御方法
US7447710B2 (en) 2003-12-11 2008-11-04 Sybase, Inc. Database system providing self-tuned parallel database recovery
US7631138B2 (en) 2003-12-30 2009-12-08 Sandisk Corporation Adaptive mode switching of flash memory address mapping based on host usage characteristics
US20060045109A1 (en) * 2004-08-30 2006-03-02 International Business Machines Corporation Early interrupt notification in RDMA and in DMA operations
US7651593B2 (en) * 2005-12-19 2010-01-26 Commvault Systems, Inc. Systems and methods for performing data replication
US7836033B1 (en) 2006-01-24 2010-11-16 Network Appliance, Inc. Method and apparatus for parallel updates to global state in a multi-processor system
US7496717B2 (en) * 2006-09-12 2009-02-24 Inventec Corporation System for sharing storage device among controllers and method thereof
US8688850B2 (en) * 2007-04-10 2014-04-01 International Business Machines Corporation Method for inter-site data stream transfer in cooperative data stream processing
US7885969B2 (en) * 2007-09-17 2011-02-08 International Business Machines Corporation System and method for executing compute-intensive database user-defined programs on an attached high-performance parallel computer
WO2009062029A1 (en) * 2007-11-09 2009-05-14 Carnegie Mellon University Efficient high performance system for writing data from applications to a safe file system
US8275748B2 (en) 2008-09-30 2012-09-25 Emc Corporation Semantic data migration
US20110246763A1 (en) * 2010-04-03 2011-10-06 Jason Wayne Karnes Parallel method, machine, and computer program product for data transmission and reception over a network
US8555265B2 (en) * 2010-05-04 2013-10-08 Google Inc. Parallel processing of data
US9727414B2 (en) 2010-12-01 2017-08-08 Seagate Technology Llc Fractional redundant array of silicon independent elements
CN103415844B (zh) 2011-01-18 2016-04-20 希捷科技有限公司 用于高级冗余信息计算的系统和方法
US20130138615A1 (en) * 2011-11-29 2013-05-30 International Business Machines Corporation Synchronizing updates across cluster filesystems
CN103139265B (zh) * 2011-12-01 2016-06-08 国际商业机器公司 大规模并行计算系统中的网络传输自适应优化方法及系统
AU2013277986B2 (en) * 2012-06-22 2016-12-01 Annai Systems Inc. System and method for secure, high-speed transfer of very large files
EP3737047A1 (en) * 2012-09-21 2020-11-11 NYSE Group, Inc. High performance data streaming
US9106391B2 (en) 2013-05-28 2015-08-11 International Business Machines Corporation Elastic auto-parallelization for stream processing applications based on a measured throughput and congestion
US9251064B2 (en) 2014-01-08 2016-02-02 Netapp, Inc. NVRAM caching and logging in a storage system

Also Published As

Publication number Publication date
WO2014047182A3 (en) 2014-06-05
US9148461B2 (en) 2015-09-29
US20140089459A1 (en) 2014-03-27
US9450999B2 (en) 2016-09-20
CA2883159C (en) 2018-09-04
CA2883159A1 (en) 2014-03-27
EP3737047A1 (en) 2020-11-11
EP2898638A2 (en) 2015-07-29
SG11201501405XA (en) 2015-05-28
EP2898638B1 (en) 2020-10-28
WO2014047182A2 (en) 2014-03-27
US20150074217A1 (en) 2015-03-12
US9407677B2 (en) 2016-08-02
US20150319207A1 (en) 2015-11-05
EP2898638A4 (en) 2015-09-02

Similar Documents

Publication Publication Date Title
ES2845299T3 (es) Transmisión de datos en flujo de alto rendimiento
Zhou et al. Benchmarking microservice systems for software engineering research
Khmelevsky et al. Cloud computing infrastructure prototype for university education and research
CN104067265B (zh) 用于支持在云中的安全应用部署的系统和方法
RU2012116596A (ru) Способ и система (варианты) для обработки запроса
Wu et al. Automatic cloud bursting under fermicloud
US20200142805A1 (en) Testing and reproduction of concurrency issues
US10127081B2 (en) Efficient resource management in a virtualized computing environment
Antypas et al. Enabling discovery data science through cross-facility workflows
Ghanea-Hercock et al. Co-operating mobile agents for distributed parallel processing
US11934884B2 (en) Coordinated application processing
US20100299661A1 (en) Load-Time Code Optimization In a Computing Environment
Pai et al. Australia and New Zealand
CN106104414B (zh) 存储设备以及存储和提供数据的方法
Yildiz et al. Decaf: Decoupled dataflows for in situ workflows
Shanyour et al. Global software development and its impact on software quality
Raut et al. Cloud documentation and centralized compiler for java & php
Brown A vision for the ascr facilities enterprise
US10171378B2 (en) System and method for allocating and reserving supervisors in a real-time distributed processing platform
Krumnikl et al. SciJava interface for parallel execution in the ImageJ ecosystem
Sangamithra et al. Overview of Edge Computing and Its Exploring Characteristics
Ramesh et al. Development of private cloud for educational institution using Aneka grid container
Patel et al. Accelerating R‐based analytics on the cloud
KOCH et al. The Preparedness Of Small And Medium Sized Businesses In The Czech Republic For The Usage Of Cloud Computing
Ahdiati et al. One-gate public service for developing local wisdom-based tourism in banyumas, central java: An alternative solution