CH705069A1 - A method of motion-dependent link in continuous data streams along visual structures. - Google Patents

A method of motion-dependent link in continuous data streams along visual structures. Download PDF

Info

Publication number
CH705069A1
CH705069A1 CH00952/11A CH9522011A CH705069A1 CH 705069 A1 CH705069 A1 CH 705069A1 CH 00952/11 A CH00952/11 A CH 00952/11A CH 9522011 A CH9522011 A CH 9522011A CH 705069 A1 CH705069 A1 CH 705069A1
Authority
CH
Switzerland
Prior art keywords
visual representation
relative
soundtrack
sound
played
Prior art date
Application number
CH00952/11A
Other languages
German (de)
Inventor
Markus Cslovjecsek
Original Assignee
Markus Cslovjecsek Cstool Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Markus Cslovjecsek Cstool Gmbh filed Critical Markus Cslovjecsek Cstool Gmbh
Priority to CH00952/11A priority Critical patent/CH705069A1/en
Priority to PCT/CH2012/000124 priority patent/WO2012167393A1/en
Publication of CH705069A1 publication Critical patent/CH705069A1/en

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/36—Accompaniment arrangements
    • G10H1/40—Rhythm
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0091—Means for obtaining special acoustic effects
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/155—Musical effects
    • G10H2210/195—Modulation effects, i.e. smooth non-discontinuous variations over a time interval, e.g. within a note, melody or musical transition, of any sound parameter, e.g. amplitude, pitch, spectral response or playback speed
    • G10H2210/241—Scratch effects, i.e. emulating playback velocity or pitch manipulation effects normally obtained by a disc-jockey manually rotating a LP record forward and backward
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/375—Tempo or beat alterations; Music timing control
    • G10H2210/385—Speed change, i.e. variations from preestablished tempo, tempo change, e.g. faster or slower, accelerando or ritardando, without change in pitch
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/091—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
    • G10H2220/096—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith using a touch screen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Die Erfindung betrifft ein Verfahren auf einem berührungsempfindlichen Bildschirm zur Navigation in einem Datenstrom. Die Navigation erfolgt durch die Bewegung eines Zeigemittels auf dem berührungsempfindlichen Bildschirm relativ zu einer visuellen Darstellung (1, 2, 3) des Datenstroms. Dabei kann sich sowohl das Zeigemittel relativ zur visuellen Darstellung (1, 2, 3) bewegen als auch die visuelle Darstellung (1, 2, 3) relativ zu dem durch das Zeigemittel markierten Punkt auf dem berührungsempfindlichen Bildschirm. Der Datenstrom wird beim Navigieren relativ zur Bewegung des Zeigemittels abgespielt. Bei der Verwendung von mehreren Zeigemitteln können mehrere Datenströme unabhängig voneinander abgespielt werden. Die Erfindung betrifft zudem ein Computerprogrammprodukt und ein elektronisches Gerät, welche die Software zur Durchführung des Verfahrens enthalten.The invention relates to a method on a touch-sensitive screen for navigation in a data stream. The navigation is done by the movement of a pointing means on the touch-sensitive screen relative to a visual representation (1, 2, 3) of the data stream. In this case, both the indicator can move relative to the visual representation (1, 2, 3) and the visual representation (1, 2, 3) relative to the point marked by the pointing means point on the touch-sensitive screen. The data stream is played while navigating relative to the movement of the pointing device. When using multiple pointing agents, multiple streams can be played independently. The invention also relates to a computer program product and an electronic device containing the software for performing the method.

Description

STAND DER TECHNIK:STATE OF THE ART:

[0001] Körperbewegungen, insbesondere Fingergesten zur Steuerung von Funktionen und Daten über berührungssensitive Oberflächen aber auch für berührungsloses Steuern von Geräten sind bekannt: Beschrieben wird z.B. «Devices, Methods, and Graphical User Interfaces for Accessibility using a Touch-Sensitive Surface» (US2010/0 309 147) oder eine «Method and Device for a Touchless Interface» (US2008/0 048 878). Bekannt ist auch die gestenbasierte Navigation von Lesesystemen für Sehbehinderte: «Voice-output reading System with Gesturebased Navigation» (US 006 115 482 A). Body movements, in particular finger gestures for the control of functions and data via touch-sensitive surfaces but also for non-contact control of devices are known. "Devices, Methods, and Graphical User Interfaces for Accessibility Using a Touch-Sensitive Surface" (US2010 / 0309147) or a "Method and Device for a Touchless Interface" (US2008 / 0 048 878). The gesture-based navigation of reading systems for the visually impaired is also known: "Voice-output reading system with gesture-based navigation" (US 006 115 482 A).

[0002] Diese Anwendungen steuern diskrete Daten an, also ein ganzes gesprochenes Wort wie in «Systeme d’aide a l’apprentissage de la lecture» (FR 2 840 092), ein Bild, ein Dokument, eine Uhrzeit, eine Funktion oder eine diskrete Stelle in einem grösseren Datenkontinuum. In dieser Art funktioniert auch das Suchen sowie das schnelle Vor- und Rückspulen in einem Musikstück oder einer Videosequenz auf einem iPod gemäss der «Method and Apparatus for Accelerated Scrolling» (WO03/036 457 A2). These applications address discrete data, that is, a whole spoken word as in "systems d'aide a l'apprentissage de la lecture" (FR 2 840 092), an image, a document, a time, a function or a discrete place in a larger data continuum. Searching and fast-forwarding and rewinding in a piece of music or a video sequence on an iPod in accordance with the "Method and Apparatus for Accelerated Scrolling" (WO03 / 036 457 A2) also works in this way.

[0003] Das Navigieren in einem Datenkontinuum ist bekannt als «virtueller Phonograph» (US2010/0 318 204) und wird für das bei DJ*s beliebte «scratchen» beschrieben. Hier erfolgt der Output jedoch aufgrund einer Bewegung der virtuellen Schallplatte. Das Playback wird hier zwar auch relativ zur Bewegung des Fingers, allerdings aber durch den, durch den Finger bewegten Plattenteller an der Position des Tonabnehmers wiedergegeben. Die Vinylplatte oder ein anderes «sourid recording medium» weist dabei keine Struktur auf, welche Rückschlüsse erlaubt auf den Verlauf des damit synchronisierten Playbacks. Im Patent «Musical Instrument having a Ribbed Surface» (US 7 317 157 B2) wird ein mechanisches Verfahren zur Erzeugung von Tönen mittels gerippter Oberflächen beschrieben. In der Beschreibung wird erwähnt, wie dieses Verfahren auf einem Computer-Bildschirm simuliert werden kann. Die vorliegende Erfindung unterscheidet sich dadurch, dass dieses Verfahren auf einer berührungssensitiven Oberfläche realisiert wird und dass sich sowohl der Datenstrom relativ zu einem Zeigemittel als auch das Zeigemittel relativ zum Datenstrom bewegen kann. Zudem ermöglicht das neue Verfahren die Verwendung unterschiedlicher Datenströme (z.B. Geräusche bis Sinfonien) und verschiedenster visueller Darstellungen (siehe Fig. 1-7). Navigating in a data continuum is known as a "virtual phonograph" (US2010 / 0 318 204) and is described for DJ's popular "scratching". Here, however, the output is due to a movement of the virtual record. Although the playback is also reproduced here relative to the movement of the finger, but by the, moved by the finger turntable at the position of the pickup. The vinyl record or another "sourid recording medium" has no structure, which allows conclusions on the course of the synchronized playback. The patent "Musical Instrument having a Ribbed Surface" (US Pat. No. 7 317 157 B2) describes a mechanical method for producing tones by means of ribbed surfaces. The description mentions how this method can be simulated on a computer screen. The present invention differs in that this method is implemented on a touch-sensitive surface and that both the data stream relative to a pointing means and the pointing means can move relative to the data stream. In addition, the new method allows the use of different data streams (e.g., sounds to symphonies) and a variety of visual representations (see Figures 1-7).

BESCHREIBUNG DER ERFINDUNG:DESCRIPTION OF THE INVENTION:

[0004] Ein Verfahren auf einem Touch-Screen zum Navigieren in einem Datenstrom, insbesondere einer Tonaufnahme durch relative Bewegung eines Zeigemittels, insbesondere eines Fingers entlang einer visuellen Darstellung des Datenstroms. Dabei ist der visuellen Darstellung ein Datenstrom, z.B. eine kontinuierliche Tonspur hinterlegt, welche mit einem oder mehreren Ankern flexibel mit der visuellen Darstellung verbunden ist. Das Verfahren ist dadurch gekennzeichnet, dass der hinterlegte Datenstrom relativ zur Bewegung des Fingers abgespielt wird, was bedeutet das z.B. die Tonspur vorwärts, rückwärts, schneller und langsamer, aber auch ausschnittweise oder in veränderter Tonhöhe abgespielt werden kann. Anstelle der Steuerung mit Fingern kann die Steuerung auch mit einem Stift, einer Maus oder einem anderen Pointing Device erfolgen. Dabei kann sich sowohl das Zeigemittel relativ zur visuellen Darstellung bewegen wie auch die visuelle Darstellung relativ zu dem durch das Zeigemittel markierten Punkt auf dem Screen bewegt werden. Bei der Verwendung von mehreren Fingern können mehrere Datenströme unabhängig voneinander abgespielt werden. A method on a touch screen for navigating in a data stream, in particular a sound recording by relative movement of a pointing means, in particular a finger along a visual representation of the data stream. Here, the visual representation is a data stream, e.g. deposited a continuous soundtrack, which is flexibly connected to one or more anchors with the visual representation. The method is characterized in that the stored data stream is played back relative to the movement of the finger, which means e.g. the soundtrack can be played forwards, backwards, faster and slower, but also in sections or in modified pitch. Instead of controlling with fingers, the control can also be done with a pen, a mouse or another pointing device. In this case, both the pointing means can move relative to the visual representation as well as the visual representation can be moved relative to the point marked by the pointing means point on the screen. When using multiple fingers, multiple streams can be played independently.

FIGURENLISTE:LIST OF FIGURES:

[0005] <tb>FIG 1:<sep>Grafik <tb>FIG2:<sep>Text und Bild <tb>FIG 3:<sep>Bilderfolge und Notenschrift <tb>FIG 4:<sep>ein Plan <tb>FIG 5:<sep>eine Partitur <tb>FIG 6:<sep>eine Oberflächenstruktur eines Materials <tb>FIG 7:<sep>eine Fotographie[0005] <tb> FIG 1: <sep> Graphics <tb> FIG2: <sep> text and image <tb> FIG 3: <sep> sequence of pictures and musical notation <tb> FIG 4: <sep> a plan <tb> FIG 5: <sep> a score <tb> FIG. 6: <sep> a surface structure of a material <tb> FIG 7: <sep> a photograph

AUSFÜHRUNG DER ERFINDUNG:EMBODIMENT OF THE INVENTION:

[0006] Ein Verfahren auf einem Touch-Screen oder einer anderen Umgebung, wie z.B. einem iPhone oder iPad, einem bebilderten Mousepad, einem e-Papier oder einer mit Laserstrahlen abgetasteten Fläche, zum Navigieren in einem Datenstrom, insbesondere einer Tonaufnahme durch relative Bewegung eines Zeigemittels, insbesondere eines Fingers entlang einer visuellen Darstellung eines Datenstromes. Dabei kann sowohl das Zeigemittel relativ zur visuellen Darstellung wie auch die visuelle Darstellung relativ zu dem durch das Zeigemittel markierten Punkt auf dem Screen bewegt werden. A method on a touch screen or other environment, such as e.g. an iPhone or iPad, an imaged mousepad, an e-paper or an area scanned with laser beams, for navigating in a data stream, in particular a sound recording by relative movement of a pointing means, in particular a finger along a visual representation of a data stream. In this case, both the pointing means relative to the visual representation and the visual representation can be moved relative to the point marked by the pointing means on the screen.

[0007] Der visuellen Darstellung ist eine kontinuierliche Tonspur hinterlegt, welche mit einem oder mehreren Ankern flexibel mit der visuellen Darstellung verbunden ist. Damit lässt sich die visuelle Darstellung mit dem verbundenen Datenstrom, z.B. einer Tonspur auf dem Screen verschieben, vergrössern, verkleinern und drehen, aber auch schneiden, editieren und neu kombinieren. The visual representation is deposited a continuous soundtrack, which is flexibly connected to one or more anchors with the visual representation. This allows the visual representation to be linked to the associated data stream, e.g. Moving, enlarging, reducing and rotating a soundtrack on the screen, but also cutting, editing and recombining.

[0008] Als Tonspur kann jede beliebige Audioaufnahme dienen, also vom gesprochenen Wort, über beliebige Musikinstrumente und das gesungene Lied bis zur Symphonie, vom Tierlaut bis zum Maschinengeräusch und Donnergrollen. Die Aufnahme ist via Mikrophon, Line-Eingang oder direkt aus dem Internet oder Computer möglich. Any audio recording can serve as a soundtrack, ie from the spoken word, via any musical instruments and the sung song to the symphony, from the animal sound to the machine noise and thunder rumble. The recording is possible via microphone, line input or directly from the internet or computer.

[0009] Die visuelle Darstellung kann jede beliebige visuelle Struktur sein, insbesondere eine Grafik [1], ein Bild [2] oder ein Text [3], eine Bilderfolge [4] oder eine Notenschrift [5], eine bestimmte Strecke auf einem Plan [8], eine Partitur (Fig. 5), eine Oberflächenstruktur eines Materials (Fig. 6), eine Fotographie (Fig. 7) oder Kombinationen davon. Die visuelle Darstellung kann sowohl statisch als auch dynamisch sein. Für das Abspielen der Tonspur ist die relative Bewegung der Abspielposition zur visuellen Struktur bestimmend. The visual representation can be any visual structure, in particular a graphic [1], a picture [2] or a text [3], a series of pictures [4] or a notation [5], a certain distance on a map [8], a score (Figure 5), a surface structure of a material (Figure 6), a photograph (Figure 7) or combinations thereof. The visual representation can be both static and dynamic. For the playback of the sound track, the relative movement of the play position to the visual structure is decisive.

[0010] Das Verfahren ist dadurch gekennzeichnet, dass bei einer Klangfolge diese relativ zum Tempo der Bewegung abgespielt wird, was bedeutet, dass das Tempo der abgespielten Tonspur durch das Tempo der relativen Fingerbewegung gesteuert wird. Abhängig von der relativen Bewegung kann die Tonspur damit sowohl vorwärts als auch rückwärts, sowie ganz oder abschnittweise abgespielt werden, das bedeutet, dass der Beginn oder das Ende der Klangfolge an einer beliebigen Stelle, also z.B. bei einer Sprachaufnahme auch mitten in einem Wort, liegen kann. The method is characterized in that at a sound sequence this is played relative to the speed of the movement, which means that the tempo of the soundtrack being played is controlled by the speed of the relative finger movement. Depending on the relative movement, the soundtrack can thus be played both forwards and backwards, as well as in whole or in sections, which means that the beginning or the end of the sound sequence at an arbitrary position, eg. in a voice recording in the middle of a word, can lie.

[0011] Die Abspielgeschwindigkeit kann die Tonhöhe proportional, umgekehrt proportional oder überproportional verändern, was kreativem Gestalten mit dem bestehenden Tonmaterial viele Möglichkeiten eröffnet. Die Tonhöhe der abgespielten Tonspur kann aber auch unverändert bleiben, was insbesondere beim Abspielen eines Musikstückes wichtig ist. Das Vorwärts- und Rückwärtsabspielen der Tonspur ist auch automatisiert möglich. Durch die Position des Zeigemittels, den Fingerdruck oder mit Eingabehilfen [6] können beliebige Parameter, z.B. Tonhöhe, Lautstärke und Effekte beeinflusst oder festgelegt werden. Ein Cursor [7] kann die exakte Abspielposition anzeigen. The playback speed can change the pitch proportionally, inversely proportional or disproportionately, which opens up many possibilities for creative design with the existing sound material. The pitch of the played soundtrack can also remain unchanged, which is especially important when playing a piece of music. The forward and reverse playback of the soundtrack is also possible automatically. By the position of the pointing means, the finger pressure or with accessibility aids [6], any parameters, e.g. Pitch, volume and effects are affected or fixed. A cursor [7] can indicate the exact play position.

[0012] Mehrere Tonspuren können gleichzeitig unabhängig voneinander oder synchronisiert abgespielt werden. Damit kann intuitiv vom Anwender eine polyphone Gestaltung realisiert werden, von einfacher Mehrstimmigkeit, einem Kanon bis zur Symphonie oder einer freien Klangcollage. Das beschriebene Verfahren kann auch in Kombination mit bekannten Verfahren für die Wiedergabe von diskreten Daten eingesetzt werden. Several soundtracks can be played simultaneously independently or synchronized. Thus, the user can intuitively realize a polyphonic design, from simple polyphony, a canon to the symphony or a free sound collage. The described method can also be used in combination with known methods for the reproduction of discrete data.

[0013] Dadurch, dass bei der Verwendung einer Tonspur beliebige akustische Quellen verwendet werden können, ergeben sich Möglichkeiten aller denkbaren Klang- und Geräuschkombinationen. Verbunden mit der visuellen Darstellung ergeben sich für den Anwender visuelle Erinnerungshilfen, die das kreative Spiel unterstützen. The fact that any acoustic sources can be used when using a soundtrack, opportunities arise all conceivable sound and noise combinations. Connected to the visual presentation, the user has visual reminders that support creative play.

[0014] Mit Aufnahme-, Speicher- und Editierfunktionen [9] können Sequenzen gespeichert, importiert, geschnitten, editiert und neu kombiniert werden. Einzelne Aufnahmen oder ganze Kompositionen können über Email oder via E-Plattformen mit anderen Usern ausgetauscht werden. With recording, storage and editing functions [9] sequences can be saved, imported, cut, edited and recombined. Individual recordings or entire compositions can be exchanged with other users via e-mail or e-platforms.

Claims (10)

1. Ein Verfahren auf einem Touch-Screen zum Navigieren in einem Datenstrom, insbesondere einer Tonaufnahme durch Bewegung eines Zeigemittels, insbesondere eines Fingers entlang einer visuellen Darstellung welcher der kontinuierliche Datenstrom, insbesondere eine Tonspur, hinterlegt ist, dadurch gekennzeichnet dass die Klangfolge relativ zur Zeigemittelbewegung abgespielt wird und dabei sowohl das Zeigemittel relativ zur visuellen Darstellung wie auch die visuelle Darstellung relativ zu dem durch das Zeigemittel markierten Punkt auf dem Screen bewegt werden kann.1. A method on a touch screen for navigating in a data stream, in particular a sound recording by moving a pointing means, in particular a finger along a visual representation of which the continuous data stream, in particular a soundtrack deposited, characterized in that the sound sequence relative to the Zeigentittelbewegung and both the pointing means relative to the visual representation and the visual representation relative to the point marked by the pointing means can be moved on the screen. 2. Ein Verfahren gemäss Anspruch 1 dadurch gekennzeichnet dass die Tonspur sowohl vorwärts als auch rückwärts sowie ganz oder abschnittweise abgespielt werden kann.2. A method according to claim 1, characterized in that the soundtrack can be played both forward and backward as well as in whole or in sections. 3. Ein Verfahren gemäss den Ansprüchen 1 oder 2, dadurch gekennzeichnet dass die Tonhöhe unabhängig vom Tempo der relativen Fingerbewegung oder der Abspielgeschwindigkeit erhalten bleibt.3. A method according to claims 1 or 2, characterized in that the pitch is maintained regardless of the tempo of the relative finger movement or the playback speed. 4. Ein Verfahren gemäss den Ansprüchen 1 oder 2, dadurch gekennzeichnet dass das Tempo der relativen Fingerbewegung bzw. die Abspielgeschwindigkeit die Tonhöhe verändert.4. A method according to claims 1 or 2, characterized in that the speed of the relative finger movement or the playback speed changes the pitch. 5. Ein Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet dass die visuelle Darstellung jede beliebige visuelle Darstellung sein kann, insbesondere ein Bild, eine Grafik, ein Text, eine Notenschrift, ein Plan, eine Struktur, eine Fotographie oder Kombinationen davon.5. A method according to any one of claims 1 to 4, characterized in that the visual representation can be any visual representation, in particular an image, a graphic, a text, a notation, a plan, a structure, a photograph or combinations thereof. 6. Ein Verfahren nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet dass die Tonspur mit einem oder mehreren Ankern flexibel mit der visuellen Darstellung verbunden ist und damit die visuelle Darstellung mit der verbundenen Tonspur auf dem Screen verschiebbar, vergrösserbar, verkleinerbar und drehbar, sowie in Abschnitte zerlegbar, editierbar und neu kombinierbar ist.6. A method according to any one of claims 1 to 5, characterized in that the soundtrack with one or more anchors is flexibly connected to the visual representation and thus the visual representation with the associated soundtrack on the screen displaceable, zoomable, reducible and rotatable, and can be broken down into sections, edited and recombined. 7. Ein Verfahren nach einem der Ansprüche 1 bis 6, dadurch gekennzeichnet dass gleichzeitig mehrere Spuren unabhängig voneinander oder synchronisiert abgespielt werden können.7. A method according to any one of claims 1 to 6, characterized in that simultaneously several tracks can be played independently or synchronized. 8. Ein Verfahren nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet dass als akustisches Phänomen für die Tonspur ein gesprochener Text, ein gesungener Text, eine instrumentale Melodie, ein Rhythmus, mehrere von gleichen oder unterschiedlichen Instrumenten gespielte Melodien, eine Tierstimme, ein Naturklang oder -geräusch, eine technische Klangfolge, eine Geräuschfolge oder Kombinationen davon verwendet werden kann.8. A method according to any one of claims 1 to 7, characterized in that as an acoustic phenomenon for the soundtrack a spoken text, a sung text, an instrumental melody, a rhythm, a plurality of same or different instruments played melodies, an animal voice, a natural sound or sound, a technical sound sequence, a sound sequence, or combinations thereof. 9. Computerprogrammprodukt enthaltend die Software zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 8.9. Computer program product containing the software for carrying out the method according to one of claims 1 to 8. 10. Elektronisches Gerät mit installierter Software zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 8.10. Electronic device with installed software for carrying out the method according to one of claims 1 to 8.
CH00952/11A 2011-06-06 2011-06-06 A method of motion-dependent link in continuous data streams along visual structures. CH705069A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CH00952/11A CH705069A1 (en) 2011-06-06 2011-06-06 A method of motion-dependent link in continuous data streams along visual structures.
PCT/CH2012/000124 WO2012167393A1 (en) 2011-06-06 2012-06-05 Method for motion-dependent navigation in continuous data streams along visual structures

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CH00952/11A CH705069A1 (en) 2011-06-06 2011-06-06 A method of motion-dependent link in continuous data streams along visual structures.

Publications (1)

Publication Number Publication Date
CH705069A1 true CH705069A1 (en) 2012-12-14

Family

ID=46551334

Family Applications (1)

Application Number Title Priority Date Filing Date
CH00952/11A CH705069A1 (en) 2011-06-06 2011-06-06 A method of motion-dependent link in continuous data streams along visual structures.

Country Status (2)

Country Link
CH (1) CH705069A1 (en)
WO (1) WO2012167393A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2765573B1 (en) 2013-02-08 2016-08-03 Native Instruments GmbH Gestures for DJ scratch effect and position selection on a touchscreen displaying dual zoomed timelines.

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008083360A1 (en) * 2007-01-05 2008-07-10 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
WO2010107661A1 (en) * 2009-03-16 2010-09-23 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
GB2473066A (en) * 2009-09-01 2011-03-02 Release Consulting Ltd Electronic apparatus for displaying and controlling a scrolling musical notation sequence

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6115482A (en) 1996-02-13 2000-09-05 Ascent Technology, Inc. Voice-output reading system with gesture-based navigation
US6275222B1 (en) * 1996-09-06 2001-08-14 International Business Machines Corporation System and method for synchronizing a graphic image and a media event
US7312785B2 (en) 2001-10-22 2007-12-25 Apple Inc. Method and apparatus for accelerated scrolling
US7317157B2 (en) 2002-01-21 2008-01-08 Cstools Gmbh Musical instrument having a ribbed surface
FR2840092A1 (en) 2002-05-22 2003-11-28 Florent Henri Jean Staes Reading instruction system has touch screen and plays sound to match word touched by finger
US7978091B2 (en) 2006-08-24 2011-07-12 Navisense Method and device for a touchless interface
US20120014673A1 (en) * 2008-09-25 2012-01-19 Igruuv Pty Ltd Video and audio content system
US8681106B2 (en) 2009-06-07 2014-03-25 Apple Inc. Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface
US8369974B2 (en) 2009-06-16 2013-02-05 Kyran Daisy Virtual phonograph
US9930310B2 (en) * 2009-09-09 2018-03-27 Apple Inc. Audio alteration techniques

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008083360A1 (en) * 2007-01-05 2008-07-10 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
WO2010107661A1 (en) * 2009-03-16 2010-09-23 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
GB2473066A (en) * 2009-09-01 2011-03-02 Release Consulting Ltd Electronic apparatus for displaying and controlling a scrolling musical notation sequence

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
[Online] Woojijuice, Hokusai Preview, 23.05.2011, http://www.youtube.com/watch?v=EeuhOQYGIjw, Retrieved on: 05.10.2011 *

Also Published As

Publication number Publication date
WO2012167393A1 (en) 2012-12-13

Similar Documents

Publication Publication Date Title
Schneider et al. Studying design process and example use with Macaron, a web-based vibrotactile effect editor
US9208821B2 (en) Method and system to process digital audio data
RU2470353C2 (en) Synchronising slide show events with audio
Kato et al. TextAlive: Integrated design environment for kinetic typography
Schneider et al. Improvising design with a haptic instrument
US9087508B1 (en) Presenting representative content portions during content navigation
Andersen Mixxx: Towards novel DJ interfaces
Hürst et al. Interfaces for timeline-based mobile video browsing
CH705069A1 (en) A method of motion-dependent link in continuous data streams along visual structures.
Koszolko The tactile evolution: electronic music production and affordances of iOS apps
Schnell et al. Playing the" MO"-Gestural Control and Re-Embodiment of Recorded Sound and Music.
Roma et al. A Tabletop Waveform Editor for Live Performance.
JP6242638B2 (en) Teacher-supported presentation system and program
Bellona Physical Intentions: Exploring Michel Waisvisz’s The Hands (Movement 1)
Dekel et al. Mogmi: Mobile gesture music instrument
Lee et al. DiMaß: A technique for audio scrubbing and skimming using direct manipulation
Fajar et al. Advantages of “DAW” Composing Music for the Effectiveness of Learning the Process of Musical Practice
Laschke et al. Improvising with Machines-Designing Artistic Non-Human Actors
Enström et al. Musical notation for multi-touch interfaces.
Hürst et al. Interactive manipulation of replay speed while listening to speech recordings
Forsyth et al. Random Access Remixing on the iPad.
Torre A journey towards the development of a sound-led interdisciplinary performance: Agorá
Lauer et al. Audio-based methods for navigating and browsing educational multimedia documents
Heller et al. DiskPlay: in-track navigation on turntables
Marley et al. Gestroviser: toward collaborative agency in digital musical instruments.

Legal Events

Date Code Title Description
AZW Rejection (application)