Lieber Besucher, herzlich willkommen bei: INVESTOX-Forum. Falls dies Ihr erster Besuch auf dieser Seite ist, lesen Sie sich bitte die Hilfe durch. Dort wird Ihnen die Bedienung dieser Seite näher erläutert. Darüber hinaus sollten Sie sich registrieren, um alle Funktionen dieser Seite nutzen zu können. Benutzen Sie das Registrierungsformular, um sich zu registrieren oder informieren Sie sich ausführlich über den Registrierungsvorgang. Falls Sie sich bereits zu einem früheren Zeitpunkt registriert haben, können Sie sich hier anmelden.
Montag, 26. November 2007, 18:39
Guten Abend Anke ,
als erstes habe ich mir Deine Videos angeschaut
Bevor ich nun mit der "Arbeit" anfange, die Dank Deinem Video vermutlich ein Spaziergang sein wird, folgende Fragen :
1. Wenn ich mich richtig erinnere hatte Reiner einmal geschrieben, daß Weka in C:\ installiert werden muß. Ist dies noch immer erforderlich oder kann ich alles in einer anderen Partition installieren ?
2. Beim "Textimport" in Investox, muß die Reihenfolge der Spalten der Daten (in Deinem Beispiel : Datum , O , H , L , C , Volumen) der Reihenfolge der zur Verfügung stehenden Daten entsprechen ?
Bei TaiPan-EOD also (von links nach rechts) : Datum , O , H , L , Volumen , C ?
Wünsche Dir einen angenehmen Abend, sehr sicher nach dem Wochenende voller Arbeit
Gruß,
hajo
als erstes habe ich mir Deine Videos angeschaut
Bevor ich nun mit der "Arbeit" anfange, die Dank Deinem Video vermutlich ein Spaziergang sein wird, folgende Fragen :
1. Wenn ich mich richtig erinnere hatte Reiner einmal geschrieben, daß Weka in C:\ installiert werden muß. Ist dies noch immer erforderlich oder kann ich alles in einer anderen Partition installieren ?
2. Beim "Textimport" in Investox, muß die Reihenfolge der Spalten der Daten (in Deinem Beispiel : Datum , O , H , L , C , Volumen) der Reihenfolge der zur Verfügung stehenden Daten entsprechen ?
Bei TaiPan-EOD also (von links nach rechts) : Datum , O , H , L , Volumen , C ?
Wünsche Dir einen angenehmen Abend, sehr sicher nach dem Wochenende voller Arbeit
Gruß,
hajo
Montag, 26. November 2007, 23:28
Hallo,
danke für Eure Postings und die bisherigen positiven Feedbacks.
Ja- es steckt sehr viel Arbeit in Reiners Data Mining Paket und meinen Videos.
Aber ich muss auch sagen, dass mir die Erstellung der Videos und die Einarbeitung in Weka riesigen Spaß gemacht hat.
Wenn man sich erst einmal an die Materie "rantraut" und sich wirklich damit beschäftigt, wird man schnell erkennen, welches enorme Potential für künftige Systementwicklungen das Data Mining eröffnet.
Ob mit SVM oder ohne - dank Weka sind wir ja jetzt flexibel.
@ Hajo
zu Frage 1 kann ich nichts sagen - bei mir wird standardmäßig auf C:\ installiert....
Vielleicht weiß jemand anders mehr ?
zu 2)
Wenn Du Tai-Pan EOD-Daten verwendest, ist die von Dir genannte Reihenfolge korrekt.
Ich würde aber trotzdem dazu raten wollen, die KnowledgeFlows in Weka zuerst mit den mitgelieferten CSV-Daten nachzuvollziehen.
Wenn damit alles klappt, hat man eine gute Ausgangsbasis und kann damit beginnen, zu variieren.
danke für Eure Postings und die bisherigen positiven Feedbacks.
Zitat
sehr sicher nach dem Wochenende voller Arbeit
Ja- es steckt sehr viel Arbeit in Reiners Data Mining Paket und meinen Videos.
Aber ich muss auch sagen, dass mir die Erstellung der Videos und die Einarbeitung in Weka riesigen Spaß gemacht hat.
Wenn man sich erst einmal an die Materie "rantraut" und sich wirklich damit beschäftigt, wird man schnell erkennen, welches enorme Potential für künftige Systementwicklungen das Data Mining eröffnet.
Ob mit SVM oder ohne - dank Weka sind wir ja jetzt flexibel.
@ Hajo
zu Frage 1 kann ich nichts sagen - bei mir wird standardmäßig auf C:\ installiert....
Vielleicht weiß jemand anders mehr ?
zu 2)
Wenn Du Tai-Pan EOD-Daten verwendest, ist die von Dir genannte Reihenfolge korrekt.
Ich würde aber trotzdem dazu raten wollen, die KnowledgeFlows in Weka zuerst mit den mitgelieferten CSV-Daten nachzuvollziehen.
Wenn damit alles klappt, hat man eine gute Ausgangsbasis und kann damit beginnen, zu variieren.
Montag, 26. November 2007, 23:36
Kompliment auch von mir an an die beiden "Cracks" Anke und Reiner! Das muss man sich mal klarmachen: Da werden wir von einem
neuralen Forschungsinstitut "heiß" gemacht, dass da was Revolutionäres in Form von SVM in den Schubladen existiert, aber wir kommen nicht dran.
Weil wir nicht wissen wann, wie und ob überhaupt Lizenzen erteilt werden, ob Investox je damit ausgestattet wird, ob das Ganze überhaupt irgend was taugt, ob wir selbst genug Grips, Vorbildung, Geduld, Zeit, Geld haben, um zu den Auserwählten der neuen Zaubertechnik zu gehören.
Aber die beiden haben für jeden ernsthaft Interessierten eine bewundernswerte Arbeit zum Einstieg in dieses spannende Thema gratis geliefert,
und das so ganz nebenbei, ohne dass wir von denjenigen, die eigentlich erste (kommerzielle) Adressen sind, ein Mindestmaß an Information der
Umsetzungsperspektive für den interessierten Kunden erfahren hätten.
Hier waren zwei Cracks mal wieder viel schneller, als zwei Firmen, und das ist gut so! (Nur nicht für die Firmen)
neuralen Forschungsinstitut "heiß" gemacht, dass da was Revolutionäres in Form von SVM in den Schubladen existiert, aber wir kommen nicht dran.
Weil wir nicht wissen wann, wie und ob überhaupt Lizenzen erteilt werden, ob Investox je damit ausgestattet wird, ob das Ganze überhaupt irgend was taugt, ob wir selbst genug Grips, Vorbildung, Geduld, Zeit, Geld haben, um zu den Auserwählten der neuen Zaubertechnik zu gehören.
Aber die beiden haben für jeden ernsthaft Interessierten eine bewundernswerte Arbeit zum Einstieg in dieses spannende Thema gratis geliefert,
und das so ganz nebenbei, ohne dass wir von denjenigen, die eigentlich erste (kommerzielle) Adressen sind, ein Mindestmaß an Information der
Umsetzungsperspektive für den interessierten Kunden erfahren hätten.
Hier waren zwei Cracks mal wieder viel schneller, als zwei Firmen, und das ist gut so! (Nur nicht für die Firmen)
Dienstag, 27. November 2007, 10:18
@Anke
Auch von mir vielen herzlichen Dank für Deine unermüdliche Arbeit im Sinne des Investox-Users.Du ,und natürlich auch Reiner, bringst mit Deiner Arbeit den nicht soooo mathematisch versierten User auf den Stand,WEKA und SVM zumindest anzutesten und auszuprobieren! Ich weiß, wie aufwendig es ist, nur ein simples Video zu erstellen und daher muss man die Arbeit wirklich im sehr hohen Maße anerkennen-zumal sie nicht dem Selbstzweck dient!
@bigpoppa
Ich habe ähnliches befürchtet-siehe hier.... Ich finde Deine Aussage nicht als Spaßbremse sondern man muss den Realitäten ins Gesicht sehen! Je früher Euphorie gebremst wird umso besser kann man sie verkraften! Ich gehe davon aus das wenn es jemand schafft mit SVM profitablere und stabilere HSSe zu erstellen als das bislang überhaupt möglich war, ein xxxx(x) Gebühr fällig wird, denn es wäre beinahe einmalig! Aber ich denke auch das wir und NRCM sicher nicht die ersten und einzigen sind die so ein Projekt austesten! Wäre es profitabel, könnte man es m.M. für horrende Summen als PlugIn zu einer Software kaufen-andererseits würde es vielleicht nie ins "Rampenlicht" treten, da SVM schlichtweg "Millionäre macht"! Sucht es euch aus...
Auch von mir vielen herzlichen Dank für Deine unermüdliche Arbeit im Sinne des Investox-Users.Du ,und natürlich auch Reiner, bringst mit Deiner Arbeit den nicht soooo mathematisch versierten User auf den Stand,WEKA und SVM zumindest anzutesten und auszuprobieren! Ich weiß, wie aufwendig es ist, nur ein simples Video zu erstellen und daher muss man die Arbeit wirklich im sehr hohen Maße anerkennen-zumal sie nicht dem Selbstzweck dient!
@bigpoppa
Ich habe ähnliches befürchtet-siehe hier.... Ich finde Deine Aussage nicht als Spaßbremse sondern man muss den Realitäten ins Gesicht sehen! Je früher Euphorie gebremst wird umso besser kann man sie verkraften! Ich gehe davon aus das wenn es jemand schafft mit SVM profitablere und stabilere HSSe zu erstellen als das bislang überhaupt möglich war, ein xxxx(x) Gebühr fällig wird, denn es wäre beinahe einmalig! Aber ich denke auch das wir und NRCM sicher nicht die ersten und einzigen sind die so ein Projekt austesten! Wäre es profitabel, könnte man es m.M. für horrende Summen als PlugIn zu einer Software kaufen-andererseits würde es vielleicht nie ins "Rampenlicht" treten, da SVM schlichtweg "Millionäre macht"! Sucht es euch aus...
Happy Trading
Dienstag, 27. November 2007, 11:30
Hallo ,
ich werde heute Abend hier noch ausführlich posten und dann insbesondere auch zu den interessanten Fragen von ulukai Stellung nehmen.
Zuerst muss ich heute arbeiten, bevor ich mich dann später wieder dem Vergnügen widmen kann.
Zunächst deshalb nur soviel zum Posting von bigpoppa:
Deine Bemerkungen sind wichtig und berechtigt.
Es war und ist nicht das Anliegen von Reiner und mir, ein Gratis-Handelssystem zur Verfügung zu stellen, welches auf Knopfdruck Reichtum generiert.
Die Projektdatei, die im Rahmen von Reiners Data-Mining-Paket zur Verfügung gestellt wird, ist streng genommen noch nicht mal ein Handelssystem, weil ja wichtige Systemelemente (z.B. das gesamte Money- und Risikomanagement) noch nicht implementiert wurden.
Es geht uns auch nicht darum, die SVM als „Wunderinput“ für hochprofitable Handelssysteme zu pushen.
Wir haben mit der Vorstellung von Weka und der praktischen Demonstration der Einbindung von Weka-Outputs in Investox dem interessierten Anwender einen Weg aufzeigen wollen, die vielfältigen Möglichkeiten des Data-Mining, für eigene Systementwicklungen zu nutzen.
Das Potential, welches sich interessierten Anwendern dadurch eröffnet, ist enorm und (ich habe es ja in meinem letzten Posting schon geschrieben) mitnichten auf den Einsatz von SVM begrenzt.
Mich interessieren z.B. für meine Systeme derzeit besonders die Entscheidungsbäume – vielleicht entdecken andere Anwender Assoziationsregeln, Clusteranalyse oder Case-Based Reasoning für sich.
Klar ist, dass auch hier jedem Erfolg harte Arbeit zugrunde liegen wird.
Der wirklich interessierte Anwender wird sich zusätzliches Know How aneignen müssen und wollen, um seine Ideen richtig umzusetzen.
Was Reiner und ich realisiert haben, hat mit „Aufopferung“ nichts zu tun.
Unser Projekt demonstriert aber natürlich die praktische Umsetzung des wissenschaftlichen Gedankens, dass Wissen eines der wenigen Güter ist, die sich vermehren, wenn man sie teilt.
ich werde heute Abend hier noch ausführlich posten und dann insbesondere auch zu den interessanten Fragen von ulukai Stellung nehmen.
Zuerst muss ich heute arbeiten, bevor ich mich dann später wieder dem Vergnügen widmen kann.
Zunächst deshalb nur soviel zum Posting von bigpoppa:
Deine Bemerkungen sind wichtig und berechtigt.
Es war und ist nicht das Anliegen von Reiner und mir, ein Gratis-Handelssystem zur Verfügung zu stellen, welches auf Knopfdruck Reichtum generiert.
Die Projektdatei, die im Rahmen von Reiners Data-Mining-Paket zur Verfügung gestellt wird, ist streng genommen noch nicht mal ein Handelssystem, weil ja wichtige Systemelemente (z.B. das gesamte Money- und Risikomanagement) noch nicht implementiert wurden.
Es geht uns auch nicht darum, die SVM als „Wunderinput“ für hochprofitable Handelssysteme zu pushen.
Wir haben mit der Vorstellung von Weka und der praktischen Demonstration der Einbindung von Weka-Outputs in Investox dem interessierten Anwender einen Weg aufzeigen wollen, die vielfältigen Möglichkeiten des Data-Mining, für eigene Systementwicklungen zu nutzen.
Das Potential, welches sich interessierten Anwendern dadurch eröffnet, ist enorm und (ich habe es ja in meinem letzten Posting schon geschrieben) mitnichten auf den Einsatz von SVM begrenzt.
Mich interessieren z.B. für meine Systeme derzeit besonders die Entscheidungsbäume – vielleicht entdecken andere Anwender Assoziationsregeln, Clusteranalyse oder Case-Based Reasoning für sich.
Klar ist, dass auch hier jedem Erfolg harte Arbeit zugrunde liegen wird.
Der wirklich interessierte Anwender wird sich zusätzliches Know How aneignen müssen und wollen, um seine Ideen richtig umzusetzen.
Was Reiner und ich realisiert haben, hat mit „Aufopferung“ nichts zu tun.
Unser Projekt demonstriert aber natürlich die praktische Umsetzung des wissenschaftlichen Gedankens, dass Wissen eines der wenigen Güter ist, die sich vermehren, wenn man sie teilt.
Dienstag, 27. November 2007, 15:50
Hallo bigpoppa!
Hallo Leute!
Zu der aktuellen Weka-SVM Euphorie möchte ich kurz mal ein Kommentar abgeben.
Man sollte nicht erwarten, dass man die Daten durch WEKA laufen lässt und hinten dann ein Prognoseindikator rauskommt. Bevor da einige wie wild drauf losexperimentieren und einiges an Zeit investieren sollte folgendes vorher klar sein. Weka und insbesondere die in Weka enthaltenen SVMs sind nicht für die Verarbeitung von Zeitreihen gedacht und gerade das ist das Manko. Auch wenn sich einige hier aufopfern und Handelssysteme zur Verfügung stellen, sei jedem klar dass diese nicht funktionieren können/werden. Der Grund dafür ist, dass man für Zeitreihen einen speziellen Kernel für die SVM braucht. Es gibt unzählige Studien über solche Kernels wo diese mathematisch erklärt werden. Ausprogrammieren wird man diesen jedoch selber müssen, was nicht gerade eine triviale Angelegenheit ist.
Ich möchte keine Spassbremse sein, aber ganz so einfach ist die Sache nicht. Um solch ein SVM-System umzusetzen gehen sicher Wochen, wenn nicht Monate an Forschungs- und Entwicklungsarbeit drauf. Das man dann solch ein funktionierendes Systeme dann nicht gratis verteilt ist für mich irgendwo nachvollziehbar.
Schöne Grüße
Man sollte über Dinge, die man eignetlich nicht versteht und auch nicht nachvollziehen kann, nicht süffisante und völlig unqualifizierte Anmerkungen losslassen, welche die Inkompetenz des Verfasser noch unterstreichen.
Weka ist ein bekanntes und mächtiges Werkzeug gerade in der Zeitreihenanalyse. Des Weiteren gibt es schon mehrere Weka-Projekte (auch schon hier im Forum per Link angezeigt), welche gerade den Wertüapierhandel betreffen.
Dann sind die Entwickler und Anwender (auch deutsche Universitäten!!!) wohl recht einfältig, wenn Deine Aussage stimmen würde!
So ist auch in Weka der LibSVM Algorithmus enthalten, der ebenfalls den Einsatz verschiedener Kernels ermöglicht.
Mit diesem LibSvM Algorithmus abeitet auch eine andere hier im Forum besprochene Anwendung aus dem Bereich SVM!!!
Mit denselben Kernels die LibSVM hier bereithält!!!
Also wenn nur "geheimnisvolle", den Mathematikern bisher unbekannte, Kernels brauchbar sind, so funktioniert ja diese Variante dann wohl auch nicht.
Wieso diese dann nicht kostenfrei abgegebenen wird ist schon verwunderlich, lieber bigpoppa???
Wenn Du bitte hier mathematisch korrekt (ein kurzer Beweis genügt ja) darstellst warum a) Weka nicht für Zeitreihen geeignet ist und b) für Zeitreihen die den Wertpapierhandel betreffen, nur spezielle Kernels erforderlich sind!
In Weka sind alle bisher gängigen Verfahren der SVM Modellierung und auch alle Kernels (lineare, radiale, sigmoide, etc.) enthalten.
Für was bitte, ist dann Weka zuständig, wenn nicht für die Analyse von Zeitreihen?
Jeder sollte einmal, der nun Zweifel an der Funktion von Weka hat, in Google eingeben: Weka Zeitreihen !!! Man findet dort leicht heraus, dass Weka hier ein führendes Programm ist und, wie schon erwähnt, auch an deutschen Universitäten für Forschung und Lehre eingesetzt wird!!!
Mir scheint Du redest etwas daher, von dem Du alleine keinen blassen Schimmer hast!
So profiliert man sich sicher nicht!
Das der Einsatz von SVM im Wertpapierhandel anders zu handhaben ist, als zum Beispiel Neuronale Netze, ist kein Geheimnis!
Der Prognosehorizont ist in der Regel kürzer, bestimmte Eigenschaften müssen berücksichtigt und erkannt werden!
Auch die retadierte Einstellung mancher Zeitgenossen, dass ein kostenloses Produkt, ja wohl nichts taugen kann, spricht für den traurigen Zeitgeist unserer Welt. Man ist halt gewohnt ordentlich hinzublättern, dann wird´s auch taugen!
Grüße
Reiner
Dieser Beitrag wurde bereits 1 mal editiert, zuletzt von »Reiner« (27. November 2007, 16:20)
Dienstag, 27. November 2007, 18:42
Hallo bigpoppa!
@Reiner
Mein Statement war unter Umständen ein bisschen zu pauschal. Die von dir aufgezählten Kernels berücksichtigen den Faktor Zeit nicht. Zum Vergleich zweier Muster zu gegebenen Zeitpunkten eignen sich diese Kernels allemal. Will man jedoch eine zeitabhängige Entwicklung vergleichen, wird man wohl einen anderen Kernel benötigen.
Es hängt letztendlich von der Frage ab, was man analysieren möchte.
Für eine offene Diskussion wäre ich gerne bereit gewesen, jedoch kann man Auffassungsunterschiede auch in einer höflicheren Art und Weise darstellen.
Schönen Tag
Dein Statement war doch nicht pauschal, sondern sehr konkret:
Weka eignet sich nicht zur Analyse von Zeitreihen!
Die in Weka enthaltenen Kernels sind nicht brauchbar!
Dann jetzt neu:
Zum Vergleich zweier Muster zu gegebenen Zeitpunkten eignen sich diese Kernels allemal!
Will man jedoch eine zeitabhängige Entwicklung vergleichen, wird man wohl einen anderen Kernel benötigen!
Bei der Anwendung von SVM handelt es sich um die Analyse zeitabhängiger Daten, eben Zeitreihen.
Es wird jedem Element der Zeit ein Element einer Zielmenge (Kurs) zugeordnet. Die Zeit ist somit Bestand der Zeitreihe und wird so auch zwangsläufig in jedem Modell mit verarbeitet.
Eine Support Vector Machine vergleicht nicht zwei Muster, sondern unterteilt eine Menge von Objekten in Klassen, um deren Grenzen sich ein möglichst breiter objektfreier Bereich befindet.
Bekannt sind die folgenden Kernel:
Mit diesen werden die Anforderungen zur Unterteilung von Objektmengen erfüllt.
Wie bereits erwähnt arbeitet der LibSVM Algorithmus mit verschiedenen SVM Formulierungen ebenfalls mit diesen Kernels!
Hier im Forum wurde einmal eine Dipolmarbeit eines Herrn Mager erwähnt.
Wer sich diese zu Gemüte geführt hat, wird auch keine anderen SVM´s oder andere Kernel´s entdeckt haben???
Ich habe diese Arbeit nicht gelesen, aber ich möchte darauf wetten!
Du hast Recht: Andere Auffassungen kann man diskutieren, aber nicht haltlose Willkür und absolute Unwissenheit!
Grüße
Reiner