Autor Thema: DWH mit NotesSQL ? [Gelöst]  (Gelesen 2537 mal)

Offline bikerboy

  • Gold Platin u.s.w. member:)
  • *****
  • Beiträge: 1.155
  • Geschlecht: Männlich
DWH mit NotesSQL ? [Gelöst]
« am: 06.09.16 - 10:25:07 »
Hallo zusammen,

Ewig nicht mehr hier gewesen. Habe aber nun mein Login wieder richtig erraten :D

Wir haben hier gerade ein Projekt das ein DataWarehouse aufbauen soll. Nun sollen halt grosse Datenmengen von Notes nach SQL geschaufelt werden. Dazu haben wir bislang 3 Ansätze. Mir geisterte noch das "NotesSQL" im Hinterkopf rum und dann habe ich mal gegoogelt und bin direkt hier drüber gestolpert. https://splearnings.com/2013/08/02/integrating-lotus-notes-to-sql-using-ssis/

Bislang haben wir die folgende Ansätze

1. Domino Api calls wo die Daten per JSON ausgeben und dann weiter verarbeitet werden.
2. Agenten die CSV Dateien bereit stellen die dann per SSIS ausgelesen werden
3. Die Pumpe von Infoserve
(4. NotesSQL)

Anspruch ist halt die Daten auch zeitnah immer wieder frisch zu machen.

Ich persönlich fände Variante 1 bislang am besten, aber wie gesagt, wir sind in einer Findungsphase und ich freue ich auf die Diskussion.
« Letzte Änderung: 08.09.16 - 11:50:31 von bikerboy »
Robert Kreutzer

Anwendungsentwicklung

"Jeder Idiot kann was kompliziertes bauen, es Bedarf eines Genie für etwas einfaches"

Offline Ralf_M_Petter

  • Gold Platin u.s.w. member:)
  • *****
  • Beiträge: 1.879
  • Geschlecht: Männlich
  • Jeder ist seines eigenen Glückes Schmied
    • Ralf's Blog
Re: DWH mit NotesSQL ?
« Antwort #1 am: 06.09.16 - 10:47:24 »
Wenn du schon JSON haben willst, würde ich gleich die Domino Data Services nehmen. Dann kannst du dir die aufwendige Generierung der JSON Daten sparen.

Siehe http://www.everythingaboutit.eu/2013/03/aktivieren-des-rest-api-der-domino-data.html
Jede Menge Tipps und Tricks zu IT Themen findet Ihr auf meinem Blog  Everything about IT  Eine wahre Schatzkiste sind aber sicher die Beiträge zu meinem Lieblingsthema Tipps und Tricks zu IBM Notes/Domino Schaut doch einfach mal rein.

Offline bikerboy

  • Gold Platin u.s.w. member:)
  • *****
  • Beiträge: 1.155
  • Geschlecht: Männlich
Re: DWH mit NotesSQL ?
« Antwort #2 am: 06.09.16 - 11:05:08 »
Sorry das meinte ich in Vorschlag Eins.. War undeutlich formuliert.
Robert Kreutzer

Anwendungsentwicklung

"Jeder Idiot kann was kompliziertes bauen, es Bedarf eines Genie für etwas einfaches"

Offline umi

  • Gold Platin u.s.w. member:)
  • *****
  • Beiträge: 2.062
  • Geschlecht: Männlich
  • one notes to rule'em all, one notes to find'em....
    • Belsoft AG
Re: DWH mit NotesSQL ?
« Antwort #3 am: 08.09.16 - 09:30:18 »
Moin

5.  Ibm Enterprise Integrator oder
6. Notes Java Agent mit SQL
7. TDI/SDI
Gruss

Urs

<:~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
Jegliche Schreibfehler sind unpeabischigt
http://www.belsoft.ch
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~:>

Offline bikerboy

  • Gold Platin u.s.w. member:)
  • *****
  • Beiträge: 1.155
  • Geschlecht: Männlich
Re: DWH mit NotesSQL ?
« Antwort #4 am: 08.09.16 - 11:50:16 »
Ja der LEI da ist er wieder.

Wir haben uns im Zuge des Projektes dazu entschlossen, die Daten als "Vollabzug" in CSV-Dateien immer wieder bereit zu stellen. So sind die Systeme von einander getrennt und können sich nicht behakeln. Weiterer Vorteil für mich als Entwickler meine Zuständigkeit hört ab da auch auf.

Der Agent exportiert nun 72.000 Datensätze in 10 Sekunden. Macht ein einfaches WalktheView. Alle Daten sind in einer Spalte. Mehrfachwerte werden über Hilfs-View aufgelöst, so haben wir gleich eine Normierung erreicht!

Bin soweit zufrieden. Werde aber mir dennoch den SSIS ansehen wie man den bedient. Hatte mich schon lange interessiert :)

Robert Kreutzer

Anwendungsentwicklung

"Jeder Idiot kann was kompliziertes bauen, es Bedarf eines Genie für etwas einfaches"

 

Impressum Atnotes.de  -  Powered by Syslords Solutions  -  Datenschutz