Best Practices für die Verbindung mit HDFS 3.x und Hive 2.1.1 - spectrum_platform - 23 - 23.1

Spectrum Enterprise Data Integration-Handbuch

Product type
Software
Portfolio
Integrate
Product family
Spectrum
Product
Spectrum > Data Integration
Version
23.1
Language
Deutsch
Product name
Spectrum Data Integration
Title
Spectrum Enterprise Data Integration-Handbuch
First publish date
2005
Last updated
2023-10-25
Published on
2023-10-25T06:22:15.743462
  • Verwenden Sie beim Erstellen von Tabellen und Definieren von Schemata Kleinbuchstaben. Beispiel: Tabellendemo erstellen ( id int, name string, salary int).
  • Verwenden Sie vollständig qualifizierte Feldnamen bei der Verwendung einer Hive-JDBC-Verbindung mit dem Schritt Read from DB. Andernfalls erstellen Sie zum Lesen aus der Datenbank und das Schreiben in die Datenbank eine Model Store-Verbindung.
  • Speicherort für Schlüsseltabellen-Datei zur Angabe von Schrägstrichen / beim Verbinden unter Windows.
  • Vermeiden Sie Leerzeichen in Namen von Hive-Dateien, -Tabellen und -Feldern.
  • Verwenden Sie das Eigenschaftenraster zum Erstellen der HDFS-Verbindung
  • Erstellen einer HDFS-Verbindung
    • Wenn Ihr Cluster gesichert ist, d. h. HA oder SSL aktiviert ist, stellen Sie Folgendes sicher: Der Wert der property = fs.defaultFS lautet swebhdfs://<Name des Namensdienstes>, wobei swebhdfs für gesichertes webhdfs steht.
    • Wenn der Cluster nicht gesichert ist, können Sie webhdfs verwenden. Darüber hinaus muss der Namensdienst bereitgestellt werden, da er für andere Eigenschaften verwendet wird.
  • Diese Eingabe muss in der Datei Wrapper.conf erfolgen: wrapper.java.additional.7=-Djavax.net.ssl.trustStore=<Pfad der Truststore-Datei>/<Name der Truststore-Datei>