PostgreSQL
 sql >> Cơ Sở Dữ Liệu >  >> RDS >> PostgreSQL

Apache Spark:Kết nối JDBC không hoạt động

Tôi đã gặp sự cố chính xác này với mysql / mariadb và nhận được manh mối LỚN từ câu hỏi này

Vì vậy, lệnh pyspark của bạn phải là:

pyspark --conf spark.executor.extraClassPath=<jdbc.jar> --driver-class-path <jdbc.jar> --jars <jdbc.jar> --master <master-URL>

Ngoài ra, hãy để ý các lỗi khi bắt đầu pyspark như "Cảnh báo:Local jar ... không tồn tại, đang bỏ qua." và "ERROR SparkContext:Jar not found at ...", những điều này có thể có nghĩa là bạn đã viết sai đường dẫn.



  1. Database
  2.   
  3. Mysql
  4.   
  5. Oracle
  6.   
  7. Sqlserver
  8.   
  9. PostgreSQL
  10.   
  11. Access
  12.   
  13. SQLite
  14.   
  15. MariaDB
  1. Làm thế nào để tạo một chuỗi phân vùng PostgreSQL?

  2. Xoay vòng trên nhiều cột bằng cách sử dụng Tablefunc

  3. sự khác biệt giữa localhost và postgres cho máy chủ trong docker

  4. Cách sử dụng array_agg () cho varchar []

  5. Cách hoạt động của Acosh () trong PostgreSQL