Tôi đã thử nhập một bảng vào HDFS bằng lệnh này. Cuối cùng, nó cho biết công việc nhập khẩu không thành công. Tôi đã thấy mọi người đề cập đến việc định cấu hình mappred-site.xml. Cấu hình đã được thực hiện chính xác nhưng tôi vẫn gặp lỗi này. Tôi tìm thấy tập tin có tên "bảng của tôi" trong HDFS nhưng không có dữ liệu.
nhập sqoop --connect jdbc:mysql://localhost:3306/testDb --username Amel --password Amel@-1998 --table myTable;
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: Tệp bản địa hóa:/usr/local/hadoop/sqoop/sqoop-1.4.7.jar dưới dạng tệp:/app/hadoop/tmp/mapred/local/1625928112591/ sqoop-1.4.7.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: Tạo liên kết tượng trưng: /app/hadoop/tmp/mapred/local/1625928112592/jackson-core-asl-1.9.13.jar <- /home/amel/jackson -core-asl-1.9.13.jar
21/07/10 16:41:54 CẢNH BÁO fs.FileUtil: Lệnh 'ln -s /app/hadoop/tmp/mapred/local/1625928112592/jackson-core-asl-1.9.13.jar /home/amel/jackson -core-asl-1.9.13.jar' không thành công 1 với: ln: không thể tạo liên kết tượng trưng '/home/amel/jackson-core-asl-1.9.13.jar': Quyền bị từ chối
21/07/10 16:41:54 WARN mapred.LocalDistributedCacheManager: Không thể tạo liên kết tượng trưng: /app/hadoop/tmp/mapred/local/1625928112592/jackson-core-asl-1.9.13.jar <- /home/amel /jackson-core-asl-1.9.13.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: Tệp được bản địa hóa:/usr/local/hadoop/sqoop/lib/jackson-core-asl-1.9.13.jar dưới dạng tệp:/app/hadoop/tmp/ mapred/local/1625928112592/jackson-core-asl-1.9.13.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112558/commons-lang3-3.4.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112559/mysql-connector-java-8.0.25.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112560/opencsv-2.3.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112561/slf4j-api-1.6.1.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112562/snappy-java-1.1.1.6.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112563/avro-mapred-1.8.1-hadoop2.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112564/xz-1.5.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112565/parquet-format-2.2.0-rc1.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112566/kite-data-core-1.1.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112567/commons-io-1.4.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112568/ant-contrib-1.0b3.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112569/jackson-annotations-2.3.1.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112570/paranamer-2.7.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112571/commons-compress-1.8.1.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112572/kite-hadoop-compatibility-1.1.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112573/commons-codec-1.4.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112574/kite-data-mapreduce-1.1.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112575/ant-eclipse-1.0-jvm1.2.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112576/parquet-jackson-1.6.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112577/commons-log-1.1.1.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112578/avro-1.8.1.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112579/parquet-encoding-1.6.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112580/parquet-hadoop-1.6.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112581/commons-jexl-2.1.1.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112582/jackson-core-2.3.1.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112583/kite-data-hive-1.1.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112584/parquet-common-1.6.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112585/parquet-avro-1.6.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112586/jackson-mapper-asl-1.9.13.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112587/parquet-column-1.6.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112588/parquet-generator-1.6.0.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112589/jackson-databind-2.3.1.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112590/hsqldb-1.8.0.10.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: tệp:/app/hadoop/tmp/mapred/local/1625928112591/sqoop-1.4.7.jar
21/07/10 16:41:54 THÔNG TIN mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112592/jackson-core-asl-1.9.13.jar
21/07/10 16:41:54 THÔNG TIN mapreduce.Job: Url để theo dõi công việc: http://localhost:8080/
21/07/10 16:41:54 INFO mapreduce.Job: Đang chạy job: job_local1527603516_0001
21/07/10 16:41:54 THÔNG TIN mapred.LocalJobRunner: OutputCommitter được đặt trong cấu hình null
21/07/10 16:41:54 INFO output.FileOutputCommitter: Phiên bản thuật toán đầu ra tệp là phiên bản 1
21/07/10 16:41:54 INFO output.FileOutputCommitter: FileOutputCommitter bỏ qua dọn dẹp _thư mục tạm thời trong thư mục đầu ra:false, bỏ qua lỗi dọn dẹp: false
21/07/10 16:41:54 THÔNG TIN mapred.LocalJobRunner: OutputCommitter là org.apache.hadoop.mapreduce.lib.output.FileOutputCommitter
21/07/10 16:41:54 THÔNG TIN mapred.LocalJobRunner: Chờ tác vụ bản đồ
21/07/10 16:41:54 THÔNG TIN mapred.LocalJobRunner: Bắt đầu tác vụ: try_local1527603516_0001_m_000000_0
21/07/10 16:41:54 INFO output.FileOutputCommitter: Phiên bản thuật toán đầu ra tệp là phiên bản 1
21/07/10 16:41:54 INFO output.FileOutputCommitter: FileOutputCommitter bỏ qua dọn dẹp _thư mục tạm thời trong thư mục đầu ra:false, bỏ qua lỗi dọn dẹp: false
21/07/10 16:41:55 THÔNG TIN mapred.Task: Sử dụng ResourceCalculatorProcessTree : [ ]
21/07/10 16:41:55 THÔNG TIN db.DBInputFormat: Sử dụng cách ly giao dịch đã cam kết đọc
21/07/10 16:41:55 THÔNG TIN mapred.MapTask: Đang xử lý tách: 1=1 AND 1=1
21/07/10 16:41:55 THÔNG TIN mapred.LocalJobRunner: trình thực thi tác vụ bản đồ hoàn tất.
21/07/10 16:41:55 WARN mapred.LocalJobRunner: job_local1527603516_0001
java.lang.Exception: java.lang.RuntimeException: java.lang.ClassNotFoundException: Không tìm thấy lớp myTable
tại org.apache.hadoop.mapred.LocalJobRunner$Job.runTasks(LocalJobRunner.java:489)
tại org.apache.hadoop.mapred.LocalJobRunner$Job.run(LocalJobRunner.java:549)
Gây ra bởi: java.lang.RuntimeException: java.lang.ClassNotFoundException: Không tìm thấy lớp myTable
tại org.apache.hadoop.conf.Configuration.getClass(Configuration.java:2369)
tại org.apache.sqoop.mapreduce.db.DBConfiguration.getInputClass(DBConfiguration.java:403)
tại org.apache.sqoop.mapreduce.db.DataDrivenDBInputFormat.createDBRecordReader(DataDrivenDBInputFormat.java:270)
tại org.apache.sqoop.mapreduce.db.DBInputFormat.createRecordReader(DBInputFormat.java:266)
tại org.apache.hadoop.mapred.MapTask$NewTrackingRecordReader.<init>(MapTask.java:515)
tại org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:758)
tại org.apache.hadoop.mapred.MapTask.run(MapTask.java:341)
tại org.apache.hadoop.mapred.LocalJobRunner$Job$MapTaskRunnable.run(LocalJobRunner.java:270)
tại java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)
tại java.util.concurrent.FutureTask.run(FutureTask.java:266)
tại java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)
tại java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)
tại java.lang.Thread.run(Thread.java:748)
Gây ra bởi: java.lang.ClassNotFoundException: Không tìm thấy lớp myTable
tại org.apache.hadoop.conf.Configuration.getClassByName(Configuration.java:2273)
tại org.apache.hadoop.conf.Configuration.getClass(Configuration.java:2367)
... 12 nữa
21/07/10 16:41:55 THÔNG TIN mapreduce.Job: Công việc job_local1527603516_0001 chạy ở chế độ uber : false
21/07/10 16:41:55 THÔNG TIN mapreduce.Job: map 0% reduce 0%
21/07/10 16:41:55 THÔNG TIN mapreduce.Job: Công việc job_local1527603516_0001 không thành công với trạng thái FAILED do: NA
21/07/10 16:41:55 THÔNG TIN mapreduce.Job: Bộ đếm: 0
21/07/10 16:41:55 CẢNH BÁO mapreduce.Counters: Nhóm FileSystemCounters không được dùng nữa. Thay vào đó, hãy sử dụng org.Apache.hadoop.mapreduce.FileSystemCounter
21/07/10 16:41:55 THÔNG TIN mapreduce.ImportJobBase: Đã truyền 0 byte trong 4,3351 giây (0 byte/giây)
21/07/10 16:41:55 CẢNH BÁO mapreduce.Counters: Nhóm org.apache.hadoop.mapred.Task$Counter không được dùng nữa. Thay vào đó, hãy sử dụng org.Apache.hadoop.mapreduce.TaskCounter
21/07/10 16:41:55 THÔNG TIN mapreduce.ImportJobBase: Đã truy xuất 0 bản ghi.
21/07/10 16:41:55 LỖI tool.ImportTool: Nhập không thành công: Công việc nhập không thành công!