Score:0

งานนำเข้า sqop ล้มเหลว

ธง pw

ฉันได้ลองนำเข้าตารางไปยัง HDFS โดยใช้คำสั่งนี้ ในตอนท้ายแจ้งว่างานนำเข้าล้มเหลว ฉันเห็นคนกล่าวถึงการกำหนดค่า mappred-site.xml การกำหนดค่าทำถูกต้องแล้ว แต่ฉันยังมีข้อผิดพลาดนี้อยู่ ฉันพบไฟล์ชื่อ "ตารางของฉัน" ใน HDFS แต่ไม่มีข้อมูล

   sqoop import --connect jdbc:mysql://localhost:3306/testDb --username Amel --password Amel@-1998 --table myTable;
    
    
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์ที่แปลเป็นภาษาท้องถิ่น:/usr/local/hadoop/sqoop/sqoop-1.4.7.jar เป็นไฟล์:/app/hadoop/tmp/mapred/local/1625928112591/ sqoop-1.4.7.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: การสร้าง symlink: /app/hadoop/tmp/mapred/local/1625928112592/jackson-core-asl-1.9.13.jar <- /home/amel/jackson -core-asl-1.9.13.jar
    21/07/10 16:41:54 WARN fs.FileUtil: Command 'ln -s /app/hadoop/tmp/mapred/local/1625928112592/jackson-core-asl-1.9.13.jar /home/amel/jackson -core-asl-1.9.13.jar' ล้มเหลว 1 ด้วย: ln: ล้มเหลวในการสร้างลิงก์สัญลักษณ์ '/home/amel/jackson-core-asl-1.9.13.jar': ปฏิเสธการอนุญาต
    
    21/07/10 16:41:54 WARN mapred.LocalDistributedCacheManager: ไม่สามารถสร้าง symlink: /app/hadoop/tmp/mapred/local/1625928112592/jackson-core-asl-1.9.13.jar <- /home/amel /jackson-core-asl-1.9.13.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์ที่แปลเป็นภาษาท้องถิ่น: /usr/local/hadoop/sqoop/lib/jackson-core-asl-1.9.13.jar เป็นไฟล์: /app/hadoop/tmp/ mapred/local/1625928112592/jackson-core-asl-1.9.13.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112558/commons-lang3-3.4.jar
    21/07/10 16:41:54 INFO mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112559/mysql-connector-java-8.0.25.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112560/opencsv-2.3.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112561/slf4j-api-1.6.1.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: file:/app/hadoop/tmp/mapred/local/1625928112562/snappy-java-1.1.1.6.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112563/avro-mapred-1.8.1-hadoop2.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112564/xz-1.5.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112565/parquet-format-2.2.0-rc1.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112566/kite-data-core-1.1.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112567/commons-io-1.4.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112568/ant-contrib-1.0b3.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112569/jackson-annotations-2.3.1.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112570/paranamer-2.7.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112571/commons-compress-1.8.1.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112572/kite-hadoop-compatibility-1.1.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112573/commons-codec-1.4.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112574/kite-data-mapreduce-1.1.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112575/ant-eclipse-1.0-jvm1.2.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112576/parquet-jackson-1.6.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์: /app/hadoop/tmp/mapred/local/1625928112577/commons-logging-1.1.1.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112578/avro-1.8.1.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112579/parquet-encoding-1.6.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112580/parquet-hadoop-1.6.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112581/commons-jexl-2.1.1.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112582/jackson-core-2.3.1.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112583/kite-data-hive-1.1.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112584/parquet-common-1.6.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112585/parquet-avro-1.6.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112586/jackson-mapper-asl-1.9.13.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112587/parquet-column-1.6.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112588/parquet-generator-1.6.0.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112589/jackson-databind-2.3.1.jar
    10/21/07 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112590/hsqldb-1.8.0.10.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112591/sqoop-1.4.7.jar
    21/07/10 16:41:54 ข้อมูล mapred.LocalDistributedCacheManager: ไฟล์:/app/hadoop/tmp/mapred/local/1625928112592/jackson-core-asl-1.9.13.jar
    21/07/10 16:41:54 ข้อมูล mapreduce.Job: URL เพื่อติดตามงาน: http://localhost:8080/
    21/07/10 16:41:54 INFO mapreduce.Job: กำลังรันงาน: job_local1527603516_0001
    21/07/10 16:41:54 INFO mapred.LocalJobRunner: OutputCommitter ตั้งค่าเป็น config null
    21/07/10 16:41:54 เอาต์พุต INFO FileOutputCommitter: เวอร์ชันอัลกอริทึมของเอาต์พุตไฟล์คือ 1
    21/07/10 16:41:54 เอาต์พุต INFO FileOutputCommitter: FileOutputCommitter ข้ามโฟลเดอร์ล้างข้อมูล _temporary ภายใต้ไดเรกทอรีเอาต์พุต: เท็จ ละเว้นความล้มเหลวในการล้างข้อมูล: เท็จ
    21/07/10 16:41:54 INFO mapred.LocalJobRunner: OutputCommitter คือ org.apache.hadoop.mapreduce.lib.output.FileOutputCommitter
    21/07/10 16:41:54 INFO mapred.LocalJobRunner: กำลังรองานแผนที่
    21/07/10 16:41:54 INFO mapred.LocalJobRunner: การเริ่มต้นงาน: try_local1527603516_0001_m_000000_0
    21/07/10 16:41:54 เอาต์พุต INFO FileOutputCommitter: เวอร์ชันอัลกอริทึมของเอาต์พุตไฟล์คือ 1
    21/07/10 16:41:54 เอาต์พุต INFO FileOutputCommitter: FileOutputCommitter ข้ามโฟลเดอร์ล้างข้อมูล _temporary ภายใต้ไดเรกทอรีเอาต์พุต: เท็จ ละเว้นความล้มเหลวในการล้างข้อมูล: เท็จ
    21/07/10 16:41:55 INFO ที่แมป งาน: การใช้ ResourceCalculatorProcessTree : [ ]
    21/07/10 16:41:55 INFO db.DBInputFormat: การใช้การแยกธุรกรรมที่คอมมิตการอ่าน
    21/07/10 16:41:55 INFO mapred.MapTask: การแยกการประมวลผล: 1=1 และ 1=1
    21/07/10 16:41:55 ข้อมูล mapred.LocalJobRunner: ตัวดำเนินการงานแผนที่เสร็จสมบูรณ์
    21/07/10 16:41:55 WARN mapred.LocalJobRunner: job_local1527603516_0001
    java.lang.Exception: java.lang.RuntimeException: java.lang.ClassNotFoundException: ไม่พบคลาส myTable
        ที่ org.apache.hadoop.mapred.LocalJobRunner$Job.runTasks(LocalJobRunner.java:489)
        ที่ org.apache.hadoop.mapred.LocalJobRunner$Job.run(LocalJobRunner.java:549)
    เกิดจาก: java.lang.RuntimeException: java.lang.ClassNotFoundException: ไม่พบคลาส myTable
        ที่ org.apache.hadoop.conf.Configuration.getClass(Configuration.java:2369)
        ที่ org.apache.sqoop.mapreduce.db.DBConfiguration.getInputClass(DBConfiguration.java:403)
        ที่ org.apache.sqoop.mapreduce.db.DataDrivenDBInputFormat.createDBRecordReader (DataDrivenDBInputFormat.java:270)
        ที่ org.apache.sqoop.mapreduce.db.DBInputFormat.createRecordReader(DBInputFormat.java:266)
        ที่ org.apache.hadoop.mapred.MapTask$NewTrackingRecordReader<init>(MapTask.java:515)
        ที่ org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:758)
        ที่ org.apache.hadoop.mapred.MapTask.run(MapTask.java:341)
        ที่ org.apache.hadoop.mapred.LocalJobRunner$Job$MapTaskRunnable.run(LocalJobRunner.java:270)
        ที่ java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)
        ที่ java.util.concurrent.FutureTask.run(FutureTask.java:266)
        ที่ java.util.concurrent.ThreadPoolExecutor.runWorker (ThreadPoolExecutor.java:1149)
        ที่ java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)
        ที่ java.lang.Thread.run(Thread.java:748)
    เกิดจาก: java.lang.ClassNotFoundException: ไม่พบคลาส myTable
        ที่ org.apache.hadoop.conf.Configuration.getClassByName(Configuration.java:2273)
        ที่ org.apache.hadoop.conf.Configuration.getClass(Configuration.java:2367)
        ... 12 เพิ่มเติม
    21/07/10 16:41:55 INFO mapreduce.Job: Job job_local1527603516_0001 ทำงานในโหมด uber: false
    21/07/10 16:41:55 INFO mapreduce.Job: แผนที่ 0% ลด 0%
    21/07/10 16:41:55 INFO mapreduce.Job: Job job_local1527603516_0001 ล้มเหลวด้วยสถานะ FAILED เนื่องจาก: NA
    21/07/10 16:41:55 ข้อมูล mapreduce งาน: เคาน์เตอร์: 0
    21/07/10 16:41:55 เตือน mapreduce.Counters: Group FileSystemCounters เลิกใช้แล้ว ใช้ org.apache.hadoop.mapreduce.FileSystemCounter แทน
    21/07/10 16:41:55 ข้อมูล mapreduce.ImportJobBase: ถ่ายโอน 0 ไบต์ใน 4.3351 วินาที (0 ไบต์/วินาที)
    21/07/10 16:41:55 WARN mapreduce.Counters: กลุ่ม org.apache.hadoop.mapred.Task$Counter เลิกใช้แล้ว ใช้ org.apache.hadoop.mapreduce.TaskCounter แทน
    21/07/10 16:41:55 ข้อมูล mapreduce.ImportJobBase: ดึงข้อมูล 0 รายการ
    21/07/10 16:41:55 เครื่องมือเกิดข้อผิดพลาดเครื่องมือนำเข้า: การนำเข้าล้มเหลว: งานนำเข้าล้มเหลว!

โพสต์คำตอบ

คนส่วนใหญ่ไม่เข้าใจว่าการถามคำถามมากมายจะปลดล็อกการเรียนรู้และปรับปรุงความสัมพันธ์ระหว่างบุคคล ตัวอย่างเช่น ในการศึกษาของ Alison แม้ว่าผู้คนจะจำได้อย่างแม่นยำว่ามีคำถามกี่ข้อที่ถูกถามในการสนทนา แต่พวกเขาไม่เข้าใจความเชื่อมโยงระหว่างคำถามและความชอบ จากการศึกษาทั้ง 4 เรื่องที่ผู้เข้าร่วมมีส่วนร่วมในการสนทนาด้วยตนเองหรืออ่านบันทึกการสนทนาของผู้อื่น ผู้คนมักไม่ตระหนักว่าการถามคำถามจะมีอิทธิพลหรือมีอิทธิพลต่อระดับมิตรภาพระหว่างผู้สนทนา