Uploaded image for project: 'Hadoop Common'
  1. Hadoop Common
  2. HADOOP-1623

dfs -cp infinite loop creating sub-directories

VotersWatch issueWatchersCreate sub-taskLinkCloneUpdate Comment AuthorReplace String in CommentUpdate Comment VisibilityDelete Comments
    XMLWordPrintableJSON

Details

    • Bug
    • Status: Closed
    • Blocker
    • Resolution: Fixed
    • 0.12.3, 0.13.0
    • 0.14.0
    • None
    • None

    Description

      % hadoop dfs -ls data
      Found 2 items
      /user/knoguchi/data/aaaa <r 1> 14949
      /user/knoguchi/data/bbbb <r 1> 14949

      % hadoop dfs -cp data data

      [hangs]

      CTRL-\

      Exception in thread "main" java.lang.NullPointerException
      at java.io.DeleteOnExitHook.add(DeleteOnExitHook.java:33)
      at java.io.File.deleteOnExit(File.java:939)
      at org.apache.hadoop.dfs.DFSClient$DFSOutputStream.newBackupFile(DFSClient.java:1061)
      at org.apache.hadoop.dfs.DFSClient$DFSOutputStream.<init>(DFSClient.java:1025)
      at org.apache.hadoop.dfs.DFSClient.create(DFSClient.java:277)
      at org.apache.hadoop.dfs.DistributedFileSystem$RawDistributedFileSystem.create(DistributedFileSystem.java:143)
      at org.apache.hadoop.fs.FileSystem.create(FileSystem.java:360)
      at org.apache.hadoop.fs.ChecksumFileSystem$FSOutputSummer.<init>(ChecksumFileSystem.java:371)
      at org.apache.hadoop.fs.ChecksumFileSystem.create(ChecksumFileSystem.java:442)
      at org.apache.hadoop.fs.FileSystem.create(FileSystem.java:360)
      at org.apache.hadoop.fs.FileSystem.create(FileSystem.java:267)
      at org.apache.hadoop.fs.FileUtil.copy(FileUtil.java:107)
      at org.apache.hadoop.fs.FileUtil.copy(FileUtil.java:101)
      at org.apache.hadoop.fs.FileUtil.copy(FileUtil.java:101)
      at org.apache.hadoop.fs.FileUtil.copy(FileUtil.java:101)
      at org.apache.hadoop.fs.FileUtil.copy(FileUtil.java:101)
      ....

      % hadoop dfs -lsr data
      .
      .
      .
      /user/knoguchi/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/aaaa <r 1> 14949
      /user/knoguchi/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/bbbb <r 1> 14949
      /user/knoguchi/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data <dir>
      /user/knoguchi/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/data/aaaa <r 1> 14949
      .
      .
      .
      [continues]

      Attachments

        1. recursiveCp.patch
          3 kB
          Dhruba Borthakur

        Activity

          This comment will be Viewable by All Users Viewable by All Users
          Cancel

          People

            dhruba Dhruba Borthakur
            knoguchi Koji Noguchi
            Votes:
            0 Vote for this issue
            Watchers:
            0 Start watching this issue

            Dates

              Created:
              Updated:
              Resolved:

              Slack

                Issue deployment