Bild für Projekt hochgeladen: 'HBase'
  1. HBase
  2. HBASE-22448

Scan is slow for Multiple Column prefixes

Wähler anzeigenVorgang beobachtenBeobachter verwaltenUnteraufgabe erstellenVerknüpfungKlonenVerfasser des Kommenta...Zeichenfolge im Kommen...Update Comment VisibilityKommentare löschen
    XMLWordAusdruckbarJSON

    Details

    • Typ: Bug
    • Status: Erledigt
    • Priorität: Kritisch
    • Lösung: Wird nicht korrigiert
    • betrifft Version(en): 1.4.8, 1.4.9
    • Lösungsversion(en): Keine
    • Komponente(n): Scanners
    • Stichwörter:

      Beschreibung

      While scanning a row (around 10 lakhs columns) with 100 column prefixes, it takes around 4 seconds in hbase-1.2.5 and when the same query is executed in hbase-1.4.9 it takes around 50 seconds.

      Is there any way to optimise this?

       

      P.S:

      We have applied the patch provided in HBASE-21620 and  HBASE-21734 . Attached qualifiers.txt file which contains the column keys. Use the HBaseFileImport.java file provided to populate in your table and use scanquery.txt to query.

        Anhänge

        1. 0001-benchmark-UT.patch
          5 kB
          Zheng Hu
        2. filter-list-with-or-internal-2.png
          77 kB
          Zheng Hu
        3. HBaseFileImport.java
          2 kB
          Karthick
        4. org.apache.hadoop.hbase.filter.TestSlowColumnPrefix-output.zip
          915 kB
          ramkrishna.s.vasudevan
        5. qualifiers.txt
          26.29 MB
          Karthick
        6. scanquery.txt
          3 kB
          Karthick

          Aktivität

          $i18n.getText('security.level.explanation', $currentSelection) Anzeigbar durch alle Benutzer
          Abbrechen

            Personen

            • Bearbeiter:
              openinx Zheng Hu
              Autor:
              KarthickRam Karthick

              Daten

              • Erstellt:
                Aktualisiert:
                Erledigt:

                Vorgangsbereitstellung