Публикации по теме 'hbase'


Пример сканирования java hbase
Проблема: нужно выполнить сканирование таблицы и вывести список значений. Решение: Scan scan = new Scan(); ResultScanner scanner = someTable.getScanner(scan); for(Result row : scanner) { List<Cell> cells = row.listCells(); for(Cell c : cells) { byte columnFamily[] = CellUtil.cloneFamily(c); byte qualifier[] = CellUtil.cloneQualifier(c); byte value[] = CellUtil.cloneValue(c); System.out.println("columnFamily:" + Bytes.toString(columnFamily) +..

Вопросы по теме 'hbase'

Hadoop Hbase: распределение семейств столбцов по таблицам или нет
В документации Hbase ясно указано, что похожие столбцы следует группировать в семейства столбцов, поскольку физическое хранилище выполняется семейством столбцов. Но что значит поместить два семейства столбцов в одну таблицу, а не иметь отдельные...
6266 просмотров
schedule 17.04.2022

Является ли HBase стабильным и готовым к работе?
Для тех, кто развернул HBase в своих кластерах, считаете ли вы, что он достаточно стабилен для использования в производственной среде? С какими проблемами или проблемами вы сталкивались? Я вижу несколько компаний, которые используют HBase в...
2449 просмотров
schedule 12.08.2022

Агрегатор каналов с использованием hbase. Как разработать схему?
Я работаю над проектом, включающим мониторинг большого количества каналов RSS/Atom. Я хочу использовать hbase для хранения данных, и у меня есть некоторые проблемы с проектированием схемы. Для первой итерации я хочу иметь возможность генерировать...
1025 просмотров
schedule 13.06.2023

Любая масштабируемая база данных OLAP (масштаб веб-приложения)?
У меня есть приложение, которое требует аналитики для разных уровней агрегации, и это рабочая нагрузка OLAP. Я также хочу обновлять свою базу данных довольно часто. например, вот как выглядит мое обновление (схема выглядит так: время, пункт...
3645 просмотров
schedule 19.05.2023

Как вставлять данные в таблицы Hbase с помощью клиента PHP Stargate
Я играю с установкой кластера HBase и пытаюсь получить доступ к данным через интерфейс Stargate REST. Большинство функций только для чтения (т. е. перечисление таблиц, получение версии, метаданных и т. д.) работают хорошо. Однако у меня возникают...
3826 просмотров
schedule 25.01.2024

Знаете ли вы инструменты пакетной обработки журналов для hadoop (альтернативы zohmg)?
Поскольку проект zohmg кажется мертвым (нет новых коммитов с ноября 2009 г.), я хотел бы знать, использовал ли кто-либо из вас его (с успешными результатами). Или если вы знаете что-нибудь о будущем этого проекта. И если нет, то есть ли...
525 просмотров
schedule 07.04.2022

Проблема с импортом данных zohmg в hbase
Я использовал zohmg и успешно создал сопоставитель, таблицу в HBase и проверочно импортировал свои данные (используя параметр --local). Но у меня возникла проблема со вставкой данных после сопоставления в HBase, я получаю сообщение об ошибке:...
685 просмотров
schedule 23.12.2023

Получение информации из агрегированных данных блогов, как это сделать?
Я хотел бы знать, как получить данные из агрегированных журналов? Вот что у меня есть: - около 30 ГБ несжатых данных журнала ежедневно загружаются в HDFS (и скоро этот объем вырастет примерно до 100 ГБ) Это моя идея: - каждую ночь эти данные...
217 просмотров
schedule 12.05.2023

Масштабирование HBASE *вниз* вместо *вверх*
Я знаю, что вы можете запускать hbase в нераспределенном режиме. Из того, что я читал, неясно, практично ли использовать его в производстве для диапазона от одного узла через несколько до полноценного кластера. Альтернативой было бы абстрагироваться...
228 просмотров
schedule 07.06.2023

Исключение подключения HBase
Я пытаюсь запустить HBase в псевдораспределенном режиме. Но это не работает после того, как я установил hbase-site.xml. Каждый раз, когда я пытаюсь запустить команду внутри оболочки hbase, я получаю эту ошибку: ОШИБКА:...
11199 просмотров
schedule 19.01.2023

java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/MasterNotRunningException
Я создал собственный клиентский код HBase java, но мне очень трудно его скомпилировать и запустить. Я компилирую из командной строки, и я не смог найти никаких инструкций, как это сделать, или какие банки мне нужно иметь в моем пути к классам....
11596 просмотров
schedule 16.01.2023

Отсортированные результаты сканера hbase
Как получить «значения» семейства столбцов hbase в любом отсортированном порядке? как значение семейства столбцов ------------------ столбец:1 1 столбец:3 2 столбец:4 3 столбец:2 4
4119 просмотров
schedule 02.03.2023

Фильтры в HBASE
Как я могу эффективно использовать следующие фильтры в HBASE с помощью PHP? http://svn.apache.org/repos/asf/hbase/branches/0.90/src/main/java/org/apache/hadoop/hbase/filter/
660 просмотров
schedule 05.06.2022

HBase Error - присвоение -ROOT- сбоя
Я только что установил hadoop и hbase из cloudera (3), но когда я пытаюсь перейти на http://localhost:60010 Он просто сидит там и постоянно загружается. Я могу нормально добраться до сервера региона - http://localhost:60030 ... Глядя на журналы...
7833 просмотров
schedule 08.04.2022

Не сломается ли использование hadoop 20-append с hbase 90.3?
Пытаюсь установить hbase, но ходят слухи, что если я не использую хауп из ветки 20-append, то потеряю данные. Это tutorial говорит, что будет работать с 90.2, но не обсуждает 90.3. Есть ли более новая версия 20-append, которую мне следует...
176 просмотров
schedule 04.11.2022

HBase: как фильтровать по ключу, а не начинать с
с помощью PrefixFilter("word") можно отфильтровать все ключи, начинающиеся с "word". Я пытаюсь получить обратное, все ключи, которые не начинаются со слова. Это фильтр, который соответствует моему требованию? Если мне нужно будет создать фильтр...
1719 просмотров
schedule 29.06.2023

Hbase для файлового ввода-вывода. и способ подключения HDFS на удаленном клиенте
Пожалуйста, имейте в виду, что я не владею английским языком, прежде чем читать. Я новичок в NoSQL и теперь пытаюсь использовать HBase для хранения файлов. - Я буду хранить файлы в HBase как двоичные файлы. Мне не нужна никакая статистика....
489 просмотров
schedule 06.12.2022

Как хранить данные в HBase для эффективной выборки с помощью частичного сканирования ключа?
Мой ключ состоит из трех компонентов: число, тип, имя «Тип» имеет только два типа A и B, в то время как num может иметь больше значений, например. 0,1,2..,30 Мне нужно получить данные относительно числа и типа, т.е. получить все строки, в...
3477 просмотров
schedule 14.02.2023

Подключение и сохранение в HBase
Я просто попытался подключиться к hbase, который является частью cloudera-vm, с помощью java-клиента. (192.168.56.102 - это IP-адрес виртуальной машины) Я использую виртуальный ящик с настройкой сети только для хоста. Таким образом, я могу...
5866 просмотров

Требования / использование памяти для MongoDB, Riak и HyperTable (или HBase)
Я оценил большинство решений NoSQL, и мне кажется, что лучше всего использовать комбинацию MongoDB, Riak и HyperTable (или HBase). Каковы минимальные требования для комфортной работы этих баз данных? Скажем, если я разверну эти базы данных...
1607 просмотров
schedule 09.10.2022