Cassandra cqlsh - как показать микросекунды/миллисекунды для столбцов временной отметки?

Я вставляю в таблицу Cassandra с столбцами timestamp. Данные, которые я имею, имеют микросекундную точность, поэтому строка данных времени выглядит так:

2015-02-16T18: 00: 03,234 + 00: 00

Однако в cqlsh, когда я запускаю запрос выбора, данные микросекунды не отображаются, я могу видеть только время до второй точности. Данные 234 микросекунд не отображаются.

У меня есть два вопроса:

1) Кассандра захватывает микросекунды с типом данных временной метки? Думаю, да?

2) Как я могу видеть, что с помощью cqlsh для проверки?

Определение таблицы:

create table data (
  datetime timestamp,
  id text,
  type text,
  data text,
  primary key (id, type, datetime)
) 
with compaction = {'class' : 'DateTieredCompactionStrategy'};

Вставить запрос, запущенный с помощью Java PreparedStatment:

insert into data (datetime, id, type, data) values(?, ?, ?, ?);

Выбор запроса был просто:

select * from data;

Ответы

Ответ 1

Чтобы ответить на ваши вопросы, я немного поработал над этим.

  • Кассандра фиксирует микросекунды с типом данных временной отметки?

Микросекунды нет, миллисекунды да. Если я создам вашу таблицу, вставьте строку и попробуйте запросить ее с усеченным временем, она не работает:

[email protected]:stackoverflow> INSERT INTO data (datetime, id, type, data) 
VALUES ('2015-02-16T18:00:03.234+00:00','B26354','Blade Runner','Deckard- Filed and monitored.');
[email protected]:stackoverflow> SELECT * FROM data 
WHERE id='B26354' AND type='Blade Runner' AND datetime='2015-02-16 12:00:03-0600';

 id | type | datetime | data
----+------+----------+------

(0 rows)

Но когда я запрашиваю те же значения id и type при задании миллисекунд:

[email protected]:stackoverflow> SELECT * FROM data 
WHERE id='B26354' AND type='Blade Runner' AND datetime='2015-02-16 12:00:03.234-0600';

 id     | type         | datetime                 | data
--------+--------------+--------------------------+-------------------------------
 B26354 | Blade Runner | 2015-02-16 12:00:03-0600 | Deckard- Filed and monitored.

(1 rows)

Итак, миллисекунды определенно существуют. Для этой проблемы был создан билет JIRA (CASSANDRA-5870), но он был разрешен как "Не исправить".

  1. Как я могу видеть, что с помощью cqlsh для проверки?

Один из возможных способов убедиться в том, что миллисекунды действительно существуют, заключается в том, чтобы вставить timestampAsBlob() внутри blobAsBigint(), например:

[email protected]:stackoverflow> SELECT id, type, blobAsBigint(timestampAsBlob(datetime)), 
data FROM data;

 id     | type         | blobAsBigint(timestampAsBlob(datetime)) | data
--------+--------------+-----------------------------------------+-------------------------------
 B26354 | Blade Runner |                           1424109603234 | Deckard- Filed and monitored.

(1 rows)

Хотя это и не оптимально, здесь вы можете четко видеть миллисекунду значение "234" на самом конце. Это становится еще более очевидным, если я добавляю строку для той же метки времени, но без миллисекунд:

[email protected]:stackoverflow> INSERT INTO data (id, type, datetime, data)
VALUES ('B25881','Blade Runner','2015-02-16T18:00:03+00:00','Holden- Fine as long as nobody unplugs him.');
[email protected]:stackoverflow> SELECT id, type, blobAsBigint(timestampAsBlob(datetime)), 
                 ...     data FROM data;

 id     | type         | blobAsBigint(timestampAsBlob(datetime)) | data
--------+--------------+-----------------------------------------+---------------------------------------------
 B25881 | Blade Runner |                           1424109603000 | Holden- Fine as long as nobody unplugs him.
 B26354 | Blade Runner |                           1424109603234 |               Deckard- Filed and monitored.

(2 rows)

Ответ 2

Вы можете настроить формат вывода объектов datetime в файле .cassandra/cqlshrc, используя синтаксис python 'strftime'.

К сожалению, директива %f для микросекунд (по-видимому, не существует директивы для миллисекунд) не работает для более старых версий python, что означает, что у вас есть вернуться к решению blobAsBigint(timestampAsBlob(date)).

Ответ 3

Я думаю, что "microseconds" (например, 03.234567) означает "миллисекунды" (например, (03.234).

Проблема здесь была ошибкой cqlsh, которая не поддерживала дробные секунды при работе с отметками времени.

Итак, хотя ваше миллисекундное значение было сохранено в реальном уровне устойчивости (cassandra), оболочка (cqlsh) не смогла отобразить их.

Это было правдой, даже если вы изменили time_format в .cqlshrc, чтобы отобразить дробные секунды с помощью директивы %f (например, %Y-%m-%d %H:%M:%S.%f%z). В этой конфигурации cqlsh будет отображать 3.000000 для нашего значения 3.234, поскольку проблема заключалась в том, как cqlsh загружал объекты datetime без загрузки частичных секунд.

Что все сказано, эта проблема была исправлена ​​в CASSANDRA-10428 и выпущена в Кассандра 3.4.

Ответ 4

Невозможно показать микросекунды (1 миллионную долю секунды), используя временную метку типа данных Cassandra, потому что наибольшая точность, доступная для этого типа данных, составляет миллисекунды (1 тысячная часть секунды).

http://docs.datastax.com/en/cql/3.1/cql/cql_reference/timestamp_type_r.html

Значения типа timestamp кодируются как 64-разрядные целые числа со знаком представляющий собой количество миллисекунд с момента стандартного базового времени известный как эпоха