Самый эффективный способ расчета расстояния хамминга в рубине?
В рубине наиболее эффективный способ вычисления разности бит между двумя целыми без знака (например, расстояние от помех)?
Например, у меня есть целое число a = 2323409845 и b = 1782647144.
Их двоичные представления:
a = 10001010011111000110101110110101
b = 01101010010000010000100101101000
Разность бит между a и b равна 17..
Я могу сделать для них логический XOR, но это даст мне другое целое число!= 17, тогда мне придется перебирать бинарное представление результата и подсчитывать число из 1s.
Каков наиболее эффективный способ вычисления разности бит?
Теперь, меняется ли ответ для вычисления разности бит последовательностей многих ints? Например. учитывая 2 последовательности целых чисел без знака:
x = {2323409845,641760420,509499086....}
y = {uint,uint,uint...}
Каков наиболее эффективный способ вычисления разности бит между двумя последовательностями?
Проводите ли вы повторение последовательности, или есть более быстрый способ вычисления разницы по всей последовательности сразу?
Ответы
Ответ 1
Вы можете использовать оптимизированные функции String в Ruby, чтобы выполнять подсчет бит вместо чистой арифметики. Оказывается, это примерно в 6 раз быстрее с быстрым бенчмаркингом.
def h2(a, b)
(a^b).to_s(2).count("1")
end
h1 - это нормальный способ вычисления, а h2 преобразует xor в строку и подсчитывает число "1" s
Benchmark:
ruby-1.9.2-p180:001:0>> def h1(a, b)
ruby-1.9.2-p180:002:1*> ret = 0
ruby-1.9.2-p180:003:1*> xor = a ^ b
ruby-1.9.2-p180:004:1*> until xor == 0
ruby-1.9.2-p180:005:2*> ret += 1
ruby-1.9.2-p180:006:2*> xor &= xor - 1
ruby-1.9.2-p180:007:2*> end
ruby-1.9.2-p180:008:1*> ret
ruby-1.9.2-p180:009:1*> end
# => nil
ruby-1.9.2-p180:010:0>> def h2(a, b)
ruby-1.9.2-p180:011:1*> (a^b).to_s(2).count("1")
ruby-1.9.2-p180:012:1*> end
# => nil
ruby-1.9.2-p180:013:0>> h1(2323409845, 1782647144)
# => 17
ruby-1.9.2-p180:014:0>> h2(2323409845, 1782647144)
# => 17
ruby-1.9.2-p180:015:0>> quickbench(10**5) { h1(2323409845, 1782647144) }
Rehearsal ------------------------------------
2.060000 0.000000 2.060000 ( 1.944690)
--------------------------- total: 2.060000sec
user system total real
1.990000 0.000000 1.990000 ( 1.958056)
# => nil
ruby-1.9.2-p180:016:0>> quickbench(10**5) { h2(2323409845, 1782647144) }
Rehearsal ------------------------------------
0.340000 0.000000 0.340000 ( 0.333673)
--------------------------- total: 0.340000sec
user system total real
0.320000 0.000000 0.320000 ( 0.326854)
# => nil
ruby-1.9.2-p180:017:0>>
Ответ 2
В предположении, что mu слишком коротка, я написал простое расширение C для использования __builtin_popcount, а с помощью теста проверено, что оно по крайней мере на 3 раза быстрее, чем рубиновые оптимизированные строковые функции.
Я рассмотрел следующие два учебника:
В моей программе:
require './FastPopcount/fastpopcount.so'
include FastPopcount
def hamming(a,b)
popcount(a^b)
end
Затем в директории, содержащей мою программу, я создаю папку "PopCount" со следующими файлами.
extconf.rb:
# Loads mkmf which is used to make makefiles for Ruby extensions
require 'mkmf'
# Give it a name
extension_name = 'fastpopcount'
# The destination
dir_config(extension_name)
# Do the work
create_makefile(extension_name)
popcount.c:
// Include the Ruby headers and goodies
#include "ruby.h"
// Defining a space for information and references about the module to be stored internally
VALUE FastPopcount = Qnil;
// Prototype for the initialization method - Ruby calls this, not you
void Init_fastpopcount();
// Prototype for our method 'popcount' - methods are prefixed by 'method_' here
VALUE method_popcount(int argc, VALUE *argv, VALUE self);
// The initialization method for this module
void Init_fastpopcount() {
FastPopcount = rb_define_module("FastPopcount");
rb_define_method(FastPopcount, "popcount", method_popcount, 1);
}
// Our 'popcount' method.. it uses the builtin popcount
VALUE method_popcount(int argc, VALUE *argv, VALUE self) {
return INT2NUM(__builtin_popcount(NUM2UINT(argv)));
}
Затем в каталоге popcount запустите:
ruby extconf.rb
сделать
Затем запустите программу, и там у вас есть... самый быстрый способ сделать расстояние hamming в рубине.
Ответ 3
Алгоритм Вегнера:
def hamm_dist(a, b)
dist = 0
val = a ^ b
while not val.zero?
dist += 1
val &= val - 1
end
dist
end
p hamm_dist(2323409845, 1782647144) # => 17
Ответ 4
Если кто-то намеревается следовать пути с помощью c, рекомендуется добавить флаг компилятора -msse4.2
в ваш make файл. Это позволяет компилятору генерировать аппаратные команды popcnt
вместо использования таблицы для генерации popcount. В моей системе это было примерно в 2,5 раза быстрее.