Исключить последующие дублированные строки
Я хотел бы исключить все повторяющиеся строки. Однако это должно быть правдой, только когда они являются последующими строками. Выполняет типичный пример:
Мой вход df
:
df <- "NAME VALUE
Prb1 0.05
Prb2 0.05
Prb3 0.05
Prb4 0.06
Prb5 0.06
Prb6 0.01
Prb7 0.10
Prb8 0.05"
df <- read.table(text=df, header=T)
Ожидаемый outdf
:
outdf <- "NAME VALUE
Prb1 0.05
Prb4 0.06
Prb6 0.01
Prb7 0.10
Prb8 0.05"
outdf <- read.table(text=df, header=T)
Ответы
Ответ 1
rle()
- хорошая функция, которая идентифицирует прогоны одинаковых значений, но может быть как бы болью, чтобы вывести ее в полезную форму. Здесь относительно безболезненное заклинание, которое работает в вашем случае.
df[sequence(rle(df$VALUE)$lengths) == 1, ]
# NAME VALUE
# 1 Prb1 0.05
# 4 Prb4 0.06
# 6 Prb6 0.01
# 7 Prb7 0.10
# 8 Prb8 0.05
Ответ 2
Вероятно, есть много способов решить эту проблему, я бы попробовал комбинацию rleid/unique
из data.table
devel version
library(data.table) ## v >= 1.9.5
unique(setDT(df)[, indx := rleid(VALUE)], by = "indx")
# NAME VALUE indx
# 1: Prb1 0.05 1
# 2: Prb4 0.06 2
# 3: Prb6 0.01 3
# 4: Prb7 0.10 4
# 5: Prb8 0.05 5
Или из некоторых замечательных предложений от комментариев:
Используя только новую функцию shift
setDT(df)[VALUE != shift(VALUE, fill = TRUE)]
Или используя duplicated
в сочетании с rleid
setDT(df)[!duplicated(rleid(VALUE)), ]
Ответ 3
Как насчет этого:
> df[c(T, df[-nrow(df),-1] != df[-1,-1]), ]
NAME VALUE
1 Prb1 0.05
4 Prb4 0.06
6 Prb6 0.01
7 Prb7 0.10
8 Prb8 0.05
Здесь df[-nrow(df),-1] != df[-1,-1]
находит пары последовательных строк, которые содержат разные значения, а остальная часть кода извлекает их из фрейма данных.
Ответ 4
Я бы использовал решение, подобное @NPE '
df[c(TRUE,abs(diff(df$VALUE))>1e-6),]
Конечно, вы можете использовать любой другой уровень допуска (кроме 1e-6
).
Ответ 5
Я наткнулся на эту приятную функцию некоторое время назад, когда строки флагов сначала основаны на указанной переменной:
isFirst <- function(x,...) {
lengthX <- length(x)
if (lengthX == 0) return(logical(0))
retVal <- c(TRUE, x[-1]!=x[-lengthX])
for(arg in list(...)) {
stopifnot(lengthX == length(arg))
retVal <- retVal | c(TRUE, arg[-1]!=arg[-lengthX])
}
if (any(missing<-is.na(retVal))) # match rle: NA!=NA
retVal[missing] <- TRUE
retVal
}
Применяя его к вашим данным, вы получите:
> df$first <- isFirst(df$VALUE)
> df
NAME VALUE first
1 Prb1 0.05 TRUE
2 Prb2 0.05 FALSE
3 Prb3 0.05 FALSE
4 Prb4 0.06 TRUE
5 Prb5 0.06 FALSE
6 Prb6 0.01 TRUE
7 Prb7 0.10 TRUE
8 Prb8 0.05 TRUE
Затем вы можете сделать вывод по первому столбцу, чтобы получить ожидаемый результат.
Я нашел это очень полезным в прошлом, особенно исходя из фона SAS, где это было очень легко сделать.
Ответ 6
Уже есть много хороших ответов, вот dplyr
версия:
filter(df,VALUE!=lag(VALUE,default=df$VALUE[1]+1))