Programmierung duplicates

5

Zählen von Duplikaten in einer sortierten Reihenfolge mit Befehlszeilentools

Ich habe einen Befehl (cmd1), der eine Protokolldatei durchsucht, um eine Reihe von Zahlen herauszufiltern. Die Zahlen sind in zufälliger Reihenfolge, daher verwende ich sort -gr, um eine umgekehrt sortierte Liste von Zahlen zu erhalten. Diese sortierte Liste enthält möglicherweise Duplikate. Ich muss die Anzahl für jede eindeutige Nummer in …

82 bash command-line sorting count duplicates

6

Hält die C # Distinct () -Methode die ursprüngliche Reihenfolge der Sequenz aufrecht?

Ich möchte Duplikate aus der Liste entfernen, ohne die Reihenfolge der eindeutigen Elemente in der Liste zu ändern. Jon Skeet und andere haben vorgeschlagen, Folgendes zu verwenden list = list.Distinct().ToList(); Entfernen von Duplikaten aus einer Liste C # Entfernen Sie Duplikate aus einer Liste <T> in C # Ist garantiert, …

81 c# list duplicates

5

Herausfiltern doppelter / nicht eindeutiger Zeilen in data.table

Bearbeiten 2019: Diese Frage wurde vor Änderungen im data.tableNovember 2016 gestellt. Die akzeptierte Antwort unten finden Sie sowohl für die aktuelle als auch für die vorherige Methode. Ich habe eine data.tableTabelle mit ungefähr 2,5 Millionen Zeilen. Es gibt zwei Spalten. Ich möchte alle Zeilen entfernen, die in beiden Spalten dupliziert …

77 r duplicates data.table

7

Doppelte Datensätze basierend auf mehreren Spalten entfernen?

Ich verwende Heroku, um meine Ruby on Rails-Anwendung zu hosten, und aus dem einen oder anderen Grund habe ich möglicherweise doppelte Zeilen. Gibt es eine Möglichkeit, doppelte Datensätze basierend auf zwei oder mehr Kriterien zu löschen, aber nur einen Datensatz dieser doppelten Sammlung zu behalten? In meinem Anwendungsfall habe ich …

76 ruby-on-rails-3 activerecord duplicates destroy

2

Zu viel Datenvervielfältigung in Mongodb?

Ich bin neu in diesem ganzen NOSQL-Zeug und war kürzlich fasziniert von mongoDB. Ich erstelle eine neue Website von Grund auf neu und habe mich für MONGODB / NORM (für C #) als meine einzige Datenbank entschieden. Ich habe viel darüber gelesen, wie Sie Ihre Dokumentmodelldatenbank richtig gestalten können, und …

73 mongodb duplicates norm

19

Wie finde ich ein doppeltes Element in einem Array gemischter aufeinanderfolgender Ganzzahlen?

Ich bin kürzlich irgendwo auf eine Frage gestoßen: Angenommen, Sie haben ein Array mit 1001 Ganzzahlen. Die Ganzzahlen sind in zufälliger Reihenfolge, aber Sie wissen, dass jede der Ganzzahlen zwischen 1 und 1000 (einschließlich) liegt. Außerdem wird jede Nummer nur einmal im Array angezeigt, mit Ausnahme einer Nummer, die zweimal …

72 arrays algorithm duplicates

3

Suchen Sie mit PostgreSQL nach doppelten Zeilen

Wir haben eine Tabelle mit Fotos mit den folgenden Spalten: id, merchant_id, url Diese Tabelle enthält doppelte Werte für die Kombination merchant_id, url. Es ist also möglich, dass eine Zeile mehrmals angezeigt wird. 234 some_merchant http://www.some-image-url.com/abscde1213 235 some_merchant http://www.some-image-url.com/abscde1213 236 some_merchant http://www.some-image-url.com/abscde1213 Was ist der beste Weg, um diese Duplikate …

72 sql database ruby-on-rails-3 duplicates postgresql-9.2

15

PHP: Überprüfen Sie, ob ein Array Duplikate enthält

Ich bin sicher, dass dies eine äußerst offensichtliche Frage ist und dass es eine Funktion gibt, die genau dies tut, aber ich kann sie scheinbar nicht finden. In PHP möchte ich wissen, ob mein Array so effizient wie möglich Duplikate enthält. Ich möchte sie nicht wie bisher entfernen array_unique, und …

71 php arrays duplicates

9

MySQL entfernt Duplikate schnell aus der großen Datenbank

Ich habe große (> Mil-Zeilen) MySQL-Datenbank durch Duplikate durcheinander gebracht. Ich denke, es könnte 1/4 bis 1/2 der gesamten Datenbank sein, die mit ihnen gefüllt ist. Ich muss sie schnell loswerden (ich meine Abfrageausführungszeit). So sieht es aus: id (index) | text1 | text2 | Die Kombination aus text3 text1 …

70 sql mysql duplicates

11

Der doppelte Schlüsselwert von IntegrityError verletzt die eindeutige Einschränkung - django / postgres

Ich verfolge eine Frage, die ich zuvor gestellt habe und in der ich versucht habe, eine Konvertierung von einer doofen / schlecht geschriebenen MySQL-Abfrage zu Postgresql anzustreben. Ich glaube, das ist mir gelungen. Wie auch immer, ich verwende Daten, die manuell von einer MySQL-Datenbank in eine Postgres-Datenbank verschoben wurden. Ich …

70 django postgresql duplicates unique-constraint database-integrity

5

Erstellen einer neuen Spalte unter bestimmten Bedingungen basierend auf den vorherigen n Zeilen

Ich habe einen Datenrahmen wie folgt eingerichtet: df <- data.frame("id" = c(111,111,111,222,222,222,222,333,333,333,333), "Location" = c("A","B","A","A","C","B","A","B","A","A","A"), "Encounter" = c(1,2,3,1,2,3,4,1,2,3,4)) id Location Encounter 1 111 A 1 2 111 B 2 3 111 A 3 4 222 A 1 5 222 C 2 6 222 B 3 7 222 A 4 8 …

9 r dataframe dplyr duplicates

Als «duplicates» getaggte Fragen