oc.at präsentiert: BenchMate

mat

Administrator
Legends never die

Registered: Aug 2003
Location: nö
Posts: 25420

15.06.2019 - 05:25

Der Moment der Wahrheit ist gekommen! Nach vier Jahren Research und davon fast einem Jahr Entwicklungszeit darf ich nun endlich eine Beta-Version meines bis dato ambitioniertesten Projekts vorstellen, BenchMate. BenchMate ist eine Software für Windows 7 aufwärts, die Sicherheit und Verlässlichkeit von Benchmarks gewährleisten soll. Zusätzlich wird der Workflow des Benchens an sich stark vereinfacht. Das Ziel von BenchMate ist: Client herunterladen, starten und sofort verifizierte Benchmark-Resultate erhalten, die anschließend zum Vergleichen auf HWBOT hochgeladen werden können.

Download: benchmate.org

» Beitrag lesen

Viper780

Moderator
Er ist tot, Jim!

Registered: Mar 2001
Location: Wien
Posts: 49902

15.06.2019 - 06:37

Coole Sache Parker!
Das Kernproblem welches die Wissenschaft schon seit fast dem Anbeginn plagt.

Auch wenn es außerhalb Windows Benchmarks nur auf mobilen Devices noch eine Rolle spielt spielen, ist ein Support anderer Plattformen auf der Roadmap?

Domain und Marke ist noch keine angemeldet

xtrm

social assassin

Registered: Jul 2002
Location:
Posts: 12096

15.06.2019 - 08:04

Multicore Wahnsinn, gefällt mir der Ausdruck

.

Ich bin kein Bencher, aber haben neuere Benchmarks nicht eine automatische Validierung und Upload Funktion?

oanszwoa

-

Registered: Nov 2004
Location: vienna
Posts: 2996

15.06.2019 - 08:26

Sauber sauber! :eek:

Eigene Plattform mit Ranglisten und Co klingt spannend!

mr.nice.

Moderator
differential image maker

Registered: Jun 2004
Location: Wien
Posts: 6454

15.06.2019 - 09:35

Spitzenmäßiges Tool mat! Man merkt auf Anhieb, dass hier viel Zeit in die Detailarbeit geflossen ist.
Ich habe auf meinem AMD System mit Windows 10 19H1 sobeben getestet, alle inkludierten Benchmarks sind problemlos durchgelaufen, alle Anwendungen sind fehlerfrei gestartet.
Durch den veränderten Thread-Scheduler von 19H1 sind Ergebnisse mit früheren Windows Versionen zumindest auf Ryzen-Systemen nicht mehr vergleichbar, ev. sollte man das auch irgendwie berücksichtigen.

Beim Beenden von BenchMate bekam ich die Fehlermeldung "Please use BenchMate.exe to start the application!"

Von Cinebench, GPUPI und SuperPi konnte ich die Ergebnisse per "Save Result" Button in BenchMate problemlos einlesen.
Von Geekbench 3 und 4 und vom CPU-Z CPU-Benchmark konnte ich die Ergebnisse nicht nach BenchMate exportieren. Ist dies so beabsichtigt?

Bei der GPUPI Ergebnissen würde ich noch ergänzen, ob es sich um ein CUDA oder ein OpenCL Ergebnis handelt.

Was die Screenshot Funktion anbelangt wäre es toll, wenn nicht der gesamte Bildschirm, sondern nur die Fenster von Belang abgelichtet würden.
Dann muss man die Screens nicht nachträglich bzgl. Datenschutz bearbeiten.

10 Bilder

wergor

connoisseur de mimi

Registered: Jul 2005
Location: vulkanland
Posts: 4095

15.06.2019 - 13:11

cooles tool!
ich dachte aber dass nach dem start der benchmark-application der run automatisch startet wird und, wenn mehrere benchmark-applications ausgewählt sind, diese nach der reihe ausgeführt werden. das wäre noch ein nettes feature

Viper780

Moderator
Er ist tot, Jim!

Registered: Mar 2001
Location: Wien
Posts: 49902

15.06.2019 - 13:44

Das wäre dann rebench https://www.overclockers.at/news/ov...entiert-rebench

mat

Administrator
Legends never die

Registered: Aug 2003
Location: nö
Posts: 25420

17.06.2019 - 15:54

Update!

BenchMate 0.7.1: Small Bundle (26 MB) | Big Bundle (550 MB)

mat

Administrator
Legends never die

Registered: Aug 2003
Location: nö
Posts: 25420

17.06.2019 - 23:13

Nicht so spannend für die oc.at-Community? Wo sind die Bencher bei uns?

mr.nice, vielen Dank für die ausführlichen Tests! Ja, es ist sehr viel Zeit in die Detailarbeit geflossen Vieles habe ich auch einige Male überarbeitet, damit es meinen Vorstellungen entspricht. Unglaublich mühsam, aber ich bin froh, dass es vollbracht ist!

Auf deine Bugs gehe ich am Mittwoch noch einmal ein. Die letzten Tage waren hart und morgen bin ich unterwegs. Einen Teil habe ich mit 0.7.1 hoffentlich schon erwischt!

Rogaahl

Super Moderator
interrupt

Registered: Feb 2014
Location: K
Posts: 2305

17.06.2019 - 23:25

Zitat aus einem Post von mat
Nicht so spannend für die oc.at-Community? Wo sind die Bencher bei uns?

Vielleicht verwenden inzwischen einfach viele nicht mehr Windows? Sobald ich das nächste Mal Windows starte, werde ich es sicherlich mal durch Testen.

Was genau ist, jetzt eigentlich der Unterschied zu rebench, oder hätte rebench nicht mehr oder weniger die Aufgabe von BenchMate erfüllen sollen (standardisierte Tests)? Werden die in Zukunft kombiniert?

quilty

Ich schau nur

Registered: Jul 2005
Location: 4202
Posts: 3014

17.06.2019 - 23:28

Ich bin leider auf Dienstreise im Moment. Mein Elitebook ist zwar in Ordnung aber gebencht wird nur daheim auf den Standrechnern.
Wenn ich in ein paar Wochen wieder daheim bin, dann wird getestet auf der ganzen AMD Familie. FM2, AM3+ und TR4.

mat

Administrator
Legends never die

Registered: Aug 2003
Location: nö
Posts: 25420

17.06.2019 - 23:38

Roghaal, bei BenchMate geht es nicht bzw nur wenig (derzeit) um Automatisierung, sondern um Validierung von Ergebnissen und den Systemen. Ich denke im Text steht das eigentlich ganz gut erklärt, warum das notwendig ist.

Langfristig könnte es ein BenchMate Pro geben, dass die Funktionen von Rebench mit den Sicherheits- und Timer-Verifizierungsfeatures vereint. Wäre quasi eines der großen, langfristigen Ziele!

quilty, awesome!

noir

Overclocking Team Member

Registered: Dec 2007
Location: Salzburg/OÖ
Posts: 2309

18.06.2019 - 08:14

Hab es gerade gelesen
Finde ich top
Bin zur Zeit mit dem Hausbau noch zu sehr eingeteilt aber wenn ich mal ein wenig Zeit finde werde ich wieder mal ein paar Benchmarks starten

Weiß gar nicht mehr wann bei mir das letzte mal ein Benchmark gelaufen ist

Aber mit meiner Hardware hat man auch nicht unbedingt das Verlangen danach
meine Graka ist noch immer die MSI R7970 Lightning die ich vor 7 oder 8 Jahren mal bei einem MSI Event gewonnen hab

HP

Legend
Moneymaker

Registered: Mar 2000
Location: Wien
Posts: 21813

18.06.2019 - 08:17

Wow!

Roman

CandyMan

Registered: Jun 2000
Location: Im schönen Kär..
Posts: 3865

18.06.2019 - 08:18

Hab mich auch gerade ein bissl gespielt, BM lässt mich die CineBench R11.5 und R20 Resultate nicht speichern. Das Ergebnis wird angezeigt aber abspeichern geht nicht.
CB15, GPUPI SuperPi, GeekBench funktionieren.

Rechner 1:
i7-7800X
Gigabyte X299-UD4
32GB DDR4
Win 10 Pro 18362.175

Rechner 2:
i7-4790K
MSI Z97 Gaming 5
16GB DDR3
Win 10 Pro 18362.175

Bearbeitet von Roman am 18.06.2019, 08:38

mat Administrator Legends never die Registered: Aug 2003 Location: nö Posts: 25420	15.06.2019 - 05:25 Der Moment der Wahrheit ist gekommen! Nach vier Jahren Research und davon fast einem Jahr Entwicklungszeit darf ich nun endlich eine Beta-Version meines bis dato ambitioniertesten Projekts vorstellen, BenchMate. BenchMate ist eine Software für Windows 7 aufwärts, die Sicherheit und Verlässlichkeit von Benchmarks gewährleisten soll. Zusätzlich wird der Workflow des Benchens an sich stark vereinfacht. Das Ziel von BenchMate ist: Client herunterladen, starten und sofort verifizierte Benchmark-Resultate erhalten, die anschließend zum Vergleichen auf HWBOT hochgeladen werden können. Download: benchmate.org » Beitrag lesen
Viper780 Moderator Er ist tot, Jim! Registered: Mar 2001 Location: Wien Posts: 49902	15.06.2019 - 06:37 Coole Sache Parker! Das Kernproblem welches die Wissenschaft schon seit fast dem Anbeginn plagt. Auch wenn es außerhalb Windows Benchmarks nur auf mobilen Devices noch eine Rolle spielt spielen, ist ein Support anderer Plattformen auf der Roadmap? Domain und Marke ist noch keine angemeldet
xtrm social assassin Registered: Jul 2002 Location: Posts: 12096	15.06.2019 - 08:04 Multicore Wahnsinn, gefällt mir der Ausdruck . Ich bin kein Bencher, aber haben neuere Benchmarks nicht eine automatische Validierung und Upload Funktion?
oanszwoa - Registered: Nov 2004 Location: vienna Posts: 2996	15.06.2019 - 08:26 Sauber sauber! Eigene Plattform mit Ranglisten und Co klingt spannend!
mr.nice. Moderator differential image maker Registered: Jun 2004 Location: Wien Posts: 6454	15.06.2019 - 09:35 Spitzenmäßiges Tool mat! Man merkt auf Anhieb, dass hier viel Zeit in die Detailarbeit geflossen ist. Ich habe auf meinem AMD System mit Windows 10 19H1 sobeben getestet, alle inkludierten Benchmarks sind problemlos durchgelaufen, alle Anwendungen sind fehlerfrei gestartet. Durch den veränderten Thread-Scheduler von 19H1 sind Ergebnisse mit früheren Windows Versionen zumindest auf Ryzen-Systemen nicht mehr vergleichbar, ev. sollte man das auch irgendwie berücksichtigen. Beim Beenden von BenchMate bekam ich die Fehlermeldung "Please use BenchMate.exe to start the application!" Von Cinebench, GPUPI und SuperPi konnte ich die Ergebnisse per "Save Result" Button in BenchMate problemlos einlesen. Von Geekbench 3 und 4 und vom CPU-Z CPU-Benchmark konnte ich die Ergebnisse nicht nach BenchMate exportieren. Ist dies so beabsichtigt? Bei der GPUPI Ergebnissen würde ich noch ergänzen, ob es sich um ein CUDA oder ein OpenCL Ergebnis handelt. Was die Screenshot Funktion anbelangt wäre es toll, wenn nicht der gesamte Bildschirm, sondern nur die Fenster von Belang abgelichtet würden. Dann muss man die Screens nicht nachträglich bzgl. Datenschutz bearbeiten. 10 Bilder
wergor connoisseur de mimi Registered: Jul 2005 Location: vulkanland Posts: 4095	15.06.2019 - 13:11 cooles tool! ich dachte aber dass nach dem start der benchmark-application der run automatisch startet wird und, wenn mehrere benchmark-applications ausgewählt sind, diese nach der reihe ausgeführt werden. das wäre noch ein nettes feature
Viper780 Moderator Er ist tot, Jim! Registered: Mar 2001 Location: Wien Posts: 49902	15.06.2019 - 13:44 Das wäre dann rebench https://www.overclockers.at/news/ov...entiert-rebench
mat Administrator Legends never die Registered: Aug 2003 Location: nö Posts: 25420	17.06.2019 - 15:54 Update! BenchMate 0.7.1: Small Bundle (26 MB) \| Big Bundle (550 MB)
mat Administrator Legends never die Registered: Aug 2003 Location: nö Posts: 25420	17.06.2019 - 23:13 Nicht so spannend für die oc.at-Community? Wo sind die Bencher bei uns? mr.nice, vielen Dank für die ausführlichen Tests! Ja, es ist sehr viel Zeit in die Detailarbeit geflossen Vieles habe ich auch einige Male überarbeitet, damit es meinen Vorstellungen entspricht. Unglaublich mühsam, aber ich bin froh, dass es vollbracht ist! Auf deine Bugs gehe ich am Mittwoch noch einmal ein. Die letzten Tage waren hart und morgen bin ich unterwegs. Einen Teil habe ich mit 0.7.1 hoffentlich schon erwischt!
Rogaahl Super Moderator interrupt Registered: Feb 2014 Location: K Posts: 2305	17.06.2019 - 23:25 Zitat aus einem Post von mat Nicht so spannend für die oc.at-Community? Wo sind die Bencher bei uns? Vielleicht verwenden inzwischen einfach viele nicht mehr Windows? Sobald ich das nächste Mal Windows starte, werde ich es sicherlich mal durch Testen. Was genau ist, jetzt eigentlich der Unterschied zu rebench, oder hätte rebench nicht mehr oder weniger die Aufgabe von BenchMate erfüllen sollen (standardisierte Tests)? Werden die in Zukunft kombiniert?
quilty Ich schau nur Registered: Jul 2005 Location: 4202 Posts: 3014	17.06.2019 - 23:28 Ich bin leider auf Dienstreise im Moment. Mein Elitebook ist zwar in Ordnung aber gebencht wird nur daheim auf den Standrechnern. Wenn ich in ein paar Wochen wieder daheim bin, dann wird getestet auf der ganzen AMD Familie. FM2, AM3+ und TR4.
mat Administrator Legends never die Registered: Aug 2003 Location: nö Posts: 25420	17.06.2019 - 23:38 Roghaal, bei BenchMate geht es nicht bzw nur wenig (derzeit) um Automatisierung, sondern um Validierung von Ergebnissen und den Systemen. Ich denke im Text steht das eigentlich ganz gut erklärt, warum das notwendig ist. Langfristig könnte es ein BenchMate Pro geben, dass die Funktionen von Rebench mit den Sicherheits- und Timer-Verifizierungsfeatures vereint. Wäre quasi eines der großen, langfristigen Ziele! quilty, awesome!
noir Overclocking Team Member Registered: Dec 2007 Location: Salzburg/OÖ Posts: 2309	18.06.2019 - 08:14 Hab es gerade gelesen Finde ich top Bin zur Zeit mit dem Hausbau noch zu sehr eingeteilt aber wenn ich mal ein wenig Zeit finde werde ich wieder mal ein paar Benchmarks starten Weiß gar nicht mehr wann bei mir das letzte mal ein Benchmark gelaufen ist Aber mit meiner Hardware hat man auch nicht unbedingt das Verlangen danach meine Graka ist noch immer die MSI R7970 Lightning die ich vor 7 oder 8 Jahren mal bei einem MSI Event gewonnen hab
HP Legend Moneymaker Registered: Mar 2000 Location: Wien Posts: 21813	18.06.2019 - 08:17 Wow!
Roman CandyMan Registered: Jun 2000 Location: Im schönen Kär.. Posts: 3865	18.06.2019 - 08:18 Hab mich auch gerade ein bissl gespielt, BM lässt mich die CineBench R11.5 und R20 Resultate nicht speichern. Das Ergebnis wird angezeigt aber abspeichern geht nicht. CB15, GPUPI SuperPi, GeekBench funktionieren. Rechner 1: i7-7800X Gigabyte X299-UD4 32GB DDR4 Win 10 Pro 18362.175 Rechner 2: i7-4790K MSI Z97 Gaming 5 16GB DDR3 Win 10 Pro 18362.175 Bearbeitet von Roman am 18.06.2019, 08:38

oc.at präsentiert: BenchMate

Forum Index > Software > Number Crunching

mat

Viper780

xtrm

oanszwoa

mr.nice.

wergor

Viper780

mat

mat

Rogaahl

quilty

mat

noir

HP

Roman