Forschung
Neue Modelle, Papers und Durchbrüche aus der KI-Forschung.
Mit KI erstelltTGRL: Temperatur-Gruppierung als Explorationssignal für LLMs
Wie Temperature-Grouped Reinforcement Learning Reward-Kontrast per Jensen-Shannon-Divergenz in Token-Credits übersetzt – und wo das Akronym kollidiert.
Mit KI erstelltRecursive Harness Distillation: Starke Agenten erstellen wiederverwendbare Playbooks für Robotermanipulation
RHD destilliert Interventionserfahrung in ein Playbook und steigert Erfolgsraten real und in SimplerEnv deutlich.
Mit KI erstelltGAGAR: Qualitätsbasierte Kreditumverteilung für RL-Code-Agenten
Ein neues Framework verbessert das Reinforcement Learning für Code-Agenten, indem es die Belohnungsverteilung innerhalb von GRPO qualitätsbasiert umverteilt.
Mit KI erstelltStudie behauptet Schieflage in KI-Berichterstattung
Ein neues Forschungsstudium soll zeigen, dass die globale Medienberichterstattung über KI stark hierarchisch strukturiert ist und Technologieinnovatoren sowie Regulierungsbehörden bevorzugt, während Stimmen aus aufstrebenden Märkten marginalisiert werden.
Mit KI erstelltDisaggregated Quantization: LLM-Inferenz phasenweise optimiert
Getrennte Spezialisierung für Prefill und Decode verbessert Genauigkeit und beschleunigt Prompt-Verarbeitung ohne Mehrkosten
Mit KI erstelltKI-Tool und Fruchtfliegen identifizieren BRSK1 als Ursache seltener Entwicklungsstörung
Forschende des Baylor College of Medicine, des Duncan NRI und des Texome Project haben mithilfe des KI-Tools AI-MARRVEL und Fruchtfliegen-Experimenten Varianten im BRSK1-Gen als wahrscheinliche Ursache einer seltenen, komplexen neurodevelopmentalen Störung identifiziert. Die Studie erscheint im Amer
Mit KI erstelltTaH2 verbessert Test-Time-Skalierung von Loop-Transformern durch adaptives Looping
Adaptiver Iterationsentscheider mit Lookahead-Tiefenüberwachung steigert Accuracy-Compute-Steigung um 53% auf AIME-Benchmarks
Mit KI erstelltEncoder-freie MLLMs holen bei 10^22 FLOPs auf
Neue Skalierungsgesetze zeigen: Ohne visuellen Encoder verschiebt sich die optimale Modellgröße – und der Vorteil des visuellen Priors schwindet mit wachsendem Compute.
Mit KI erstelltDiffusionsmodell senkt Höhenfehler in Städten um fast die Hälfte
Studie von Thales und CNES verbessert photogrammetrische Digital Surface Models mit multimodaler Konditionierung
Mit KI erstelltSoftmax Reparameterization: Verfahren für Output-Head-Quantisierung beschrieben
Post-Training-Methode wählt funktional äquivalenten Ausgabekopf vor der Quantisierung, um Inferenzkosten bei kleinen Sprachmodellen mit großen Vokabularen zu senken.
Mit KI erstelltContinuous Depth Batching: Effizientes Batching für depth-adaptive Loop-Modelle
Wie eine neue Methode das Problem ungleicher Loop-Tiefen adressiert und depth-adaptive Inference praktisch nutzbar macht
Mit KI erstelltToken-Einsparungen durch Memory-Layer: Je nach Zählmethode 91 bis 93,9 Prozent
Ein mit Belcore verbundener Autor veröffentlicht einen Messpost, der zeigt, dass die Token-Einsparungen durch die Belcore-Memory-Layer je nach Zählmethode unterschiedlich ausfallen: von 93,9% bei Kontext-Token bis etwa 91% bei abgerechneten Input-Token in einer handverlesenen Teilmenge. Der Beitrag