Bereits 1932 bestanden beim TSV zwei Handballmannschaften (sie setzten sich aus Turnern und Leichtathleten zusammen), die meist gegeneinander spielten. Die Gründung der Abteilung und der Einstieg in die Liga-Spiele erfolgte 1936 unter Karl Standecker, der auch der erste Abteilungsleiter war. Unter Spielführer Oskar Braun erreichte man den Aufstieg in die Gau-Liga (diese Liga rekrutierte sich aus dem gesamten Ostbayerischen Raum). Eine starke Jugendmannschaft mit dem unvergessenen „Ali" Huttner berechtigte zu großen Hoffnungen. Die Entwicklung wurde 1939 durch den Ausbruch des Krieges jäh unterbrochen. Der Spielbetrieb konnte nicht mehr aufrecht erhalten werden.

Im Sommer 1945 startete wiederum Karl Standecker einen Neuanfang. Im Sep­tember 1946 waren bereits 74 Handballer und Handballerinnen in zwei Herren-, einer Damen- und einer Jugendmannschaft im Einsatz. 1955 - 58 und 1965 - 74 spielte die 1. Mannschaft in der bay. Landesliga Großfeld. Im Jahr 1974 wurden die Meisterschaftsspiele auf Großfeld eingestellt. Es wurde nur noch auf Kleinfeld bzw. in der Halle Handball gespielt. In den Jahren 1968/69 und 1970/71 gehörte die 1. Mannschaft der Hallen-Landesliga an.

Erst 1995/96 feierte die 1. Mannschaft wieder den Aufstieg in die bay. Verbandsli-ga (ehemals Landesliga) und konnte sich bis zur Saison 2001/02 darin behaupten. Anschließend konnte man auch die Bezirksoberliga nicht erhalten (es fehlte nur ein Punkt). Als dann 10 Spieler der 1. Mannschaft die Abteilung verließen waren die verantwortlichen Funktionäre gezwungen diese Lücke durch die gesamte A-Jgd. zu schließen. Durch die körperliche Unterlegenheit und geringe Erfahrung der jungen Truppe war auch diesmal der Abstieg von der Bezirksliga in die Bezirks­klasse nicht zu vermeiden. Eine 2. Mannschaft konnte sich in den ganzen Jahren mit unterschiedlichen Erfolgen durchaus sehen lassen.

Die Jugendmannschaften der Abteilung hatten große Erfolge und spielten eben­falls auf bayerischer Ebene. Die Damenmannschaft gehörte von 1974 - 78 der Kleinfeld - Landesliga und 1978 - 80 der Oberliga Südbayern an.

Den erfolgreichen Neuanfang hat sich der im April 2004 neu gewählte Abteilungs­leiter Martin Stöberl und seine junge Führungsmannschaft zum Ziel gesetzt. Das 30- und das 60-jährige Jubiläum der Abteilung wurde mit großen Turnieren und entsprechenden Veranstaltungen gefeiert. Im übrigen sollte erwähnt werden, dass die Geselligkeit in der Abteilung immer groß geschrieben wird. In den 50er- und 60er Jahren wurden die Auswärtsspiele genutzt um unsere bayerische Heimat kennen zu lernen. Im Fasching erfreut sich der traditionelle maskierte Handballerball großer Beliebtheit. Ebenfalls Tradition ist das jährliche Sommerfest, das meist auch mit einem Turnier verbunden wird.

Jedes Jahr findet im August ein Schleiferl -Turnier auf der Tennisanlage des TSV statt. Die AH-Mannschaft organisiert alle Jahre einen Ausflug. Am städtischen Bürgerfest engagiert sich die Abteilung mit einem Weinstand.

In den Jahren zwischen 1969 und 1986 fanden einige sportliche Höhepunkte mit namhaften Mannschaften aus Tschechien, Österreich, Schweiz, Ungarn und Spitzenmannschaften aus Deutschland statt.

Erwähnenswert ist auch, dass die Abteilung mit den Handballern der französi­schen Partnerstadt Libourne sportlich und gesellschaftlich gute Kontakte gepflegt hat. Aktuell sind zur Zeit ähnliche Kontakte zu der tschechischen Partnerstadt Sokolov.