Тиберий направи още една публична демонстрация, за да покаже, че Кастор е в немилост, като го порица пред Сената за едно негово писмо. Кастор се бе извинил, че не е в състояние да присъствува на жертвоприношението по случай откриването на заседанията на Сената след лятната ваканция, обяснявайки, че друго обществено задължение го спира да се завърне навреме в града.
Всеки би си помислил, заяви укорително Тиберий, че този млад човек е на поход в Германия или на дипломатическо посещение в Армения: а то цялата му „обществена работа“, която го задържала, не било друго, а разходки с лодка и слънчеви бани в Терацина. Каза, че той самият, сега вече в залеза на живота си, могъл да бъде извинен за някое случайно отсъствие от града: можел да обясни, че силите му са изтощени от продължителната обществена служба и във войската, и в администрирането. Ала какво друго освен безочието можело да възпрепятствува неговия син? Това бе много несправедливо: по време на сенатската ваканция Кастор бе натоварен да направи един доклад за състоянието на бреговата отбрана и не бе успял да събере всички сведения; затова, вместо да губи време да се завръща в Рим и после да отива пак в Терацина, останал бе да довърши работата си.
Когато се върна, Кастор почти веднага легна болен. Признаците бяха на скоротечна туберкулоза. Пребледня, отслабна и започна да кашля кръв. Писа на баща си и го помоли да дойде да го посети в неговата стая — живееше в другия край на двореца, — защото чувствувал, че умира, и да му прости, ако по някакъв начин го е обидил. Сеян посъветвал Тиберий да не ходи: болестта можела да бъде истинска, но, от друга страна, това можело да бъде някаква хитрост, за да го убият. И тъй, Тиберий не отиде да го посети, а след няколко дни Кастор умря.
Смъртта на Кастор не събуди особена скръб. Буйният му нрав и славата му на жесток човек бяха накарали града да се страхува от онова, което би могло да се случи, ако той наследи своя баща. (23 г. от н.е.)
Малцина вярваха в неговото изправление през последно време. Повечето смятаха, че това е хитрост, за да спечели обществените симпатии, и че и той ще стане лош като баща си още щом седне на неговото място. А вече и Германиковите трима синове подрастваха — току-що бе навлязъл в пълнолетие и Друз — и ставаха несъмнено наследници на Тиберий. Но Сенатът, от уважение към Тиберий, оплака Кастор колкото можеше по-шумно и му гласува посмъртно същите почести, каквито бяха гласувани на Германик. Тиберий не се и постара да изрази някаква скръб при тоя случай, а произнесе панегирика, който бе приготвил за Кастор, с твърд, кънтящ глас. Когато видя сълзи да се стичат по лицата на някои от сенаторите, той подхвърли с ясен шепот на Сеян, който стоеше до него:
— Пфу! Тук ми вони на лук!
Подир това Гал стана да похвали Тиберий, че е съумял да сдържи мъката си. Припомни, че дори и богът Август, когато бил сред тях в тленния си образ, дотолкова се бил поддал на скръбта при смъртта на Марцел, неговия осиновен син (дори не негов роден син!), че когато изказвал благодарност на Сената за изразеното съчувствие, спрял по средата, защото вълнението го надвило. Докато словото, което току-що били чули, било шедьовър на сдържаността. (Тук бих искал да спомена, че когато — четири-пет месеца по-късно — една делегация от Троя се появи пред Тиберий да изкаже съболезнования за смъртта на единствения му син, Тиберий им поблагодари така:
— И аз ви изказвам съболезнования, благородници, за смъртта на Хектор.
След това Тиберий изпрати да му доведат Нерон и Друз, а когато пристигнаха в Сената, той ги взе за ръка и ги представи: