Latest videos all have blank thumbnails

For the past couple of days the latest videos from remote instances have shown up with blank thumbnails on my instance:

It started out with one or two blank, but now it’s a lot. It doesn’t look blank when I go to the instances themselves.

Anyone any ideas on what might be happening?

Hi,

Can you check your server logs? Logs | PeerTube documentation

The last 24 hour logs are all blank, but there are logs if I set it to cover a whole week.

There seem to be a lot of errors like these recently. Do I need to go further back, or are these possibly related to the problem?

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/de28519c-0e67-4e48-bf7a-df8847de2fef.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/de28519c-0e67-4e48-bf7a-df8847de2fef.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/de28519c-0e67-4e48-bf7a-df8847de2fef.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/de28519c-0e67-4e48-bf7a-df8847de2fef.jpg »
}
}

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/1196aab9-f5fb-4669-b6b2-326e349ec9fa.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/1196aab9-f5fb-4669-b6b2-326e349ec9fa.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/1196aab9-f5fb-4669-b6b2-326e349ec9fa.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/1196aab9-f5fb-4669-b6b2-326e349ec9fa.jpg »
}
}

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/a26336bd-15f4-48eb-8212-25d7b9e74b6b.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/a26336bd-15f4-48eb-8212-25d7b9e74b6b.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/a26336bd-15f4-48eb-8212-25d7b9e74b6b.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/a26336bd-15f4-48eb-8212-25d7b9e74b6b.jpg »
}
}

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/6777d672-92a2-47b0-83cd-4e5c70f652c6.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/6777d672-92a2-47b0-83cd-4e5c70f652c6.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/6777d672-92a2-47b0-83cd-4e5c70f652c6.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/6777d672-92a2-47b0-83cd-4e5c70f652c6.jpg »
}
}

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/29eb4323-51e0-42c4-949a-6f15a0aab64d.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/29eb4323-51e0-42c4-949a-6f15a0aab64d.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/29eb4323-51e0-42c4-949a-6f15a0aab64d.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/29eb4323-51e0-42c4-949a-6f15a0aab64d.jpg »
}
}

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/6d0ae542-8cd6-4248-93ff-3cab18e2f915.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/6d0ae542-8cd6-4248-93ff-3cab18e2f915.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/6d0ae542-8cd6-4248-93ff-3cab18e2f915.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/6d0ae542-8cd6-4248-93ff-3cab18e2f915.jpg »
}
}

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/c19bfd4a-4107-4592-bce1-630826145fd0.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/c19bfd4a-4107-4592-bce1-630826145fd0.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/c19bfd4a-4107-4592-bce1-630826145fd0.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/c19bfd4a-4107-4592-bce1-630826145fd0.jpg »
}
}

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/bfc34254-98bf-4c11-8e97-975296fb5f5b.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/bfc34254-98bf-4c11-8e97-975296fb5f5b.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/bfc34254-98bf-4c11-8e97-975296fb5f5b.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/bfc34254-98bf-4c11-8e97-975296fb5f5b.jpg »
}
}

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/2d5084a3-ea19-4ff9-a9c7-6bf79a00d474.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/2d5084a3-ea19-4ff9-a9c7-6bf79a00d474.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/2d5084a3-ea19-4ff9-a9c7-6bf79a00d474.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/2d5084a3-ea19-4ff9-a9c7-6bf79a00d474.jpg »
}
}

error[05/11/2024, 11:36:43] Cannot remove /var/www/peertube/storage/cache/previews/6e8f86e0-c5e7-4e69-8a5a-7f7838d056cc.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/6e8f86e0-c5e7-4e69-8a5a-7f7838d056cc.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/6e8f86e0-c5e7-4e69-8a5a-7f7838d056cc.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/6e8f86e0-c5e7-4e69-8a5a-7f7838d056cc.jpg »
}
}

error[05/11/2024, 11:42:41] Cannot remove /var/www/peertube/storage/cache/previews/62e82d55-7c7d-43a1-a21e-fbdae26a86ba.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/62e82d55-7c7d-43a1-a21e-fbdae26a86ba.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/62e82d55-7c7d-43a1-a21e-fbdae26a86ba.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/62e82d55-7c7d-43a1-a21e-fbdae26a86ba.jpg »
}
}

error[05/11/2024, 11:45:03] Cannot remove /var/www/peertube/storage/cache/previews/0df297a0-77ff-457d-89ca-56a46a2c97ab.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/0df297a0-77ff-457d-89ca-56a46a2c97ab.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/0df297a0-77ff-457d-89ca-56a46a2c97ab.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/0df297a0-77ff-457d-89ca-56a46a2c97ab.jpg »
}
}

error[05/11/2024, 11:49:15] Client log: Error: The video failed to play, will try to fast forward.

{
« tags »: [
« client »
],
« userAgent »: « Mozilla/5.0 (Android 11; Mobile; rv:132.0) Gecko/132.0 Firefox/132.0 »,
« url »: « We murder a man trapped in supermarket freezer in #DeusEx - Fedi.Video »
}

error[05/11/2024, 11:49:25] Client log: Cannot lock screen to landscape.

{
« tags »: [
« client »
],
« userAgent »: « Mozilla/5.0 (Android 11; Mobile; rv:132.0) Gecko/132.0 Firefox/132.0 »,
« stackTrace »: « Operation is not supported\nhandleFullscreenRotation/this.onFullScreenChangeHandler@https://fedi.video/client/en-US/chunk-QZVXXXCO.js:92:25017\nYe</Ai/i.dispatcher@https://fedi.video/client/en-US/chunk-QZVXXXCO.js:11:8055\ninvokeTask@https://fedi.video/client/en-US/polyfills-MMKWWPQO.js:1:120046\nrunTask@https://fedi.video/client/en-US/polyfills-MMKWWPQO.js:1:115295\ninvokeTask@https://fedi.video/client/en-US/polyfills-MMKWWPQO.js:1:121127\ny@https://fedi.video/client/en-US/polyfills-MMKWWPQO.js:1:128263\nH@https://fedi.video/client/en-US/polyfills-MMKWWPQO.js:1:128564\nq@https://fedi.video/client/en-US/polyfills-MMKWWPQO.js:1:128825\n »,
« url »: « We murder a man trapped in supermarket freezer in #DeusEx - Fedi.Video »
}

error[05/11/2024, 11:56:15] Cannot remove /var/www/peertube/storage/cache/previews/62321a03-04c0-40d0-a470-f3b4e39b5641.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/62321a03-04c0-40d0-a470-f3b4e39b5641.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/62321a03-04c0-40d0-a470-f3b4e39b5641.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/62321a03-04c0-40d0-a470-f3b4e39b5641.jpg »
}
}

error[05/11/2024, 11:59:36] Cannot remove actor image file ba5a28e1-3df0-4e30-95e4-a01daf7f48b9.png.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/avatars/ba5a28e1-3df0-4e30-95e4-a01daf7f48b9.png › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/avatars/ba5a28e1-3df0-4e30-95e4-a01daf7f48b9.png › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/avatars/ba5a28e1-3df0-4e30-95e4-a01daf7f48b9.png »
}
}

error[05/11/2024, 12:07:43] Cannot remove /var/www/peertube/storage/cache/storyboards/f1cd0982-4e2c-4c37-b261-61fc357c262e.jpg from cache VideoStoryboardsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/storyboards/f1cd0982-4e2c-4c37-b261-61fc357c262e.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/storyboards/f1cd0982-4e2c-4c37-b261-61fc357c262e.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/storyboards/f1cd0982-4e2c-4c37-b261-61fc357c262e.jpg »
}
}

error[05/11/2024, 12:09:36] Cannot remove /var/www/peertube/storage/cache/previews/13c59644-a33a-44ac-a5a1-ef46fd5cf2ad.jpg from cache VideoPreviewsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/13c59644-a33a-44ac-a5a1-ef46fd5cf2ad.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/previews/13c59644-a33a-44ac-a5a1-ef46fd5cf2ad.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/previews/13c59644-a33a-44ac-a5a1-ef46fd5cf2ad.jpg »
}
}

error[05/11/2024, 12:10:21] Cannot remove /var/www/peertube/storage/cache/storyboards/65a20b65-ce61-459a-9016-e87432ad6353.jpg from cache VideoStoryboardsSimpleFileCache.

{
« err »: {
« stack »: « Error: EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/storyboards/65a20b65-ce61-459a-9016-e87432ad6353.jpg › »,
« message »: « EROFS: read-only file system, unlink ‹ /var/www/peertube/storage/cache/storyboards/65a20b65-ce61-459a-9016-e87432ad6353.jpg › »,
« errno »: -30,
« code »: « EROFS »,
« syscall »: « unlink »,
« path »: « /var/www/peertube/storage/cache/storyboards/65a20b65-ce61-459a-9016-e87432ad6353.jpg »
}
}

p.s. Do you want me to dump the whole week’s logs? That would make a very long post but will do that if it helps :slight_smile:

Please paste the output of

sudo df /var/www/peertube/storage/cache/
sudo grep "[[:space:]]ro[[:space:],]" /proc/mounts

I am on managed hosting, I don’t have command line access :confused:

Then I suggest to contact your administrator

Ok, will do! Thanks for help!

Okay, problem solved! :partying_face:

My managed hosting provider looked into it while checking the logs, and found an issue with their storage provider being in read only mode during a maintenance operation.

When they restarted my instance, the thumbnails started working again.