Спарсил все публикации с minecraft-inside.ru за 01.10.2024 ~12:00

[Kupo]

Сегодня 01.10.2024 спарсил и "отполировал" 2795 страниц с "Главной".

Всего получилось по "link" уникальных тем 27940.

Перечисление и описание колонок 🍳:

• title - заглавие
• category - категория
• views - количество просмотров
• commentcount - количество комментариев
• minus - отрицательная оценка (дизлайк)
• plus - положительная оценка (лайк)
• score - счет (разница между положительной и отрицательной оценками)
• pubDate - информация о дате публикации ( формат "%Y-%m-%d %H:%M:%S" )
• year - год
• month - месяц
• day - день
• hour - час
• minute - минуты
• monthname - название месяца
• weekday - день недели
• season - времена года
• dayofyear - день в году
• versions - перечень версий полученных из "title" и разделенный символом ("|" - вертикальная черта)
• link - ссылка на пост

Сохранил в формате .csv и .parquet (движок pyarrow версия == 14.0.1)

Скачать с Яндекс.Диск

[ч1мпл]

3 минуты назад, гPycHuy_eжuk сказал:

Чего?

мой мозг когда я на экзамене при виде ФИО

[Kupo]

33 минуты назад, гPycHuy_eжuk сказал:

Чего?

Что "Чего ?" ?
Конкретно что вам не понятно - постараюсь объяснить ?!

[ч1мпл]

2 минуты назад, Kupo сказал:

Что "Чего ?" ?
Конкретно что вам не понятно - постараюсь объяснить ?!

все

[Kupo]

14 минут назад, ГАМБИТ_ЗОЛО2004 сказал:

все

Я конечно извеняюсь, но у вас там что IQ 50-60 ?

.csv - обычный текстовый файлик а точнее способ разделения данных в данном случае каждая колонка разделена запятой, почитать можно здесь

.parquet - это другой способ сохранения табличных данных от Apache почитать здесь

В .parquet в отличии от .csv если брать например библиотеку Pandas (я ее использую) сохраняются типы данных - сохранил по больше части что бы лишний раз не парсить дату с .csv .
Также .parquet в итоге получаеться меньше размером и открываться быстрее (это уже для работы с очень большими данными очень полезно).

Вроде ответил, но я не понимаю как можно не знать даже элементарые *.*sv форматы представлений... 

[ч1мпл]

1 час назад, Kupo сказал:

Я конечно извеняюсь, но у вас там что IQ 50-60 ?

Нолики убери и правильно будет

[Oboudno_]

2 минуты назад, ГАМБИТ_ЗОЛО2004 сказал:

Нолики убери и правильно будет

[ч1мпл]

Только что, Oboudno_ сказал:

2 минуты назад, ГАМБИТ_ЗОЛО2004 сказал:

Нолики убери и правильно будет

?

Тут даже текста нету

[Oboudno_]

1 минуту назад, ГАМБИТ_ЗОЛО2004 сказал:

?

Тут даже текста нету

С телефона не удобно, но ай-кью вообще не нужно людям отвечаю 

[ч1мпл]

Только что, Oboudno_ сказал:

С телефона не удобно, но ай-кью вообще не нужно людям отвечаю 

IQ это считай разум но да, я даже не знаю сколько его у меня , и я сам с телефона

[Oboudno_]

Только что, ГАМБИТ_ЗОЛО2004 сказал:

IQ это считай разум но да, я даже не знаю сколько его у меня , и я сам с телефона

Хорош