File size: 14,008 Bytes
b4bbaee cbff93c e5c8ff6 282dd48 cbff93c 282dd48 e5c8ff6 cbff93c 282dd48 cbff93c 282dd48 b4bbaee 282dd48 e5c8ff6 282dd48 e5c8ff6 282dd48 e5c8ff6 282dd48 e5c8ff6 282dd48 e5c8ff6 282dd48 e5c8ff6 282dd48 e5c8ff6 282dd48 cbff93c 282dd48 b4bbaee cbff93c |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 213 214 215 216 217 218 219 220 221 222 223 224 225 226 227 228 229 230 231 232 233 234 235 236 237 238 239 240 241 242 243 244 245 246 247 248 249 250 251 252 253 254 255 256 257 258 259 260 261 262 263 264 265 266 267 268 269 270 271 272 273 274 275 276 277 278 279 280 281 282 283 284 285 286 287 288 289 290 291 292 293 294 295 |
import gradio as gr
import re
from collections import Counter
from datetime import datetime
import emoji
import logging
from typing import Tuple, List, Optional
import statistics
# Настройка логирования
logging.basicConfig(level=logging.INFO)
logger = logging.getLogger(__name__)
def clean_text(text):
"""Очищает текст от лишних пробелов и переносов строк"""
return ' '.join(text.split())
def count_emojis(text):
"""Подсчитывает количество эмодзи в тексте"""
return len([c for c in text if c in emoji.EMOJI_DATA])
def extract_mentions(text):
"""Извлекает упоминания пользователей из текста"""
return re.findall(r'@[\w\.]+', text)
def get_comment_words(text):
"""Получает список слов из комментария для анализа"""
# Очищаем текст от эмодзи и приводим к нижнему регистру
words = re.findall(r'\w+', text.lower())
return [w for w in words if len(w) > 2] # Исключаем короткие слова
def analyze_sentiment(text):
"""Расширенный анализ тональности по эмодзи и ключевым словам"""
positive_indicators = ['🔥', '❤️', '👍', '😊', '💪', '👏', '🎉', '♥️', '😍', '🙏',
'круто', 'супер', 'класс', 'огонь', 'пушка', 'отлично', 'здорово',
'прекрасно', 'молодец', 'красота', 'спасибо', 'топ']
negative_indicators = ['👎', '😢', '😞', '😠', '😡', '💔', '😕', '😑',
'плохо', 'ужас', 'отстой', 'фу', 'жесть', 'ужасно',
'разочарован', 'печаль', 'грустно']
text_lower = text.lower()
positive_count = sum(1 for ind in positive_indicators if ind in text_lower)
negative_count = sum(1 for ind in negative_indicators if ind in text_lower)
# Учитываем восклицательные знаки как усилители эмоций
exclamation_count = text.count('!')
positive_count += exclamation_count * 0.5 if positive_count > negative_count else 0
negative_count += exclamation_count * 0.5 if negative_count > positive_count else 0
if positive_count > negative_count:
return 'positive'
elif negative_count > positive_count:
return 'negative'
return 'neutral'
def extract_comment_data(comment_text):
"""
Извлекает данные из отдельного комментария
Возвращает (username, comment_text, likes_count, week_number)
"""
try:
# Извлекаем имя пользователя
username_match = re.search(r"Фото профиля ([^\n]+)", comment_text)
if not username_match:
return None, None, 0, 0
username = username_match.group(1).strip()
# Извлекаем текст комментария
comment_pattern = fr"{username}\n(.*?)(?:\d+ нед\.)"
comment_match = re.search(comment_pattern, comment_text, re.DOTALL)
if comment_match:
comment = clean_text(comment_match.group(1))
comment = re.sub(fr'^{username}\s*', '', comment)
comment = re.sub(r'^@[\w\.]+ ', '', comment)
else:
comment = ""
# Извлекаем количество недель
week_match = re.search(r'(\d+) нед\.', comment_text)
weeks = int(week_match.group(1)) if week_match else 0
# Ищем количество лайков
likes = 0
likes_patterns = [
r"(\d+) отметк[аи] \"Нравится\"",
r"Нравится: (\d+)",
]
for pattern in likes_patterns:
likes_match = re.search(pattern, comment_text)
if likes_match:
likes = int(likes_match.group(1))
break
return username, comment.strip(), likes, weeks
except Exception as e:
logger.error(f"Error extracting comment data: {e}")
return None, None, 0, 0
def analyze_post(content_type, link_to_post, post_likes, post_date, description, comment_count, all_comments):
try:
# Разделяем комментарии по "Фото профиля"
comments_blocks = re.split(r'(?=Фото профиля)', all_comments)
comments_blocks = [block for block in comments_blocks if block.strip()]
# Основные списки для данных
usernames = []
comments = []
likes = []
weeks = []
# Дополнительные метрики
total_emojis = 0
mentions = []
sentiments = []
comment_lengths = []
words_per_comment = []
all_words = []
user_engagement = {} # Словарь для хранения статистики по пользователям
# Обработка каждого комментария
for block in comments_blocks:
username, comment, like_count, week_number = extract_comment_data(block)
if username and comment:
usernames.append(username)
comments.append(comment)
likes.append(str(like_count))
weeks.append(week_number)
# Базовые метрики
total_emojis += count_emojis(comment)
mentions.extend(extract_mentions(comment))
sentiment = analyze_sentiment(comment)
sentiments.append(sentiment)
comment_lengths.append(len(comment))
# Расширенные метрики
words = get_comment_words(comment)
words_per_comment.append(len(words))
all_words.extend(words)
# Статистика пользователя
if username not in user_engagement:
user_engagement[username] = {
'comments': 0,
'total_likes': 0,
'emoji_usage': 0,
'avg_length': 0,
'sentiments': []
}
user_stats = user_engagement[username]
user_stats['comments'] += 1
user_stats['total_likes'] += like_count
user_stats['emoji_usage'] += count_emojis(comment)
user_stats['avg_length'] += len(comment)
user_stats['sentiments'].append(sentiment)
# Аналитика
total_comments = len(comments)
if total_comments == 0:
raise ValueError("No valid comments found")
# Обновляем статистику пользователей
for username in user_engagement:
stats = user_engagement[username]
stats['avg_length'] /= stats['comments']
stats['engagement_rate'] = stats['total_likes'] / stats['comments']
stats['sentiment_ratio'] = sum(1 for s in stats['sentiments'] if s == 'positive') / len(stats['sentiments'])
# Базовая статистика
avg_comment_length = sum(comment_lengths) / total_comments
sentiment_distribution = Counter(sentiments)
most_active_users = Counter(usernames).most_common(5)
most_mentioned = Counter(mentions).most_common(5)
avg_likes = sum(map(int, likes)) / len(likes) if likes else 0
earliest_week = max(weeks) if weeks else 0
latest_week = min(weeks) if weeks else 0
# Расширенная статистика
median_comment_length = statistics.median(comment_lengths)
avg_words_per_comment = sum(words_per_comment) / total_comments
common_words = Counter(all_words).most_common(10)
# Анализ вовлеченности
engagement_metrics = {
'comments_with_likes': sum(1 for l in likes if int(l) > 0),
'comments_with_emoji': sum(1 for c in comments if count_emojis(c) > 0),
'comments_with_mentions': sum(1 for c in comments if extract_mentions(c)),
'avg_engagement_rate': statistics.mean([
stats['engagement_rate'] for stats in user_engagement.values()
])
}
# Временной анализ
week_distribution = Counter(weeks)
most_active_weeks = sorted(week_distribution.items(), key=lambda x: x[1], reverse=True)[:3]
# Формируем выходные данные
usernames_output = "\n".join(usernames)
comments_output = "\n".join(comments)
likes_chronology_output = "\n".join(likes)
total_likes_sum = sum(map(int, likes))
# Расширенная аналитика
analytics_summary = (
f"Content Type: {content_type}\n"
f"Link to Post: {link_to_post}\n\n"
f"ОСНОВНАЯ СТАТИСТИКА:\n"
f"- Всего комментариев: {total_comments}\n"
f"- Всего лайков на комментариях: {total_likes_sum}\n"
f"- Среднее количество лайков: {avg_likes:.1f}\n"
f"- Период активности: {earliest_week}-{latest_week} недель\n\n"
f"АНАЛИЗ КОНТЕНТА:\n"
f"- Средняя длина комментария: {avg_comment_length:.1f} символов\n"
f"- Медианная длина комментария: {median_comment_length} символов\n"
f"- Среднее количество слов: {avg_words_per_comment:.1f}\n"
f"- Всего эмодзи использовано: {total_emojis}\n"
f"- Тональность комментариев:\n"
f" * Позитивных: {sentiment_distribution['positive']}\n"
f" * Нейтральных: {sentiment_distribution['neutral']}\n"
f" * Негативных: {sentiment_distribution['negative']}\n\n"
f"ПОПУЛЯРНЫЕ СЛОВА:\n"
+ "\n".join([f"- {word}: {count} раз" for word, count in common_words]) + "\n\n"
f"АКТИВНОСТЬ ПОЛЬЗОВАТЕЛЕЙ:\n"
f"Самые активные комментаторы:\n"
+ "\n".join([f"- {user}: {count} комментариев" for user, count in most_active_users]) + "\n\n"
f"Самые упоминаемые пользователи:\n"
+ "\n".join([f"- {user}: {count} упоминаний" for user, count in most_mentioned if user]) + "\n\n"
f"ВОВЛЕЧЕННОСТЬ:\n"
f"- Процент комментариев с лайками: {(engagement_metrics['comments_with_likes'] / total_comments * 100):.1f}%\n"
f"- Процент комментариев с эмодзи: {(engagement_metrics['comments_with_emoji'] / total_comments * 100):.1f}%\n"
f"- Процент комментариев с упоминаниями: {(engagement_metrics['comments_with_mentions'] / total_comments * 100):.1f}%\n"
f"- Средний рейтинг вовлеченности: {engagement_metrics['avg_engagement_rate']:.2f}\n\n"
f"ВРЕМЕННАЯ АКТИВНОСТЬ:\n"
f"Самые активные недели:\n"
+ "\n".join([f"- {week} неделя: {count} комментариев" for week, count in most_active_weeks])
)
return analytics_summary, usernames_output, comments_output, likes_chronology_output, str(total_likes_sum)
except Exception as e:
logger.error(f"Error in analyze_post: {e}", exc_info=True)
error_message = f"Произошла ошибка при обработке: {str(e)}\n{str(type(e))}"
return error_message, error_message, error_message, error_message, "0"
# Создаем интерфейс Gradio
iface = gr.Interface(
fn=analyze_post,
inputs=[
gr.Radio(
choices=["Photo", "Video"],
label="Content Type",
value="Photo"
),
gr.Textbox(
label="Link to Post",
placeholder="Введите ссылку на пост"
),
gr.Number(
label="Likes",
value=0
),
gr.Textbox(
label="Post Date",
placeholder="Введите дату публикации"
),
gr.Textbox(
label="Description",
placeholder="Введите описание поста",
lines=3
),
gr.Number(
label="Total Comment Count",
value=0
),
gr.Textbox(
label="All Comments",
placeholder="Вставьте комментарии",
lines=10
)
],
outputs=[
gr.Textbox(label="Analytics Summary", lines=20),
gr.Textbox(label="Usernames (Output 1)", lines=5),
gr.Textbox(label="Comments (Output 2)", lines=5),
gr.Textbox(label="Likes Chronology (Output 3)", lines=5),
gr.Textbox(label="Total Likes on Comments (Output 4)")
],
title="Instagram Comment Analyzer Pro",
description="Расширенный анализатор комментариев Instagram с детальной аналитикой"
)
if __name__ == "__main__":
iface.launch() |