🥇Habrastatistics: पाठक टिप्पणी विश्लेषण

नमस्ते Habr। IN अघिल्लो भाग साइटको विभिन्न खण्डहरूको लोकप्रियता विश्लेषण गरिएको थियो, र एकै समयमा प्रश्न उठ्यो - लेखहरूमा टिप्पणीहरूबाट कुन डेटा निकाल्न सकिन्छ। म पनि एउटा परिकल्पना परीक्षण गर्न चाहन्थे, जुन म तल छलफल गर्नेछु।

तथ्याङ्क एकदमै चाखलाग्दो सावित भयो, र हामीले टिप्पणीकारहरूको सानो "मिनी-रेटिङ" संकलन गर्न पनि सक्षम थियौं। कट अन्तर्गत जारी।

तथ्यांक संकलन

विश्लेषणको लागि, हामी यस वर्ष, 2019 को लागि डेटा प्रयोग गर्नेछौं, विशेष गरी मैले पहिले नै csv फारममा लेखहरूको सूची प्राप्त गरिसकेको छु। सबै बाँकी छ कि प्रत्येक लेखबाट टिप्पणीहरू निकाल्नुहोस्; सौभाग्यवश हाम्रो लागि, तिनीहरू त्यहाँ भण्डारण गरिएका छन्, र कुनै थप अनुरोधहरू गर्न आवश्यक छैन।

लेखबाट टिप्पणीहरू हाइलाइट गर्न, निम्न कोड पर्याप्त छ:

r = requests.get("https://habr.com/ru/post/467453/")
data_html = r.text
comments = data_html.split('<div class="comment" id=')

comments_list = []
for comment in comments:
    body = Str(comment).find_between('<div class="comment__message', '<div class="comment__footer"').find_between('>', '</div>')# .replace('n', '-')
    if len(body) < 4: continue

    body = body.translate(str.maketrans(dict.fromkeys("tnrvf")))
    body = body.replace('"', "'").replace(',', " ").replace('<br>', ' ').replace('<p>', '').replace('</p>', '').replace('  ', ' ')

    user = Str(comment).find_between('data-user-login', '>').find_between('"', '"')
    date_str = Str(comment).find_between('<time class="comment__date-time comment__date-time_published', 'time>').find_between('>', '<')
    vote = Str(comment).find_between('<div class="voting-wjt', '</div>').find_between('<span', 'span>').find_between('>', '<')
    date = dateparser.parse(date_str)

    csv_data = "{},{},{},{}".format(user, date, vote, body)
    comments_list.append(csv_data)

यसले हामीलाई टिप्पणीहरूको सूची प्राप्त गर्न अनुमति दिन्छ जुन यो जस्तो देखिन्छ (गोपनीयता कारणहरूको लागि उपनाम हटाइयो):

xxxxxxx,2019-02-06 11:50:00,0,А можно пример как именно? xxxxxxx-02-24 16:15:00,+1,Побольше читайте независимые официальные источники чтобы таких вопросов не было. xxxxxxx,2019-02-23 20:15:00,–5,А не важно главное в итоге в плюсе оказаться

तपाईले देख्न सक्नुहुन्छ, प्रत्येक टिप्पणीको लागि हामी प्रयोगकर्ता नाम, मिति, मूल्याङ्कन, र वास्तविक पाठ प्राप्त गर्न सक्छौं। हामी यसबाट के प्राप्त गर्न सक्छौं हेरौं।

वैसे, सुरुमा, मूल्याङ्कनहरू सङ्कलन गर्ने विचार अलि फरक थियो - प्रयोगकर्ताहरूले के मूल्याङ्कन दिन्छन् भनेर हेर्न। उदाहरणका लागि, तपाइँ YouTube मा हेर्न सक्नुहुन्छ - सबैभन्दा आदर्श भिडियो पनि, कुनै पनि व्यक्तिपरक जानकारी नबनाउने भिडियो, विशुद्ध रूपमा सन्दर्भ वा समाचार रिलीजको लागि, अझै पनि निश्चित संख्यामा माइनसहरू प्राप्त गर्दछ। परिकल्पना यो थियो कि त्यहाँ प्रयोगकर्ताहरू छन्, जो शुद्ध रूपमा चिकित्सकीय रूपमा, सबै कुरा मन पराउँदैनन्, सायद सेरोटोनिन मस्तिष्क वा अन्य चीजमा उत्पादन हुँदैन। हुनसक्छ एक व्यक्ति अब Habré मा बस्न आवश्यक छैन, तर अवसादको उपचार गर्न ... तर यो बाहिर आयो, म यसलाई यहाँ जाँच गर्न सक्दिन, किनभने ... मूल्याङ्कन दिनेहरूको सूची टिप्पणी वा लेखमा बचत गरिएको छैन। खैर, त्यो हो, हामी उपलब्ध डाटा संग काम गर्नेछौं। परिणाम "रिभर्स" मूल्याङ्कन हो - तपाइँ प्रयोगकर्ताहरू द्वारा _receive_ के मूल्याङ्कनहरू हेर्न सक्नुहुन्छ। जुन, सिद्धान्त मा, पनि रोचक छ।

प्रशोधन गर्दै

सुरु गर्न, एक परम्परागत अस्वीकरण। यो मूल्याङ्कन, अघिल्ला सबै जस्तै, अनौपचारिक छ। मैले कहिँ पनि गल्ती गरेको छैन भन्ने ग्यारेन्टी गर्दिन। प्राविधिक विवरणहरूमा रुचि राख्नेहरूका लागि, थप विस्तृत कोड प्रदान गरिएको छ अघिल्लो भागमा.

त्यसैले सुरु गरौं। यस वर्ष, 2019 (जुन अझै सकिएको छैन) को लागि टिप्पणीहरू विश्लेषणको लागि लिइयो। लेख्ने समयमा, प्रयोगकर्ताहरूले लेखे 448533 टिप्पणीहरू, csv फाइलको साइज हो २८८ एमबी। शक्तिशाली, प्रभावशाली।

लेख्ने समय

घण्टाको आधारमा टिप्पणीहरू समूहबद्ध गरौं, हप्ताका दिनहरू र सप्ताहन्तहरू छुट्टाछुट्टै विभाजन गरेर।

यहाँ हामी निरपेक्ष मानहरूमा रुचि राख्दैनौं, तर सापेक्षिकहरूमा। यदि तपाइँ यसलाई "जस्तो छ" मात्र हेर्नुभयो भने, त्यसपछि यो बाहिर जान्छоधेरैजसो कमेन्ट १० देखि १८ सम्म काम गर्ने समयमा लेखिएको थियो 😉 अर्कोतर्फ, यहाँ समय क्षेत्रलाई ध्यानमा राखिएको छैन, त्यसैले प्रश्न अझै खुला छ।

वर्षभरिको टिप्पणीको वितरण हेरौं:

र अझै पनि यो घुमाउँछ; हप्ताको दिनहरूमा एक वृद्धि स्पष्ट रूपमा देखिन्छ - साप्ताहिक आवधिकता स्पष्ट रूपमा देखिन्छ, त्यसैले हामी धेरै उच्च आत्मविश्वासका साथ भन्न सक्छौं कि मानिसहरूले कामबाट Habr मा पढ्दै र टिप्पणी गरिरहेका छन् (तर यो निश्चित छैन)।

वैसे, त्यहाँ परिकल्पना परीक्षण गर्न को लागी एक विचार थियो कि माइनस वा प्लस को संख्या दिन वा दिन को समय भन्दा फरक छ, तर यो एक सम्बन्ध पत्ता लगाउन सम्भव थिएन - मूल्याङ्कन दिइएको समय बचत गरिएको छैन, र टिप्पणीको समयसँग कुनै सीधा सम्बन्ध छैन।

प्रयोगकर्ता

अवश्य पनि, मलाई साइटमा प्रयोगकर्ताहरूको सही संख्या थाहा छैन। तर यस वर्ष कम्तिमा एउटा टिप्पणी छोड्नेहरू लगभग हुन पुगे 25000 व्यक्ति.

प्रयोगकर्ताहरूले छोडेका सन्देशहरूको संख्याको ग्राफ धेरै रोचक देखिन्छ:

सुरुमा म आफैंलाई विश्वास लागेन, तर त्यहाँ कुनै गल्ती देखिन्थ्यो। 5% प्रयोगकर्ताहरूले 60% सन्देशहरू छोड्छन्। 10% - सबै सन्देशहरूको 74% (जसको, मलाई सम्झाउन दिनुहोस्, यो वर्ष, 450 हजार)। बहुसंख्यकले केवल साइट पढ्छन्, कमेन्टहरू छोडेर धेरै कम, वा तिनीहरूलाई छोड्दैनन् (ती, स्वाभाविक रूपमा, मेरो सूचीमा समावेश थिएनन्)।

मूल्याङ्कनहरू

तथ्याङ्कको अन्तिम र सबैभन्दा रमाइलो भागमा जाऔं - मूल्याङ्कन। गोपनीयता को कारणहरु को लागी, म प्रयोगकर्ताहरु को पूरा उपनाम दिन छैन, जो कोही चाहान्छ, मलाई लाग्छ, आफैलाई चिन्न सक्छ।

द्वारा टिप्पणीहरूको संख्या यस वर्षको लागि, शीर्ष 5 मा VoXXXX (3377 टिप्पणीहरू), 0xdXXXXX (3286 टिप्पणीहरू), strXXXX (3043 टिप्पणीहरू), AmXXXX (2897 टिप्पणीहरू) र khXXXX (2748 टिप्पणीहरू) द्वारा कब्जा गरिएको छ।

द्वारा प्राप्त लाभहरूको संख्या, शीर्ष ५ मा amXXXX (१३९५ कमेन्ट, रेटिंग +३२३१/-३०९), tvXXXX (१५४४ कमेन्ट, रेटिङ् +३२३१/-९७), WhuXXXX (९२१ कमेन्ट, रेटिङ् +२२८८/-१३), MTXXXX (१३२८ कमेन्टहरू, +१३८३/-७) र amaXXXX (७३६ टिप्पणी, रेटिंग +१३४०/-१६)।

द्वारा पूर्ण सकारात्मक रेटिंग (कोही पनि हैन नकारात्मक मूल्याङ्कन गरिएको टिप्पणी) शीर्षको शीर्ष द्वारा कब्जा गरिएको छ मिल्फगार्ड и बुम्बुरम। एक अपवादको रूपमा, म तिनीहरूको उपनामहरू पूर्ण रूपमा प्रस्तुत गर्दछु, मलाई लाग्छ कि तिनीहरू यसको योग्य छन्।

नकारात्मक पक्षहरू पनि रोचक छन्। शीर्ष द्वारा सङ्कलन माइनस संख्या यस वर्षको लागि तिनीहरू siXX (473 प्लस, 699 माइनस), khXX (1915 प्लस, 573 माइनस) र nicXXXXX (456 प्लस, 487 माइनस) द्वारा कब्जा गरिएको छ। तर तपाईले देख्न सक्नुहुन्छ, यी प्रयोगकर्ताहरूसँग पर्याप्त सकारात्मक टिप्पणीहरू छन्। तर अनुसार निरपेक्ष माइनस एन्टिटोपिकमा vladXXXX (५५ कमेन्ट, ८४ माइनस, ० प्लस), ekoXXXX (७७ कमेन्ट, ९२ माइनस, १ प्लस) र iMXXXX (२२५ कमेन्ट, २०५ माइनस, १२ प्लस) समावेश छन्।

निष्कर्षमा

मैले योजनाबद्ध सबै कुरा गणना गर्न सकेन, तर मलाई आशा छ कि यो रोचक थियो।

तपाईले देख्न सक्नुहुने रूपमा, फिल्डहरूको सानो संख्या भएको डेटासेटले पनि विश्लेषणको लागि रोचक डेटा प्रदान गर्न सक्छ। "शब्द क्लाउड" बनाउने देखि पाठ विश्लेषण सम्म धेरै कुरा खोज्न बाँकी छ। यदि कुनै चाखलाग्दो परिणामहरू देखा पर्छन् भने, तिनीहरू प्रकाशित गरिनेछन्।

स्रोत: www.habr.com

Habrastatistics: पाठक टिप्पणी विश्लेषण