పరిమితి
లింక్డ్‌ఇన్‌లో అటువంటి పరిమితి ఉంది - . నాలాగే మీరు కూడా ఇటీవలి వరకు ఎన్నడూ ఎదురు చూడలేదు లేదా వినలేదు.
పరిమితి యొక్క సారాంశం ఏమిటంటే, మీరు మీ పరిచయాలకు వెలుపల ఉన్న వ్యక్తుల కోసం చాలా తరచుగా శోధనను ఉపయోగిస్తుంటే (ఖచ్చితమైన కొలమానాలు లేవు, అల్గోరిథం మీ చర్యల ఆధారంగా నిర్ణయిస్తుంది - మీరు ఎంత తరచుగా మరియు ఎంత శోధించారు, వ్యక్తులను జోడించారు), ఆపై శోధన ఫలితం 1000కి బదులుగా మూడు ప్రొఫైల్‌లకు పరిమితం చేయబడుతుంది (డిఫాల్ట్ 100 పేజీలు, ఒక్కో పేజీకి 10 ప్రొఫైల్‌లు). ప్రతి నెల ప్రారంభంలో పరిమితి రీసెట్ చేయబడుతుంది. సహజంగా, .
కానీ చాలా కాలం క్రితం, పెట్ ప్రాజెక్ట్ కోసం, నేను లింక్డ్‌ఇన్ శోధనతో చాలా ఆడటం ప్రారంభించాను మరియు అకస్మాత్తుగా ఈ పరిమితిని పొందాను. సహజంగానే, నేను దీన్ని పెద్దగా ఇష్టపడలేదు, ఎందుకంటే నేను దీన్ని వాణిజ్య ప్రయోజనాల కోసం ఉపయోగించలేదు, కాబట్టి నా మొదటి ఆలోచన ఏమిటంటే పరిమితిని అధ్యయనం చేసి దాని చుట్టూ తిరగడానికి ప్రయత్నించడం.
[ఒక ముఖ్యమైన స్పష్టీకరణ: వ్యాసంలోని మెటీరియల్స్ సమాచార మరియు విద్యా ప్రయోజనాల కోసం మాత్రమే అందించబడ్డాయి. రచయిత వాటిని వాణిజ్య ప్రయోజనాల కోసం ఉపయోగించడాన్ని ప్రోత్సహించలేదు.]
మేము సమస్యను అధ్యయనం చేస్తున్నాము
మేము కలిగి ఉన్నాము: పేజీలతో కూడిన పది ప్రొఫైల్‌లకు బదులుగా, శోధన కేవలం మూడింటిని మాత్రమే అందిస్తుంది, దాని తర్వాత ప్రీమియం ఖాతా యొక్క “సిఫార్సు”తో బ్లాక్ చొప్పించబడుతుంది మరియు దిగువన అస్పష్టమైన మరియు క్లిక్ చేయలేని ప్రొఫైల్‌లు ఉన్నాయి.
వెంటనే, ఈ దాచిన ప్రొఫైల్‌లను చూడటానికి చేతి డెవలపర్ కన్సోల్‌కు చేరుకుంటుంది - బహుశా మనం కొన్ని బ్లర్రింగ్ స్టైల్‌లను తీసివేయవచ్చు లేదా మార్కప్‌లోని బ్లాక్ నుండి సమాచారాన్ని సంగ్రహించవచ్చు. కానీ, చాలా ఊహించిన విధంగా, ఈ ప్రొఫైల్స్ కేవలం ఉన్నాయి మరియు సమాచారం నిల్వ చేయబడదు.
సరే, ఇప్పుడు నెట్‌వర్క్ ట్యాబ్‌ని చూద్దాం మరియు మూడు ప్రొఫైల్‌లను మాత్రమే అందించే ప్రత్యామ్నాయ శోధన ఫలితాలు నిజంగా పనిచేస్తాయో లేదో చూద్దాం. “/api/search/blended” కోసం మాకు ఆసక్తి ఉన్న అభ్యర్థనను మేము కనుగొన్నాము మరియు ప్రతిస్పందనను చూడండి.
ప్రొఫైల్‌లు `చేర్చబడిన` శ్రేణిలో వస్తాయి, కానీ అందులో ఇప్పటికే 15 ఎంటిటీలు ఉన్నాయి. ఈ సందర్భంలో, వాటిలో మొదటి మూడు అదనపు సమాచారంతో కూడిన వస్తువులు, ప్రతి వస్తువు నిర్దిష్ట ప్రొఫైల్‌లో సమాచారాన్ని కలిగి ఉంటుంది (ఉదాహరణకు, ప్రొఫైల్ ప్రీమియం కాదా )
తదుపరి 12 నిజమైన ప్రొఫైల్‌లు - శోధన ఫలితాలు, వాటిలో మూడు మాత్రమే మాకు చూపబడతాయి. మీరు ఇప్పటికే ఊహించినట్లుగా, ఇది అదనపు సమాచారాన్ని (మొదటి మూడు వస్తువులు) స్వీకరించే వారిని మాత్రమే చూపుతుంది. ఉదాహరణకు, మీరు పరిమితి లేకుండా ప్రొఫైల్ నుండి సమాధానాన్ని తీసుకుంటే, మీరు 28 ఎంటిటీలను అందుకుంటారు - అదనంగా 10 వస్తువులు. సమాచారం మరియు 18 ప్రొఫైల్‌లు.
పరిమితి లేకుండా ప్రొఫైల్ కోసం సమాధానం
సరిగ్గా 10 అభ్యర్థించబడినప్పటికీ, 10 కంటే ఎక్కువ ప్రొఫైల్‌లు ఎందుకు వస్తాయి మరియు అవి ఏ విధంగానూ ప్రదర్శనలో పాల్గొనవు, తదుపరి పేజీలో కూడా అవి ఉండవు - నాకు ఇంకా తెలియదు. మీరు అభ్యర్థన URLని విశ్లేషిస్తే, ఆ కౌంట్=10 (ప్రతిస్పందనలో ఎన్ని ప్రొఫైల్‌లు తిరిగి రావాలి, గరిష్టంగా 49) అని మీరు చూడవచ్చు.
ఈ విషయంపై ఏవైనా వ్యాఖ్యలను స్వీకరించడానికి నేను సంతోషిస్తాను.
ప్రయోగం చేద్దాం
సరే, ఇప్పుడు మనకు ఖచ్చితంగా తెలిసిన ముఖ్యమైన విషయం ఏమిటంటే, ప్రతిస్పందనలో అవి మనకు చూపించే దానికంటే ఎక్కువ ప్రొఫైల్‌లు ఉన్నాయి. పరిమితి ఉన్నప్పటికీ మనం మరింత డేటాను పొందగలమని దీని అర్థం. పొందడం ఉపయోగించి నేరుగా కన్సోల్ నుండి APIని లాగడానికి ప్రయత్నిద్దాం.
ఊహించినట్లుగానే, మాకు ఎర్రర్ వచ్చింది, 403. ఇది భద్రత కారణంగా జరిగింది, ఇక్కడ మేము CSRF టోకెన్‌ని పంపడం లేదు (. క్లుప్తంగా, ప్రతి అభ్యర్థనకు ప్రత్యేకమైన టోకెన్ జోడించబడుతుంది, ఇది ప్రామాణికత కోసం సర్వర్‌లో తనిఖీ చేయబడుతుంది).
ఇది ఏదైనా ఇతర విజయవంతమైన అభ్యర్థన నుండి లేదా కుక్కీల నుండి కాపీ చేయబడవచ్చు, ఇక్కడ అది 'JSESSIONID' ఫీల్డ్‌లో నిల్వ చేయబడుతుంది.
టోకెన్ ఎక్కడ దొరుకుతుందిమరొక అభ్యర్థన యొక్క శీర్షిక:
లేదా కుక్కీల నుండి, నేరుగా కన్సోల్ ద్వారా:
మళ్లీ ప్రయత్నిద్దాం, ఈసారి మనం పొందేందుకు సెట్టింగ్‌లను పాస్ చేస్తాము, దీనిలో మన csrf-టోకెన్‌ను హెడర్‌లో పారామీటర్‌గా పేర్కొంటాము.
విజయం, మేము మొత్తం 10 ప్రొఫైల్‌లను అందుకుంటాము. :tada:
హెడర్‌లలో వ్యత్యాసం కారణంగా, ప్రతిస్పందన యొక్క నిర్మాణం అసలు అభ్యర్థనలో స్వీకరించిన దానికంటే కొద్దిగా భిన్నంగా ఉంటుంది. మీరు csrf టోకెన్ పక్కన మా ఆబ్జెక్ట్‌కి 'Accept: 'application/vnd.linkedin.normalized+json+2.1'ని జోడిస్తే మీరు అదే నిర్మాణాన్ని పొందవచ్చు.
జోడించిన హెడర్‌తో ఉదాహరణ ప్రతిస్పందన
తరువాత ఏమిటి?
అప్పుడు మీరు ఇండెక్స్‌కు గురిపెట్టి `ప్రారంభం` పరామితిని సవరించవచ్చు (మాన్యువల్‌గా లేదా ఆటోమేట్), దీని నుండి మాకు మొత్తం శోధన ఫలితం నుండి 10 ప్రొఫైల్‌లు (డిఫాల్ట్ = 0) ఇవ్వబడతాయి. మరో మాటలో చెప్పాలంటే, ప్రతి అభ్యర్థన తర్వాత దాన్ని 10 పెంచడం ద్వారా, మేము సాధారణ పేజీల వారీ అవుట్‌పుట్, ఒకేసారి 10 ప్రొఫైల్‌లను పొందుతాము.
ఈ దశలో పెట్ ప్రాజెక్ట్‌లో పని చేయడం కొనసాగించడానికి నాకు తగినంత డేటా మరియు స్వేచ్ఛ ఉంది. కానీ ఈ డేటా ఇప్పటికే చేతిలో ఉన్నందున అక్కడికక్కడే ప్రదర్శించడానికి ప్రయత్నించకపోవడం పాపం. మేము ముందు భాగంలో ఉపయోగించే ఎంబర్‌లోకి వెళ్లము. j క్వెరీ సైట్‌కు కనెక్ట్ చేయబడింది మరియు మెమరీలో ప్రాథమిక వాక్యనిర్మాణం యొక్క పరిజ్ఞానాన్ని తవ్విన తర్వాత, మీరు ఈ క్రింది వాటిని కొన్ని నిమిషాల్లో సృష్టించవచ్చు.
j క్వెరీ కోడ్
/* рендер блока, принимаем данные профиля и вставляем блок в список профилей используя эти данные */
const createProfileBlock = ({ headline, publicIdentifier, subline, title }) => {
$('.search-results__list').append(
`<li class="search-result search-result__occluded-item ember-view">
<div class="search-entity search-result search-result--person search-result--occlusion-enabled ember-view">
<div class="search-result__wrapper">
<div class="search-result__image-wrapper">
<a class="search-result__result-link ember-view" href="/te/in/${publicIdentifier}/">
<figure class="search-result__image">
<div class="ivm-image-view-model ember-view">
<img class="lazy-image ivm-view-attr__img--centered EntityPhoto-circle-4 presence-entity__image EntityPhoto-circle-4 loaded" src="http://www.userlogos.org/files/logos/give/Habrahabr3.png" />
</div>
</figure>
</a>
</div>
<div class="search-result__info pt3 pb4 ph0">
<a class="search-result__result-link ember-view" href="/te/in/${publicIdentifier}/">
<h3 class="actor-name-with-distance search-result__title single-line-truncate ember-view">
${title.text}
</h3>
</a>
<p class="subline-level-1 t-14 t-black t-normal search-result__truncate">${headline.text}</p>
<p class="subline-level-2 t-12 t-black--light t-normal search-result__truncate">${subline.text}</p>
</div>
</div>
</div>
<li>`
);
};
// дергаем апи, получаем данные и рендерим профили
const fetchProfiles = () => {
// токен
const csrf = 'ajax:9082932176494192209';
// объект с настройками запроса, передаем токен
const settings = { headers: { 'csrf-token': csrf } }
// урл запроса, с динамическим индексом старта в конце
const url = `https://www.linkedin.com/voyager/api/search/blended?count=10&filters=List(geoRegion-%3Ejp%3A0,network-%3ES,resultType-%3EPEOPLE)&origin=FACETED_SEARCH&q=all&queryContext=List(spellCorrectionEnabled-%3Etrue,relatedSearchesEnabled-%3Etrue)&start=${nextItemIndex}`;
/* делаем запрос, для каждого профиля в ответе вызываем рендер блока, и после инкрементируем стартовый индекс на 10 */
fetch(url, settings).then(response => response.json()).then(data => {
data.elements[0].elements.forEach(createProfileBlock);
nextItemIndex += 10;
});
};
// удаляем все профили из списка
$('.search-results__list').find('li').remove();
// вставляем кнопку загрузки профилей
$('.search-results__list').after('<button id="load-more">Load More</button>');
// добавляем функционал на кнопку
$('#load-more').addClass('artdeco-button').on('click', fetchProfiles);
// ставим по умолчания индекс профиля для запроса
window.nextItemIndex = 0;
మీరు దీన్ని నేరుగా శోధన పేజీలోని కన్సోల్‌లో చేస్తే, ఇది ప్రతి క్లిక్‌తో 10 కొత్త ప్రొఫైల్‌లను లోడ్ చేసే బటన్‌ను జోడిస్తుంది మరియు వాటిని జాబితాలో అందిస్తుంది. అయితే, దీన్ని చేయడానికి ముందు టోకెన్ మరియు URLని అవసరమైన దానికి మార్చండి. ప్రొఫైల్ బ్లాక్ పేరు, స్థానం, స్థానం, ప్రొఫైల్‌కి లింక్ మరియు ప్లేస్‌హోల్డర్ ఇమేజ్‌ని కలిగి ఉంటుంది.
తీర్మానం
అందువల్ల, కనీస ప్రయత్నంతో, మేము బలహీనమైన ప్రదేశాన్ని కనుగొనగలిగాము మరియు పరిమితులు లేకుండా మా శోధనను తిరిగి పొందగలిగాము. డేటా మరియు దాని మార్గాన్ని విశ్లేషించడానికి ఇది సరిపోతుంది, అభ్యర్థనను పరిశీలించండి.
ఇది లింక్డ్‌ఇన్‌కు తీవ్రమైన సమస్య అని నేను చెప్పలేను, ఎందుకంటే ఇది ఎటువంటి ముప్పును కలిగి ఉండదు. అటువంటి "పరిష్కారాల" కారణంగా గరిష్టంగా లాభాన్ని కోల్పోతుంది, ఇది ప్రీమియం కోసం చెల్లించకుండా ఉండటానికి మిమ్మల్ని అనుమతిస్తుంది. సైట్ యొక్క ఇతర భాగాల సరైన ఆపరేషన్ కోసం బహుశా అటువంటి సర్వర్ ప్రతిస్పందన అవసరం కావచ్చు లేదా ఇది డెవలపర్ల యొక్క సోమరితనం మరియు వనరుల కొరత కారణంగా దీన్ని బాగా చేయడానికి అనుమతించదు. (ఈ పరిమితి జనవరి 2015లో కనిపించింది; దీనికి ముందు పరిమితి లేదు).
PS
సహజంగానే, j క్వెరీ కోడ్ సామర్థ్యాలకు చాలా ప్రాచీనమైన ఉదాహరణ. ప్రస్తుతానికి నేను నా అవసరాలకు అనుగుణంగా బ్రౌజర్ పొడిగింపును సృష్టించాను. ఇది నియంత్రణ బటన్‌లను జోడిస్తుంది మరియు చిత్రాలు, ఆహ్వాన బటన్ మరియు సాధారణ కనెక్షన్‌లతో పూర్తి ప్రొఫైల్‌లను అందిస్తుంది. అదనంగా, ఇది లొకేషన్‌లు, కంపెనీలు మరియు ఇతర విషయాల కోసం ఫిల్టర్‌లను డైనమిక్‌గా సేకరిస్తుంది మరియు కుక్కీల నుండి టోకెన్‌ను తిరిగి పొందుతుంది. కాబట్టి ఇకపై ఏదైనా హార్డ్‌కోడ్ చేయవలసిన అవసరం లేదు. సరే, ఇది అదనపు సెట్టింగ్‌ల ఫీల్డ్‌లను జోడిస్తుంది, అలాగే "ఒకసారి ఎన్ని ప్రొఫైల్‌లను అభ్యర్థించాలి, గరిష్టంగా 49 వరకు."
నేను ఇంకా ఈ జోడింపుపై పని చేస్తున్నాను మరియు దానిని ప్రజలకు విడుదల చేయడానికి ప్లాన్ చేస్తున్నాను. మీకు ఆసక్తి ఉంటే వ్రాయండి.
మూలం: www.habr.com