RU2015128919A - Способ и сервер определения измерений в пользовательском интерактивном взаимодействии со страницей результатов поиска - Google Patents

Способ и сервер определения измерений в пользовательском интерактивном взаимодействии со страницей результатов поиска Download PDF

Info

Publication number
RU2015128919A
RU2015128919A RU2015128919A RU2015128919A RU2015128919A RU 2015128919 A RU2015128919 A RU 2015128919A RU 2015128919 A RU2015128919 A RU 2015128919A RU 2015128919 A RU2015128919 A RU 2015128919A RU 2015128919 A RU2015128919 A RU 2015128919A
Authority
RU
Russia
Prior art keywords
user
distributions
change
indicators
search results
Prior art date
Application number
RU2015128919A
Other languages
English (en)
Other versions
RU2637899C2 (ru
Inventor
Глеб Геннадьевич Гусев
Кирилл Валерьевич Николаев
Алексей Валерьевич Друца
Original Assignee
Общество С Ограниченной Ответственностью "Яндекс"
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Общество С Ограниченной Ответственностью "Яндекс" filed Critical Общество С Ограниченной Ответственностью "Яндекс"
Priority to RU2015128919A priority Critical patent/RU2637899C2/ru
Priority to US15/206,572 priority patent/US10339561B2/en
Publication of RU2015128919A publication Critical patent/RU2015128919A/ru
Application granted granted Critical
Publication of RU2637899C2 publication Critical patent/RU2637899C2/ru

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0242Determining effectiveness of advertisements
    • G06Q30/0246Traffic
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201Market modelling; Market analysis; Collecting market data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0255Targeted advertisements based on user history
    • G06Q30/0256User search

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Business, Economics & Management (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Transfer Between Computers (AREA)
  • Probability & Statistics with Applications (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Physics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Computational Mathematics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Human Computer Interaction (AREA)
  • Operations Research (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Algebra (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Software Systems (AREA)

Claims (42)

1. Способ определения изменений в пользовательском интерактивном взаимодействии между первой и второй версиями страницы результатов поиска (SERP); причем вторая версия страницы результатов поиска (SERP) является модифицированной версией страницы результатов поиска (SERP), а способ выполняется на сервере и включает в себя:
представление первой версии страницы результатов поиска (SERP) первому набору пользователей и второй версии страницы результатов поиска (SERP) второму набору пользователей;
оценку первых показателей и вторых показателей пользовательских взаимодействий с первой и второй версиями страницы результатов поиска (SERP) соответственно, причем пользовательские взаимодействия принадлежат к предварительно определенному типу пользовательских взаимодействий;
определение первого и второго распределений первых и вторых показателей пользовательских взаимодействий соответственно;
анализ первого и второго распределений совместно для определения степени изменений в пользовательском интерактивном взаимодействии, причем анализ включает в себя:
определение набора соотношений, причем каждое соотношений в наборе соотношений является соотношением между значением первого распределения и соответствующим значением второго распределения для каждого показателя пользовательского взаимодействия, соответственно;
определение самого низкого соотношения и самого высокого соотношения в наборе соотношений, причем самое низкое соотношение указывает на самое малое относительное изменение между первым и вторым распределениями, а самое высокое соотношение указывает на самое большое относительное изменение между первым и вторым распределениями;
определение степени изменения пользовательского интерактивного взаимодействия на основе сочетания самого низкого и самого высокого соотношений; и
определение статистической значимости степени изменения в пользовательском интерактивном взаимодействии;
в ответ на тот факт, что степень изменения в пользовательском интерактивном взаимодействии статистически значима, определение того, что в пользовательском интерактивном взаимодействии между первой и второй версиями страницы результатов поиска (SERP) произошло изменение.
2. Способ по п. 1, в котором анализ дополнительно включает в себя:
определение пары распределений, по меньшей мере частично основанных на самом высоком и самом низком соотношениях, причем определение включает в себя разложение первого и второго распределений на первую и вторую взвешенные суммы пары распределений соответственно; и
определение того, положительно или отрицательно определенное изменение в пользовательском интерактивном взаимодействии на основе пары распределений.
3. Способ по п. 1, в котором определение первого и второго распределений включает в себя дискретизацию первых показателей и вторых показателей пользовательских взаимодействий на бины показателей пользовательских взаимодействий, причем анализ включает в себя:
каждое соотношение в наборе соотношений является соотношением между значением первого распределения и соответствующим значением второго распределения для каждого бина показателей пользовательских взаимодействий, соответственно.
4. Способ по п. 1, в котором сочетание самого низкого и самого высокого соотношения определяется с использованием:
Figure 00000001
.
5. Способ по п. 1, в котором определение статистической значимости степени изменения в пользовательском интерактивном взаимодействии включает в себя применение по меньшей мере одного из:
критерия Колмогорова-Смирнова
сочетания способа «вытаскивания»/бутстреппинга с одновыборочным критерием Стьюдента.
6. Способ по п. 2, в котором определение того, положительно или отрицательно определенное изменение в пользовательском интерактивном взаимодействии, основанное на паре распределений, включает в себя сравнение соответствующих средних значений каждого распределения в паре распределений с учетом предварительно определенного типа пользовательских взаимодействий.
7. Способ по п. 3, в котором бины первых показателей пользовательских взаимодействий обладают такими же интервалами, как и бины вторых показателей пользовательских взаимодействий.
8. Сервер, включающий в себя процессор и машиночитаемые инструкции для определения возникновения изменений в пользовательском интерактивном взаимодействии между первой и второй версиями страницы результатов поиска (SERP); причем вторая версия страницы результатов поиска (SERP) является модифицированной версией страницы результатов поиска (SERP), причем процессор выполнен с возможностью осуществлять:
представление первой версии страницы результатов поиска (SERP) первому набору пользователей и второй версии страницы результатов поиска (SERP) второму набору пользователей;
оценку первых показателей и вторых показателей пользовательских взаимодействий с первой и второй версиями страницы результатов поиска (SERP) соответственно, причем пользовательские взаимодействия принадлежат к предварительно определенному типу пользовательских взаимодействий;
определение первого и второго распределений первых и вторых показателей пользовательских взаимодействий соответственно;
анализ первого и второго распределений совместно для определения степени изменений в пользовательском интерактивном взаимодействии, причем анализ включает в себя:
определение набора соотношений, причем каждое соотношений в наборе соотношений является соотношением между значением первого распределения и соответствующим значением второго распределения для каждого показателя пользовательского взаимодействия, соответственно;
определение самого низкого соотношения и самого высокого соотношения в наборе соотношений, причем самое низкое соотношение указывает на самое малое относительное изменение между первым и вторым распределениями, а самое высокое соотношение указывает на самое большое относительное изменение между первым и вторым распределениями;
определение степени изменения пользовательского интерактивного взаимодействия на основе сочетания самого низкого и самого высокого соотношений; и
определение статистической значимости степени изменения в пользовательском интерактивном взаимодействии;
в ответ на тот факт, что степень изменения в пользовательском интерактивном взаимодействии статистически значима, определение того, что в пользовательском интерактивном взаимодействии между первой и второй версиями страницы результатов поиска (SERP) произошло изменение.
9. Сервер по п. 8, в котором анализ дополнительно включает в себя:
определение пары распределений, по меньшей мере частично основанных на самом высоком и самом низком соотношениях, причем это определение включает в себя разложение первого и второго распределений на первую и вторую взвешенные суммы пары распределений соответственно; и
определение того, положительно или отрицательно определенное изменение в пользовательском интерактивном взаимодействии на основе пары распределений.
10. Сервер по п. 8, в котором определение первого и второго распределений включает в себя дискретизацию первых показателей и вторых показателей пользовательских взаимодействий на бины показателей пользовательских взаимодействий, причем анализ включает в себя:
каждое соотношение в наборе соотношений является соотношением между значением первого распределения и соответствующим значением второго распределения для каждого бина показателей пользовательских взаимодействий, соответственно.
11. Сервер по п. 8, в котором сочетание самого низкого и самого высокого соотношения определяется с использованием:
Figure 00000002
.
12. Сервер по п. 8, в котором определение статистической значимости степени изменения в пользовательском интерактивном взаимодействии включает в себя применение по меньшей мере одного из:
критерия Колмогорова-Смирнова
сочетания способа «вытаскивания»/бутстреппинга с одновыборочным критерием Стьюдента.
13. Сервер по п. 9, в котором определение того, положительно или отрицательно определенное изменение в пользовательском интерактивном взаимодействии, основанное на паре распределений, включает в себя сравнение соответствующих средних значений каждого распределения в паре распределений с учетом предварительно определенного типа пользовательских взаимодействий.
14. Сервер по п. 10, в котором бины первых показателей пользовательских взаимодействий обладают такими же интервалами, как и бины вторых показателей пользовательских взаимодействий.
RU2015128919A 2015-07-16 2015-07-16 Способ и сервер определения изменений в пользовательском интерактивном взаимодействии со страницей результатов поиска RU2637899C2 (ru)

Priority Applications (2)

Application Number Priority Date Filing Date Title
RU2015128919A RU2637899C2 (ru) 2015-07-16 2015-07-16 Способ и сервер определения изменений в пользовательском интерактивном взаимодействии со страницей результатов поиска
US15/206,572 US10339561B2 (en) 2015-07-16 2016-07-11 Method of detecting a change in user interactivity with a SERP

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2015128919A RU2637899C2 (ru) 2015-07-16 2015-07-16 Способ и сервер определения изменений в пользовательском интерактивном взаимодействии со страницей результатов поиска

Publications (2)

Publication Number Publication Date
RU2015128919A true RU2015128919A (ru) 2017-01-19
RU2637899C2 RU2637899C2 (ru) 2017-12-07

Family

ID=57776223

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2015128919A RU2637899C2 (ru) 2015-07-16 2015-07-16 Способ и сервер определения изменений в пользовательском интерактивном взаимодействии со страницей результатов поиска

Country Status (2)

Country Link
US (1) US10339561B2 (ru)
RU (1) RU2637899C2 (ru)

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7937340B2 (en) 2003-12-03 2011-05-03 Microsoft Corporation Automated satisfaction measurement for web search
US7444327B2 (en) * 2004-01-09 2008-10-28 Microsoft Corporation System and method for automated optimization of search result relevance
US20060074883A1 (en) * 2004-10-05 2006-04-06 Microsoft Corporation Systems, methods, and interfaces for providing personalized search and information access
US7975000B2 (en) * 2005-01-27 2011-07-05 Fmr Llc A/B testing of a webpage
US20070208730A1 (en) 2006-03-02 2007-09-06 Microsoft Corporation Mining web search user behavior to enhance web search relevance
US7831658B2 (en) 2006-05-22 2010-11-09 Google Inc. Generating landing page variants
US8117197B1 (en) 2008-06-10 2012-02-14 Surf Canyon, Inc. Adaptive user interface for real-time search relevance feedback
US7593928B2 (en) 2007-01-29 2009-09-22 Aol Llc Dynamically altering search result page layout to increase user response
US9223895B2 (en) 2007-09-28 2015-12-29 Yahoo! Inc. System and method for contextual commands in a search results page
US7856434B2 (en) * 2007-11-12 2010-12-21 Endeca Technologies, Inc. System and method for filtering rules for manipulating search results in a hierarchical search and navigation system
US8024336B2 (en) 2009-06-09 2011-09-20 Yahoo! Inc. System and method for development of search success metrics
US20110078131A1 (en) * 2009-09-30 2011-03-31 Microsoft Corporation Experimental web search system
US8874555B1 (en) * 2009-11-20 2014-10-28 Google Inc. Modifying scoring data based on historical changes
US8930339B2 (en) 2012-01-03 2015-01-06 Microsoft Corporation Search engine performance evaluation using a task-based assessment metric
US20130246383A1 (en) 2012-03-18 2013-09-19 Microsoft Corporation Cursor Activity Evaluation For Search Result Enhancement
US20140181066A1 (en) 2012-12-21 2014-06-26 Quentral S.r.I. Interest matching techniques using internet searches
WO2014105940A1 (en) * 2012-12-26 2014-07-03 Invodo, Inc. Techniques for measuring video profit
US20140365453A1 (en) 2013-06-06 2014-12-11 Conductor, Inc. Projecting analytics based on changes in search engine optimization metrics
US20150012852A1 (en) * 2013-07-08 2015-01-08 Kobo Incorporated User interface tool for planning an ab type of test

Also Published As

Publication number Publication date
RU2637899C2 (ru) 2017-12-07
US10339561B2 (en) 2019-07-02
US20170017992A1 (en) 2017-01-19

Similar Documents

Publication Publication Date Title
Pace et al. How similar are personality scales of the “same” construct? A meta-analytic investigation
Hak et al. How to interpret results of meta-analysis
Niederkrotenthaler et al. Changes in suicide rates following media reports on celebrity suicide: a meta-analysis
Green et al. Identifying bully victims: definitional versus behavioral approaches.
André Does trust mean the same for migrants and natives? Testing measurement models of political trust with multi-group confirmatory factor analysis
KR101698492B1 (ko) 소셜미디어 상의 사용자 컨텐츠 확산 영향력 측정 방법 및 장치
RU2017129409A (ru) Способ и устройство для создания модели качества веб-страницы
Hirst et al. Change in glomerular filtration rate over time in the Oxford Renal Cohort Study: observational study
Jun et al. Mediating role of learning persistence and engagement in relations among self-efficacy, intrinsic value and academic achievement
RU2015128919A (ru) Способ и сервер определения измерений в пользовательском интерактивном взаимодействии со страницей результатов поиска
Rendall et al. Evaluation of bias in estimates of early childhood obesity from parent-reported heights and weights
Cuffney et al. Response to King and Baker: limitations on threshold detection and characterization of community thresholds
RU2016105643A (ru) Способ и устройство для ликвидации скважины
Robinson et al. What does it take to falsify a psychological theory? A case study on recognition models of visual working-memory
Hobbs et al. Structure of the DSM-5 generalized anxiety disorder criteria among a large community sample of worriers
RU2019103573A (ru) Клеточно-связанные продукты активации комплемента в качестве диагностических биомаркеров волчанки в доклинической стадии
Bobrovitz et al. SeroTracker-ROB: reproducible decision rules for risk of bias assessment of seroprevalence studies
Bello et al. Association of a biomarker-based frailty index with telomere length in older US adults: Findings from NHANES 1999-2002
Koff et al. Older adolescents' perceptions of personal Internet use
Gallagher et al. Evaluation of threshold limit methods for sensory data
Cachola et al. Index for Frugal Innovation Assessment
Warren et al. Using entropy estimates for DAG-based ontologies
Sudarsono Characteristics Associated with Nurses and Midwives Stigma in People with HIV/AIDS (PLWHA) in The District Health Talun Blitar
Wu et al. Development and validation of the self-Assessment scales for Taiwanese EFL learners
Richard et al. Public trust in government: Case study in Kota Kinabalu...[et al.]

Legal Events

Date Code Title Description
FA92 Acknowledgement of application withdrawn (lack of supplementary materials submitted)

Effective date: 20170209

FZ9A Application not withdrawn (correction of the notice of withdrawal)

Effective date: 20170926

MM4A The patent is invalid due to non-payment of fees

Effective date: 20190717

NF4A Reinstatement of patent

Effective date: 20210527