![[personal profile]](https://www.dreamwidth.org/img/silk/identity/user.png){kind=small}
malyj_gorganУ вас є магазин з мільйоном (грубо кажучи, насправді, більше) найменувань товарів. Всіх найрізноманітніших видів. І ось ви взяли, і за кожним найменуванням порахували продажі протягом двох тридцятиденних періодів один за одним: X0 і X1. Розподіл кожного з іксів -- приблизнно power-law, p ~ x-α. І ото вирішив я побудувати гістограму того, що називається "lift" -- відносна зміна продаж від місяця до місяця:
(X1 - X0) / (X0 + ε)
Епсилон там для того, аби не було ділення на нуль. (Десь 20% кожного з іксів -- нулі, але пари, де нулями є і X0, і X1, в популяцію не входять). Гістограма, як ви розумієте, тягнеться від -1 до безмежної асимптоти. І ось що я спостерігаю, і що мені абсолютно незрозуміло, звідки таке береться:
Що це, блін, таке? Моє єстество протестує проти того, що це може бути якийсь бізнесовий ефект. Це щось числове, чиста арифметика. З корінням або в статистиці, або в програмуванні (тобто, як воно все в таблички записується) Але що?
Графіків не покажу, бо, то не можна, таємниця слідства, вотетовотвсьо.
UPDATE: Сам дотумкав. Ефект, насправді, бізнесовий, а я просто не подумав. Ці ікси -- місячні продажі. Розподіл продаж щомісяця має купу локальних максимумів в різних "круглих" числах: пропорційних 10, особливо 20, сотня, півтораста... Цього виявилося достатньо, щоби сумарний розподіл відносноі різниці проріс максимумами в особливо раціональних точках
UPDATE 2: Я тормоз. Круглі числа ні при чому, це банальний ефект постійної ціни на одиницю товару, тому для невеликих кількостей проданих юнітів що дельта, що Х0 в знаменнику, будуть пропорційними цілим числам. Дякуюichthuss за відповідь.
(X1 - X0) / (X0 + ε)
Епсилон там для того, аби не було ділення на нуль. (Десь 20% кожного з іксів -- нулі, але пари, де нулями є і X0, і X1, в популяцію не входять). Гістограма, як ви розумієте, тягнеться від -1 до безмежної асимптоти. І ось що я спостерігаю, і що мені абсолютно незрозуміло, звідки таке береться:
- Гістограма очікувано має максимума в нулі, плюс, великий пік в мінус одиниці, це ясно
- Але, крім того, є дуже чітко проявлені максимуми в 1, 2, 3, 4, ...
- Більше того, менш чітко проявлені, але видимі максимуми в 0.5, 1.5, 2.5 ...
- То було з позитивного боку, а зліва від нуля там є конкретні піки такі на 1/2, 2/3, 3/4, 4/5...
Що це, блін, таке? Моє єстество протестує проти того, що це може бути якийсь бізнесовий ефект. Це щось числове, чиста арифметика. З корінням або в статистиці, або в програмуванні (тобто, як воно все в таблички записується) Але що?
Графіків не покажу, бо, то не можна, таємниця слідства, вотетовотвсьо.
UPDATE: Сам дотумкав. Ефект, насправді, бізнесовий, а я просто не подумав. Ці ікси -- місячні продажі. Розподіл продаж щомісяця має купу локальних максимумів в різних "круглих" числах: пропорційних 10, особливо 20, сотня, півтораста... Цього виявилося достатньо, щоби сумарний розподіл відносноі різниці проріс максимумами в особливо раціональних точках
UPDATE 2: Я тормоз. Круглі числа ні при чому, це банальний ефект постійної ціни на одиницю товару, тому для невеликих кількостей проданих юнітів що дельта, що Х0 в знаменнику, будуть пропорційними цілим числам. Дякую
ichthuss за відповідь.
no subject
Date: 2023-08-30 11:29 pm (UTC)no subject
Date: 2023-08-30 11:55 pm (UTC)Ні, малих чисел там якраз мало -- це ж продажі реальних речей, вони недешеві. Але я вичислив, написав апдейт -- це такий груповий ефект "круглих" цін (набагато більше хріновин в житті коштують (округляючи до цілих доларів, аби ці всі ваші .99 не писати) десятку або двадцятку або сотку, ніж вісім з половиною чи двадцять чотири долари.
no subject
Date: 2023-08-31 12:20 am (UTC)no subject
Date: 2023-08-31 03:33 am (UTC)В баксах. І це не ціна, а місячні продажі. Але ефект той: надто багато товарів (кажу ж, мільйони наіменувань, найбільший ретейлер у світі, або другий найбільший, залежить, як нормалізувати) коштують цілі десятки доларів, багато найменувань мають продажі в одиницях штук на місяць, результат -- невеликі піки в місячних нетто на 10, 20, 30, 50, 80, 100, 120, 150... (це я кажу найпомітніші, дивлячись на гістограму невеликої вибірки)
no subject
Date: 2023-08-31 10:57 am (UTC)no subject
Date: 2023-08-31 03:16 pm (UTC)PS А я знаю, чого я до цього не допер сам. Настільки уже звик, до того, як наші цей дріб усеоеднюють: вони ділять усереднений чисельник на усереднений займенник. (Чому вони це роблять — окреме питання, маю підозру, того що ніхто їх не перевіряє, а на мене їм плювати.) Я сам зробив правильно, але в голові залишилися картинка того, як це рахують колеги…
no subject
Date: 2023-08-30 11:38 pm (UTC)А так звичайна людина може і 10 років купувати все те саме практично в такій самій кількості на місяць.
Подруге, не тільки ви рахуєте ці речі, а ще керівницьтво платить відділу маркетинга, за те щоб він заводив в магазин стабільну кількість клієнтів.
Тобто, магазину не влаштовує щоб клієнтів було дуже мало, але також не влаштовує, щоб було дуже багато, бо в першому випадку недовантаження основних засобів, а в другому доведеться переплачувати людям за переробіток.
- І вони намагаються маркетинговими засобами робити, щоб кожного дня приходив дуже стабільний потік з тих самих людей, щоб купували ровно стільки скільки заплановано.
Приклад маркетингового засобу - пей пер клік на гуглі - там є загальний бюджет, і відома ціна кліка (вони купуються на біржі), і можна встановлювати, скільки має бути кліків за день і що робити коли денний бюджет закінчиться (зазвичай встановлюють більше не купувати показів в цей день).
Якщо клік дуже точно таргетований (місто, район, гендер, час доби, ітд), то зазвичай є дуже чіткий зв"язок "стільки-то кліків - стільки-то купили".
А і ще, в малому бізнесі із цим часто бардак, і там постійно плачуть, що в них або клієнта нема або вони не знають як клієнта обслужити бо забагато реклами купили, а в великих бізнесах (мільйон найменувань товарів це звісно великий), ці речі дуже чітко налаштовують, що там і пусто не буває і черг нема.
no subject
Date: 2023-08-31 12:00 am (UTC)Це агрегатор багатьох малих бізнесів, тому відносна зміна продаж кожного наіменування там величезна. Кажу ж, якщо подивитися на продажі цього місяця, то більше 20% наіменувань, які цього місяця продалися, наступного місяця падають в нуль. Ну, в цьому наборі даних (маю підозру, найбільшому в світі після алібаби). Ні, кореляція x0 і x1 популяцій, все одно, висока, r2 десь 0.5 виходить, але гола цифра нічо не каже, графік розподілу x1(x) виглядає я суцільний килим з потовщенням вздовж діагоналі і грубими краями (ті ж самі нулі, про які вище)
Але я розібрався, написав апдейт
no subject
Date: 2023-08-31 12:35 am (UTC)А в бізнесів що працюють через агрегатор, 100% PPC система, ще й тому що вони намагаються втрамбуватись в специфічну групу оподаткування, яка зазвичай обмежена за обсягами.
Принцип такий - вони так планують продажі, щоб за місяць не вийти за межі обмеження групи оподаткування, і при цьому щоб в один день продавати стабільну кількість (ну щоб не перевантажувати персонал).
І звісно, ж жаба душить щоб продати мало, тож розраховують так щоб майже точно вписатись в обсяг, а це в випадку невеликої інфляції, будуть практично сталі ціни і постійно одні і ті самі цифри продажів.
Якщо вас турбують чіткі цифри цін, то це відома річ, покупці люблять круглі цифри і магазини намагаються їм підіграти, тим що також ставлять круглі цифри в цінники.
no subject
Date: 2023-08-31 12:42 am (UTC)no subject
Date: 2023-08-31 03:37 am (UTC)no subject
Date: 2023-08-31 04:17 am (UTC)Є така штука, воронка продажів. Там непрогнозована одна річ - кількість лідів на вході, все інше дуже чітко прораховується і дуже надійно повторюване.
- ППК використовується 99% бізнеса, саме тому що воно дуже класно дозволяє керувати лідами. Краник відчиняється і зачиняється рівно коли треба, і практично ідеально видає рівно стільки лідів і продажів скільки хочеться, і більшість людей намагаються його використати щоб зробити ідеально псевдовипадкові продажі, що типу випадково продажі розподіляються рівномірно, саме щоб в звітності виглядало все рівно.
Усі інші інструменти набагато меньш прогнозовані а ніхто не хоче за негарантоване платити, навіть коли воно коштує набагато дешевше.
no subject
Date: 2023-08-31 03:31 pm (UTC)Кожне найменування товару входить в супергрупу подібних. Ви шукаєте іграшку для ялинки з картинкою Супермена в рожевих трусах з зеленими сердечками, а таких в системі — п‘ять майже ідентичних, але від п‘яти різних продавців, тому різні коди товару. Який попадеться вам, а який попадеться наступному бажаючому — невідомо, бо там досить хитрий і непрозорий алгоритм пропозиції, помножений на не завжди передбачувані дії покупця при виборі. Тому і виходить, що один продавець продає цього місяця більше, а другийй може продати лише невелику кількість одиниць, а третій - жодної. А на наступний місяць все міняється
no subject
Date: 2023-08-31 04:19 pm (UTC)Так не може бути.
Алгоритм там має бути простий, але хитрий, бо він має бути добре масштабованим і добре передбачуваним.
А саме передбачуваність має бути в тому, щоб кожного місяця був запланований результат.
Подруге, система має відсипати справедливу кількість лідів, і в інтернеті дуже багато охочих піймати агрегатора на нерівному розподілі лідів і на цьому зробити бабло якимось чином.
Є дві речі, дуже принципові для країн що декларують капіталізм як свій шлях.
Поперше, в усіх мають бути рівні можливості, і це не обговорюється.
Подруге, є хакери, які намагаються знайти слабке місце в алгоритма розподілення, щоб якимось чином собі (чи комусь за гроші) зробити набагато більше лідів.
І от алгоритм розподілення має бути з одного боку простим, щоб він працював швидко і не потребував великих обчислювальних витрат а також щоб не потребувати гіпермегашвидких зв"язків (він розподілений в хмарі); а з іншого боку, в йому має бути кілька костилів, щоб враховувати загальносистемний розподіл, і щоб для завданої групи користувачів ЗА МІСЯЦЬ був гарантований відсоток від загальної кількості лідів.
Чому за місяць, бо якщо в малого бізнеса не буде місяць прибутку він може закритись, і керівницьтво агрегатора з кожи вистрибує щоб за місяць отримували приблизно цифру яку обіцяє маркетинг (+-50% може бути але не більше), і зазвичай костиль так працює, що скажімо раз на тиждень розраховується статистика (частіше складно зібрати дані з усіх серверів), і корегується видача, так щоб наступний тиждень збалансував небаланси попереднього.
Самі алгоритми беруться з геймдеву, там є фах геймдизайнера або близький левелдезігнер, в його всі характеристики персонажів і ігрових айтемів вводяться в таблицю в екселі і рахуються ймовірні варіанти кінця битви, так щоб вирівняти шанси для одного рівня гравців, бо інакше людям буде нецікаво грати.
Тобто алгоритм дуже простий, а балансується отими коефіцієнтами.
Іноді геймдиз лажає і якась комбінація стає абсолютно сильною, тоді найпросунутіші контори роблять компенсації постраждалим, роздаючі нібито випадкові подарунки (можуть просто кинути під ноги лутбокс, можуть запросити на якусь подію, типу десь типу випадково випаде багато руди і гравця туди запросять).
Але див вище, алгоритм не може бути складний, бо обчислювальні ресурси і CAP теорема, і в той же час має бути можливість підкрутити результат ЗА МІСЯЦЬ, ніхто не очікує що воно буде ідеально кожного дня рівні цифри видавати.
no subject
Date: 2023-08-31 05:29 pm (UTC)Так є, причому, масштабно є.
Деталі можу хіба приватом, але загальна ідея така: кожен з наших суперменів в рожевих трусах має трошки інакший лістінґ. Десь пропущений в описі матеріал трусів, десь не всі розміри, десь в бренді помилка, десь бренд не написаний, і т. п. Далі: покупці у нас по всій країні, від Аляски до Флориди, і по всій країні же -- проміжні склади, звідки той товар можуть привезти. Рідко яке наіменування товару представлене у всіх fullfilment центрах, і майже ніхто і ніколи не має повного набору розмірів/стилів у всіх центрах одночасно. Тобто, залежно від того, коли і де купуватимуть наступного супермена, алгоритм пошуку враховуватиме близькість адреси покупця і найближчого складу, і вибиратиме інший товар.
Але це все "об'єктивні" причини, а є ще ціла жменя суб'єктивних: кінцевий продавець може доплачувати агрегатору, щоби його товари за малу копійку з'являлися в паралельних пошуках, або щоби вони випливали вище, ніж того заслуговують, в прямих пошуках (це два різних види "рекламного продукту" від агрегатора), може використовувати "емейл-капманію" (і вибірка покупців, які купували щось віддалено "подібне" останніми місяцями отримає спам з рекламою суперменів). Ще можна запустити кампанію тимчасової знижки, яка строго регулюється агрегатором, але існує. Оскільки через агрегатор продають не лише великі бізнеси, де всякі такі суб'єктивні штуки робить програма і сигналізує агрегатору через прямі ейпіай-канали, але і сотні тисяч маленьких продавців, які кожну з цих дій виконують шляхом клацання мишкою на вебсайті або тицяння пальцем в телефонний епп, то там чорт ногу вломить. Словом, в таких масштабах все виглядає на порядки інакше, ніж у будь якого одног продавця. Я, до речі, придумав чудову аналогією: це як рахувати продажі по всіх основних українських базарах одночасно: одеський "сьомий кілометр", чернівецька "калинка", київські "озерки", як там в Хмельницькому їх базар називається... Ніби, все те ж саме, але якщо подивитися на кожне конкретний контейнер/кіоск -- дисперсія зашкалить
no subject
Date: 2023-08-31 10:55 pm (UTC)no subject
Date: 2023-08-31 11:50 pm (UTC)Але то пусте: ми можемо погоджуватися про те, які там механізми і хто пише які алгоритми, в даному випадку то байдуже. Я дивлюся на реальні продажі реальних продавців і бачу, що і наскільки продалося. Якщо факти суперечать механізмам "як воно може бути", то це не значить, що так бути не може, це значить, що може бути і інакше. Ви написали: "Відносна зміна продажів між місяцями, насправді досить мала в стабільному світі" Так от, або в США останній рік стабільно нестабільний, або ми по-різному розуміємо, що таке "мала відносна зміна" Серед усіх наіменувань (так, як я їх визначив: магазин плюс артикул) товарів, у вікно плюс-мінус 25% від минулого місяця на наступний місяць попадає лише кожен сьомий, рівно 15%. Якщо відсікти геть дрібні товари з минуломісячними продажами менше $10, то виходить більше, 21%
А вже які там алгоритми вибору, хто їх писав, і як воно все працює -- хай буде по вашому. .
no subject
Date: 2023-09-01 12:08 am (UTC)Та ви вже самі себе заплутали. Лише вчора говорили, що ви дивитесь в статистику ДО ТОГО як продавець щось побачив, отже продажу ще не було.
Це просто несолідно, якось визначиться, ви за розумних чи за красивих.
Факти механизмам не суперечать. Є штук 5 статистичних розподілень, на всі випадки життя, але графіки красиво виглядають лише коли вибірка досить велика і коли нема спотворень розподілення алгоритмом чи ще чимось.
Якщо ж принципово вибирається якась маленька вибірка, це довгий хвіст, там все що завгодно може бути.
І я вже навів приклади спотворюючих механізмів. Фактично, якщо використати якісь технології витягування даних з шумів, то ви побачите оті механізми збільшеними.
no subject
Date: 2023-09-01 03:52 am (UTC)???
Ми переловлюємо сигнал до того, як його побчив продавець. "отже продажу не було" -- це уже домисли. Чого б вон було статистикою продажів, якщо подажу не було? Згадайте, до чого це була відповідь: до того, що продавці підшаманюють звітність. От я і пишу: ми знаємо про продаж раніше, ніж продавець, він звітність отримує від нас, або у себе в статиці на нашому порталі, або, для великих продавців, на власному сервері, який цю інформацію отримав від нас через відповідні API -- швидко, може, навіть, менше секунди, але за визначенням пізніше за нас.Тому, що би там продавці зі звітністю не шаманили, ми знаємо правду.
Словом, тойво, не треба придумувати свої інтерпретації і з ними ж боротися, це називається "опудало"
При чому тут п'ять розподілів на всі випадки життя. Там все не від розподілів залежить, мені ichtuss мусив у це пальцем ткнути, бо вчора не доходило, але спотворюючі механізми тут ні при чому. Банальний наслідок того, що значна частина найменувань має продажі в одиницях штук на місяць, от і вся загадка. Я вчора пригальмував, але, дивлячись на вас -- не я один :)
no subject
Date: 2023-09-01 12:50 pm (UTC)Може ви й бугалтерію за його здаєте і податки сплачуєте?
> швидко, може, навіть, менше секунди, але за визначенням пізніше за нас
Якщо ви за його звітність в податкову подаєте, то я б погодився. То подаєте? Чи ви тільки з оцих цифр висновки робите?
no subject
Date: 2023-09-01 03:57 pm (UTC)Якби я міг сказати, де саме я працюю, даючи більше конкретики, було би простіше, але вже дав достатньо натяків, яка це фірма, але прямим текстом сказати не можу, бо, буду щирий, побоююся. Якщо вам здається, що я тут щось напридумав чи перекрутив -- пропоную відкласти сварку на після перемоги, бо краще на рівні натяків я розказати не вмію, а коли на мене несправедливо погано думають -- воно забирає душевні сили. Краще я ті душевні сили потрачу на щось корисне для всіх нас
no subject
Date: 2023-09-01 07:43 pm (UTC)З чого ви вирішили що хтось на вас погано думає?
Все що ви показали, абсолютно нормальна поведінка людини що боїться. Інше питання, що це норма для совка, аж так боятись, в світі такого нема, але ок.
І можете не виправдовуватись, маєте повне право просто сказати що не можете надати подробиць, цього абсолютно достатньо.
no subject
Date: 2023-09-01 07:51 pm (UTC)Я уже якось писав, як не в постах, то в коментах, що моє нинішнє оточення в плані комбінації ідеологізації і контролю за всім і всіма, відчувається, як совок, я його добре застав, незалежність уже в університеті зустрів. З задоволенням би кинув це місце і поглядаю набік, але поки що терплю з меркантильних причин.