тут є любителі Скали

[malyj_gorgan]

По роботі, через примху начальства, доводиться переписувати пару шматків коду з SQL на Скалу, тої Скали не знаючи зовсім. Але потрошки, потрошки... Проблема в тому, що це для внутрішнього нашого датастора, там компіляція/перевірка на помилки триває хвилину, а запуск найтривіальнішого коду займає хвилин 5-10, тому все помаленько дуже. Але, 80% уже готово...
...І раптом вперся в помилку, яку уже дві години не можу виправити. З того всього виглядає, що в dataframe.column.when() немає логічного "OR". Воно тупо ламається на значку "||"


Якщо це не баг, а фіча, поясніть мені, тупому, кому така фіча могла прийти в голову. І, основне, НАФІГА?

P.S. Цікаво, скільки з тих, хто користується Скалою, знає безсмертні рядки про
Лупайте сю скалу! Нехай ні жар, ні холод
Не спинять вас. Зносіть і труд, і спрагу, й голод
Бо вам призначено скалу сесю розбить.

Comments

[zhiva]

а як виглядає ваш виклик when? бо я тут трохи пошукала про scala spark or conditions in when, і наче люди таке успішно роблять.

[malyj_gorgan]

Там вище приклади є
dataframe.withColumn("column_name", when(boolean_statement, answer_if_true).otherwise(answer_if_false))

[ichthuss]

А якого типу тут boolean_statement? Я до чого: в скалівських DSL завжди треба танцювати від типів даних.

[malyj_gorgan]

Хороше питання.
Отого типу, який DataFrame.column, яко не заглиблюватися :)