Поиск  Пользователи  Правила  Войти
Форумы "Планета Excel" » Вопросы по Microsoft Excel
Страницы: 1 2 След.
RSS
Фильтры данных в Power Pivot, Нужно отфильтровать данные для очень большого списка страниц
 
#1
16.10.2018 16:22:31
Добрый день.
Столкнулся с проблемой при работе с файлом, в котором более 3 миллионов строк.
Открыть его можно только в модели данных в Power Pivot.
Вроде бы файл загружается в модель данных, но как с ним дальше работать - непонятно.
Подскажите, как фильтровать данные?
Как преобразовывать данные в таблице (добавлять столбцы, значения и др.)?
Пока что я вижу, что выводится некое ограничение - http://joxi.ru/l2Zxp1HwyplVrJ
Как его преодолеть?
Помогите, пожалуйста.
Спасибо.
 
 
 
#2
16.10.2018 17:01:38
Название темы ни о чем, описание тоже. Зайдите в приемы и почитайте про Power pivot, Power query. Вбейте в поиск Яндекса: Краткое руководство. Обучение DAX за 30 минут.
 
 
 
#3
16.10.2018 17:04:44
Не осуждайте меня, лучше помогите, пожалуйста.
Я бы не стал писать, если бы нашел ответ в справках.
 
 
 
#4
16.10.2018 17:10:50
Доброе время суток.
Цитата
singleton написал:
если бы нашел ответ в справках.
Вы хотя бы опишите, что вы там пытались найти. Как мне кажется, то вам лучше грузить данные в таблицу базы Access и там уже делать то, что вы так и не желаете сообщить форуму - с телефона пишите?
 
 
 
#5
16.10.2018 17:12:45
Цитата
Андрей VG написал:
Вы хотя бы опишите, что вы там пытались найти.
как фильтровать данные по всему списку в таблице.
Мне это необходимо, и я не могу найти информации, как это сделать, преодолев ограничение.
Какие-то еще вводные данные от меня необходимы?
 
 
 
#6
16.10.2018 17:24:16
Цитата
2.1. Название темы должно отражать смысл проблемы. Темы с названиями "Помогите", "Help", "Срочно", "Нужен макрос" - плохая идея. Модераторы имеют право переименовать, удалить или закрыть такие темы без предупреждения.
Предлагайте. Модераторы переименуют.
 
 
 
#7
16.10.2018 17:25:02
Цитата
singleton написал:
я не могу найти информации
Допустим, из трёх миллионов в столбце 25000 уникальных значений. Человек может прочитать одно из них за полсекунды, тогда чтобы просмотреть все потребуется 3,5 часа. Вопрос - зачем? Особенно в Power Pivot?
Изменено: Андрей VG - 16.10.2018 17:26:20
 
 
 
#8
16.10.2018 18:05:28
Цитата
Андрей VG написал:
Допустим, из трёх миллионов в столбце 25000 уникальных значений.
суть в том, что из 3 миллионов значений 3 миллиона уникальных.
Если бы было иначе, я бы не обращался к помощи.
Теперь вы понимаете суть проблемы?
Как ее можно решить?
 
 
 
#9
16.10.2018 18:14:16
Цитата
singleton написал:
3 миллиона уникальных.
Повторю вопрос - зачем это делать, причём именно в Power Pivot?
 
 
 
#10
16.10.2018 18:24:32
Из-за неведения рождается флуд :)
для этого и придумали правила. singleton, - пример сделайте (вот только все 3мил строк прикладывать не нужно:) )
В жизни нет ничего невозможного! Есть только недостаток знаний и умений.
 
 
 
#11
16.10.2018 18:36:42
Александр, коллега, а чем поможет пример? Если не понятно зачем фильтровать из трёх миллионов уникальных значений некоторый набор, расставляя галочки против некоторых значений которые нужны. Это же - даже если прокручивать по 100 значений в секунду, то чтобы прокрутить весь список, чтобы визуально определить какие значения нам нужны и поставить галочку потребуется более 8 часов. Я смысла такого подхода не понимаю, а ТС пишет чего тут не понятного :(
 
 
 
#12
16.10.2018 19:59:56
singleton, вы описываете проблему, а не задачу, которую пытаетесь решить. Создаете файл пример с реальной структурой, но из 100 строк и говорите, что хотите получить из этого массива - вам подскажут способ как лучше это сделать. Для чего фильтр вам? В модели, которая загружена в Power pivot можно ставить фильтры, но это никак не для анализа и обработки данных. Обработка данных делается в Power query, анализ в сводных таблицах с помощью мер и доп.столбцов из модели. Это все описано в элементарной справке. Что вам не понятно?
 
 
 
#13
17.10.2018 09:35:14
Коллеги, я не знаю, какие еще вводные данные по задаче нужны от меня? Какие примеры и что они должны отражать? Поясните, пожалуйста.
Работа с файлами в 100 тысяч-3 миллиона строк - это моя рабочая задача.
Мне нужно:
  • открывать эти файлы
  • фильтровать данные в них
  • обрабатывать данные в них.

Почему именно в Power Pivot - потому что Excel не обрабатывает такие файлы, и не всегда открывает.
Power Query уже не помогает.
Сейчас я не могу ни обработать эти файлы, ни отфильтровать данные в них, ни даже открыть некоторые из них.
То, что описано в элементарной справке - это сценарий того, как все должно работать. Что делать при появлении ошибки - из них неясно.
И нигде я не могу найти информации, как преодолеть эти ошибки, чтобы я мог выполнить свои задачи.
Поэтому и прошу помощи у вас. И искренне надеюсь на нее.
 
 
 
#14
17.10.2018 09:38:27
singleton, думаю, что такие объёмы данных Вам надо обрабатывать, например, в Access.

Формула массива (ФМ) вводится Ctrl+Shift+Enter
Memento mori
 
 
 
#15
17.10.2018 09:42:05
Цитата
singleton написал:
какие еще вводные данные по задаче нужны от меня
Вам уже уважаемый StepanWolkoff, описал.
Цитата
singleton написал:
Power Query уже не помогает.
Вот чет то я не верю...Лично мной обрабатывается 2 раза в неделю файл на входе 4 гига, на выходе 2 метра.

Тут не сообщество колдунов и предсказателей. Мы не видим Вашу проблему
В жизни нет ничего невозможного! Есть только недостаток знаний и умений.
 
 
 
#16
17.10.2018 09:57:13
Цитата
JayBhagavan написал:
надо обрабатывать, например, в Access.
а чем не подходит Excel?
 
 
 
#17
17.10.2018 09:57:58
Цитата
singleton написал:
а чем не подходит Excel?
Цитата
singleton написал:
потому что Excel не обрабатывает такие файлы, и не всегда открывает.

Формула массива (ФМ) вводится Ctrl+Shift+Enter
Memento mori
 
 
 
#18
17.10.2018 10:00:05
Цитата
Александр написал:
Вот чет то я не верю...Лично мной обрабатывается 2 раза в неделю файл на входе 4 гига, на выходе 2 метра.
на 100 тысяч строк файл открывается в Power Query. Более 1млн строк - уже нет.
Но и в Power Query, и в Power Pivot не отображаются данные по этим страницам. Выводится 99 строк, и все.
Как преодолеть это ограничение - непонятно.

Понятно ,что вы - профессионал, и вы легко такие файлы обрабатываете. Мне нужно сделать также, но я не могу найти решения.
Цитата
Александр написал:
Мы не видим Вашу проблему
что еще нужно описать по моей проблеме?
я же пишу выше, и повторяю вопрос еще раз: какие еще вводные данные по задаче нужны от меня?
 
 
 
#19
17.10.2018 10:09:15
Цитата
singleton написал:
Понятно ,что вы - профессионал, и вы легко такие файлы обрабатываете
Нууууу....спасибо, что ли :)
Хотя я себя считаю средничком - самоучкой.
Цитата
singleton написал:
Выводится 99 строк, и все.Как преодолеть это ограничение - непонятно.
Так то "999" строк. И не преодолеете. Вы наверное не понимаете как эти надстройки работают.
Цитата
singleton написал:
какие еще вводные данные по задаче нужны от меня?
Пример бляха-муха. Пример! Где есть исходник (урезаете его до 100 строк примерно) и что хотите получить.
Изменено: Александр - 17.10.2018 10:09:37
В жизни нет ничего невозможного! Есть только недостаток знаний и умений.
 
 
 
#20
17.10.2018 10:17:04
Цитата
Александр написал:
Так то "999" строк. И не преодолеете. Вы наверное не понимаете как эти надстройки работают.
поэтому и задаю вопрос. Как они работают на таких объемах - да, это непонятно.
Цитата
Александр написал:
Пример бляха-муха. Пример! Где есть исходник (урезаете его до 100 строк примерно) и что хотите получить.
Я думал, примера в описании задачи достаточно - http://joxi.ru/l2Zxp1HwyplVr ?
Или вам нужен исходный файл со всем списком страниц?
 
 
 
#21
17.10.2018 10:20:07
Сообщение №6!
 
 
 
#22
17.10.2018 10:21:19
singleton, Вы должны понять. В этой ветки форума один вопрос - один ответ. А не "сделайте за меня" - это для ветки "работа"
Цитата
singleton написал:
Или вам нужен исходный файл со всем списком страниц?
Да. хотя уже понимаю, что Вам нужно все будет разжёвывать.  
В жизни нет ничего невозможного! Есть только недостаток знаний и умений.
 
 
 
#23
17.10.2018 10:21:56
Александр, ну, не понимает человек бессмысленность фильтации трех миллионов уникальных значений расстановкой галочек - просто другого способа не знает. Для этого просто фильтуют их списком требуемых ключевых значений (возможно с вариантами начинается с и/или содержит)
Описать же бизнес процесс с примером стесняется :)
 
 
 
#24
17.10.2018 10:25:01
Пришел батя vikttur, косить траву :)
Андрей VG, Я сразу и не понял, что так запущено :)  
В жизни нет ничего невозможного! Есть только недостаток знаний и умений.
 
 
 
#25
17.10.2018 10:30:26
Ну ладно, пусть будет так.
Спасибо вам на добром слове, господа!
 
 
 
#26
17.10.2018 11:03:28
Теперь господа САМИ пусть напрягаются.

Народ - или я вашу помощь нахрен удалю, раз никто не шевелится
 
 
 
#27
17.10.2018 11:07:45
vikttur, я нарушил что-то? или  что-то сделал не так?
 
 
 
#28
17.10.2018 11:09:18
Непонятно написано?
Еще раз: сообщение №6, потом - правила форума. После этого предложите название темы, отражающее суть задачи, а не общие слова.
Модераторы заменят.
 
 
 
#29
17.10.2018 11:11:18
Цитата
vikttur написал:
Народ - или я вашу помощь нахрен удалю, раз никто не шевелится
Да же не понял, в чью сторону камень))

У автора напрочь отсутствует понимания обработки массивов данных.
Он не понимает, что хочет. Либо в ветку работа, либо повышать знания в интернете.  
В жизни нет ничего невозможного! Есть только недостаток знаний и умений.
 
 
 
#30
17.10.2018 11:26:31
Цитата
vikttur написал:
нахрен удалю
Виктор - это единственное правильное решение в сложившейся ситуации, так как без примера даже название темы не придумаешь - нет в Power Pivot  возможности вывести в раскрывающемся списке более 1000 уникальных значений.
 
 
 
Страницы: 1 2 След.
Наверх