Поиск  Пользователи  Правила  Войти
Форумы "Планета Excel" » Пользователи » voler83
Выбрать дату в календаре…Выбрать дату в календаре

Страницы: 1 2 3 4 5 6 7 8 9 10 11 ... 16 След.
Подстановка данных из других файлов exl в шаблон через PowerQuery, Преобразование данных для загрузки в банк с PowerQuery
 
#
06.05.2025 09:16:33
Kate6520, большой вопрос: почему платежки в отдельных файлах эксель? почему у вас отсутствует реестр платежек из бухг. системы или из банк-клиента в виде таблицы со всеми необходимыми реквизитами из платежек как везде, всегда и у всех? это бы свело обработку к элементарным действиям.
Большие сомнения в том, что вы не можете получить такой реестр, т.к. если вы обладаете полномочиями заполнять и отправлять реестр платежек в банк (а это, мягко говоря, эксклюзивные полномочия), то почему нет доступа к выгрузкам из системы?
Изменено: voler83 - 06.05.2025 09:20:48
 
Перейти    
Создать связи между таблицами для модели данных в Pivot, Представить таблицы в структуру данных, определить между ними связи
 
#
05.05.2025 15:13:55
Цитата
Kotyn написал:
ключевое было "Сделайте отдельную таблицу-справочник
потом в фильтры сводной табл. вставляете поля из таблиц-справочников
 
Перейти    
Создать связи между таблицами для модели данных в Pivot, Представить таблицы в структуру данных, определить между ними связи
 
#
05.05.2025 14:44:39
Kotyn, что вы хотите фильтровать по кварталу/году во второй таблице, если там уже квартал/год в столбцах? если фильтрация будет по первой таблице, то при чем тут вторая?
Сделайте отдельную таблицу-справочник из уникальных значений квартал/год, загрузите ее в модель и от нее тяните связь в основную таблицу.
Как правило, в модели данных связи тянуть надо от спец. созданных таблиц-справочников, в которых УНИКАЛЬНЫЕ данные, к основной таблице с данными.

Если в ваших двух таблицах вообще разные цифры ("принятые" и "рефералы" - это разные сущности?) и вы хотите обе таблицы фильтровать один фильтром, то вторую таблицу надо привести к плоскому виду.

если совсем нет понятия: https://www.planetaexcel.ru/techniques/8/16952/
Изменено: voler83 - 05.05.2025 14:50:16
 
Перейти    
PQ, Web.Page(JS), регулярки - вытащить номера вхождений в строке
 
#
01.05.2025 18:49:47
Andrew Rubanov, что за движки, мне не ведомо, но скрипт из видео работает как надо, проверно:
https://youtu.be/mYDf8eeSWck?si=uEOmIOQ-PtpKH56y
 
Перейти    
Оптимизация загрузки (слияние файлов PQ)
 
#
29.04.2025 09:49:30
asdewq1, с вероятностью 99,9% тормоза в связи с сетевым расположением файлов.
ПС: мне все же не понятно соотношение rdp/сетевое расположение, т.к. для меня rdp - это работа на обычном удаленном локальном ПК как на своем.
Видимо, работа на rdp, а плюсом запущенный на rdp excel тянет файлы с какого-то др. сервера.
Но это уже не важно, т.к. изменить вы, видимо, ничего не сможете.
 
Перейти    
Оптимизация загрузки (слияние файлов PQ)
 
#
29.04.2025 08:40:46
Цитата
asdewq1 написал:
подключение идет через rdp , но насколько я знаю характеристики компа не самые выдающиеся 4.подключение к файлам сетевое.
скопируйте себе на локальный компьютер все файлы и запустите, указав новый Источник - если, конечно, ваш ПК помощнее - если оперативки на удаленном компе менее 8 Гб, то тоже не о чем говорить. код в плане тяжести ни о чем совсем для 200 тыс строк, даже для неск миллионов, но менее 8 Гб оперативки, наверняка с кучей фоновых сервисов на сервере - это мало.
+ уберите шаги изменения типа попробуйте
Через rdp это же удаленный раб.стол - можно как и на своем ПК посмотреть характеристики.

upd: так через rdp или сетевое? сетевое имеется в виду, что исходные файлы-источники на сетевой папке, а обращаетесь к ним вы со своего ПК - где запускаестся excel ? - на вашем ПК или на rdp? - если вы со своего ПК обращаетесь к файлам на сервере, то они скачиваются к вам на ПК налету + время обработки у вас
Изменено: voler83 - 29.04.2025 08:57:14
 
Перейти    
Оптимизация загрузки (слияние файлов PQ)
 
#
28.04.2025 12:37:55
Цитата
asdewq1 написал:
По факту функция только поднимает заголовки
вроде ничего тормозящего нет
1. кол-во столбцов в каждой таблице?
2. есть текстовые столбцы с большим кол-вом текста?
3. характеристики компьютера?
4. расположение файлов сетевое?
5. сколько исходные файлы по размеру?
6. зачем изменять последним шагом тип столбцов с датами, если над датами нет операций?
7. возможно, загрузку тормозит наличие ошибок - найдите их причину.
Изменено: voler83 - 28.04.2025 12:53:49
 
Перейти    
Оптимизация загрузки (слияние файлов PQ)
 
#
28.04.2025 12:15:57
Цитата
asdewq1 написал:
иногда завершается с ошибкой.
вероятно, ошибка возникает, когда у вас открыт какой-либо файл в папке - тогда в этой папке создается временный файл со знаком "~" в начале имени - у вас в предварительной фильтрации нет фильтра на этот случай (есть фильтр только на скрытые файлы). Вам нужно поставить фильтр - убрать строки с наличием "~" в исходной таблице с файлами.
 
Перейти    
Оптимизация загрузки (слияние файлов PQ)
 
#
28.04.2025 12:10:23
Цитата
asdewq1 написал:
#"Вызвать настраиваемую функцию1" =
скиньте код функции
 
Перейти    
Оптимизация загрузки (слияние файлов PQ)
 
#
28.04.2025 11:53:32
.
Изменено: voler83 - 28.04.2025 12:09:17
 
Перейти    
Power Query конкатенация текста для построения URL запроса
 
#
25.04.2025 12:09:16
max1010, торги...бумаги....объясните, откуда взять дату, куда ее поместить, и что должно быть на выходе и в каком столбце - сделайте руками пример.
Изменено: voler83 - 25.04.2025 12:09:30
 
Перейти    
Power Query конкатенация текста для построения URL запроса
 
#
25.04.2025 11:40:15
max1010,
у меня оба запроса из файла выполняются, формируются таблицы. в чем вопрос?
 
Перейти    
Подсчет данных
 
#
24.04.2025 21:55:06
Ния0713, сделать таблицу-справочник: Значение|Формула как текст  -> ВПРить формулу в целевую таблицу с применением функции ГИПЕРССЫЛКА/ ДВССЫЛ или т.п., которые преобразуют формулу, записанную в виде текста, в настоящую формулу.
Изменено: voler83 - 24.04.2025 22:19:38
 
Перейти    
Power Query - долго загружает примененные шаги
 
#
23.04.2025 10:16:55
Цитата
regina516 написал:
код функции "преобразовать файл"
#"Измененный тип" = Table.TransformColumnTypes(#"Повышенные заголовки",{{"Дата и время
зачем делать этот шаг в каждом файле? сделайте потом в объединенной таблице, если понадобится
Изменено: voler83 - 23.04.2025 10:17:24
 
Перейти    
Power Query - долго загружает примененные шаги
 
#
23.04.2025 09:35:28
regina516,

Вызвать настраиваемую функцию1" = Table.AddColumn(#"Отфильтрованные скрытые файлы1", "

также в первую очередь выложите код функции "преобразовать файл" - возможно там код на 1000000 строк.
Изменено: voler83 - 23.04.2025 09:38:18
 
Перейти    
Power Query - долго загружает примененные шаги
 
#
23.04.2025 09:27:57
Цитата
regina516 написал:
 #"Сортированные строки" = Table.Sort(#"Развернутый
никогда не сортируйте строки, если это не нужно прямо в текущий момент, если дальше есть join' ы - огромный риск того, что у вас притянутся левые данные из др. таблицы и вв никогда этого не отследите,, коротко этого не объяснить, это внутренние косяки PQ, постараюсь найти свою старую тему по этому поводу, сортируйте самым последним шагом, если это вохможно, либо вставляйте после сортировки столбец индекса, но это минус к производительности.
Изменено: voler83 - 23.04.2025 09:29:26
 
Перейти    
Power Query - долго загружает примененные шаги
 
#
23.04.2025 09:14:24
regina516, начать в первую очередь с указания кол-ва строк в каждой таблице с которой делается каждый join. Если в каждой миллионы строк, то что вы хотите при таком кол-ве join'ов.
+ если строк даже сотня тысяч, то сортировка - чрезвычайно ресурсозатратное действие - нужна ли она вам?
Изменено: voler83 - 23.04.2025 09:16:41
 
Перейти    
Power Query - сравнение таблиц выдает много дублей ненужных
 
#
22.04.2025 23:25:31
dimwits, я удосужился посмотреть пример: при чем тут join,  PQ или ВПР? вы руками можете проставить в своем примере из второй таблицы соотвествующие данные?- нет не сможете, потому, что вы в принципе не понимаете, что у вас по партиям срок хранения разный, и не можете сформулировать задачу. У вас идентификатором будет код+ кол-во штук в партии, которые надо сгруппировать предварительно, либо код+год, либо код+год+кол-во штук в партии - что?
+ о каком-то "подразделении" неведомом еще речь идет.....
Изменено: voler83 - 22.04.2025 23:36:03
 
Перейти    
Power Query - сравнение таблиц выдает много дублей ненужных
 
#
22.04.2025 20:00:19
dimwits, пример без разницы, вопрос ясен.
Уникальный идентификатор = значение столбца 1 & значение столбца2 & значение столбца N (="все значения из всех столбцов в одной строке в один текст") и в левой и в правой таблице - будет ли это уникальным идентификатором, или и в таком случае будут дубликаты - только вы знаете.

Почему не можете удалить дубликаты в правой таблице? Если вам нужны все дублирующие строки в правой таблице, то нет никакой логики пытаться избежать дублирования строк в левой таблице - в этом и есть смысл работы join, как он работает. Правая таблица должна быть справочником с уникальными значениями в нужном вам случае.
Изменено: voler83 - 22.04.2025 20:15:52
 
Перейти    
Power Query - сравнение таблиц выдает много дублей ненужных
 
#
22.04.2025 18:42:42
dimwits,это абсолютно стандартный для любого ЯП результат работы Join - все совпадения генерируют новую строку. ВПР в Excel, который берет первую попавшуюся строку, это как раз фишка только Excel.
Придумайте сочетание полей в качестве на 100% уникального идентификатора, либо удалите дубликаты в "правой" таблице - зачем тогда вам другие дублирующиеся данные, если вам нужна 1 строка?
Есть способы, чтобы и Join выдавал только первое совпадение, но не помню решение, либо по форму ищите, либо кто-то подскажет, наверно.
Но 100% способом и, в принципе, логичным, является удаление дубликатов в правой таблице.
Изменено: voler83 - 22.04.2025 18:44:29
 
Перейти    
PowerQuery дубликаты удаляет вторую дублирующую строку, вместо первой
 
#
22.04.2025 17:29:41
Soni, индексирование в абсолютно таком же случае  -после сортировки - мне не помогало абсолютно, строки удалялись абсолютно рандомно, надеяться на это нельзя
Изменено: voler83 - 22.04.2025 17:32:21
 
Перейти    
Индексация Power Query, Индексировать календарь текущего года с 1 января по 31 декабря значениями от 1 до 4.
 
#
22.04.2025 13:08:55
Федор Логачев,
делим таблицу на список таблиц по 4 строки, добавляем индекс в каждую табл., потом объединяем
замените "Таблица3" на свою

Скрытый текст
Изменено: voler83 - 22.04.2025 13:13:05
 
Перейти    
Язык М правка для добавления названия запроса в ячейку, Подобное решение хорошо описано здесь https://www.planetaexcel.ru/techniques/12/2152/
 
#
22.04.2025 10:35:19
Цитата
neurologkhv написал:
Куда вставить Text.BetweenDelimiters

ваш код для обработки html на моем компе не работает - старый PQ - вставьте весь свой код обработки - вместе с let и in - в шаге "код_обработки_HTML" , заменив источники в шагах этого кода на соотв-е поле с вложенными файлами, и у вас в столбце "код_обработки_HTML" должны появиться ваши таблицы - разверните их затем
+ ваши разделители "<h4>"  и ".</h4>" неправильные - подберите правильные сами в шаге TextBetweenDelimiters

Скрытый текст
Изменено: voler83 - 22.04.2025 10:44:29
 
Перейти    
Язык М правка для добавления названия запроса в ячейку, Подобное решение хорошо описано здесь https://www.planetaexcel.ru/techniques/12/2152/
 
#
22.04.2025 01:28:32
neurologkhv, сначала стоит посмотреть стандартные функции хотя бы....
https://powerquery.how/text-betweendelimiters/
Text.BetweenDelimiters([Столбец1], "<h4>", ".</h4>")
Изменено: voler83 - 22.04.2025 01:31:58
 
Перейти    
Язык М правка для добавления названия запроса в ячейку, Подобное решение хорошо описано здесь https://www.planetaexcel.ru/techniques/12/2152/
 
#
22.04.2025 00:05:13
Цитата
neurologkhv написал:
Power Query название определяет по заголовку    "Пшеница твердая, зерно" .
что это имеет общего с вашим начальным постом?.....хотели всех заставить смотреть 13 минут, и никто ничего бы не понял....
Изменено: voler83 - 22.04.2025 00:06:23
 
Перейти    
Язык М правка для добавления названия запроса в ячейку, Подобное решение хорошо описано здесь https://www.planetaexcel.ru/techniques/12/2152/
 
#
21.04.2025 23:58:17
neurologkhv,
https://powerquery.how/text-positionof/
https://powerquery.how/text-start/
https://powerquery.how/text-length/
ну и типа того там
 
Перейти    
Язык М правка для добавления названия запроса в ячейку, Подобное решение хорошо описано здесь https://www.planetaexcel.ru/techniques/12/2152/
 
#
21.04.2025 13:30:18
ваш код не работает при подстановке в него приложенного текстового файла. что надо сделать - до сих пор не ясно. ссылка приводит на описание как сделать пользовательскую функцию - зачем? картинка в последнем вашем сообщении не открывается.

ПС: через образец навряд ли тут будет кто-то делать, смысла в этом нет никакого, и если вы знаете PQ, чтобы вытащить нужные данные из html, то использовать образец совсем странно. Напишите словами, что надо сделать + если ваш код вытаскивает данные из html, то сделайте, чтобы он работал на отдельно взятом текстовом файле.
Вместо образца - как вариант подключитесь к папке, загрузите все объекты в папке в виде таблицы и через пользовательский столбец вытащите из каждого файла нужный текст, потом разверните все вложенные таблицы.
Изменено: voler83 - 21.04.2025 13:40:23
 
Перейти    
Язык М правка для добавления названия запроса в ячейку, Подобное решение хорошо описано здесь https://www.planetaexcel.ru/techniques/12/2152/
 
#
21.04.2025 09:44:40
т.е. надо посмотреть 13 минут видео, чтобы ВОЗМОЖНО понять, что надо сделать? название чего и куда и как?
 
Перейти    
Power Query: извлечение данных из двух таблиц путем вычитания с последующим объединением в одну таблицу
 
#
20.04.2025 17:42:08
Цитата
blackann написал:
прилагаю файлы изначальные (Кредиты за две разные даты
ваши приложенные файлы абсолютно не соответствуют скриншотам ЮМ и МСП - столбцы не совпадают. Извините, но вы видимо, совсем не понимаете, что было сделано в чужих файлах.
Если вам надо преобразовать исходные файлы, то пишите задачу по исходным файлам.
Изменено: voler83 - 20.04.2025 17:49:36
 
Перейти    
Power Query: извлечение данных из двух таблиц путем вычитания с последующим объединением в одну таблицу
 
#
20.04.2025 17:32:17
blackann,  все условия надо писать, кто же знает в каком разрезе и по каким параметрам вам необходимо соединение таблиц. сейчас нет понимания, что с чем и по каким признакам соединять. Какое сочетание полей будет идентификатором, по которому будут соединяться строки в разных таблицах, и могут ли быть повторы строк с таким идентификатором?   Либо сначала надо сгруппировать таблицы каждую в отдельности, а потом сгруппированные соединять?....Вы не задали ни одного условия соединения. Сейчас решить невозможно.
Изменено: voler83 - 20.04.2025 17:35:22
 
Перейти    
Страницы: 1 2 3 4 5 6 7 8 9 10 11 ... 16 След.
Наверх