Визуализация каталогов через графы

@Александр Летов · Регистрация: 06.02.2016

Студворк — интернет-сервис помощи студентам

Нашёл на хабре статью "Визуализация каталогов на Python средствами NetworkX".

Попробовал сделать у себя и получил кучу ошибок:

"Код

Python
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
# -*- encoding: utf-8
 
import networkx as nx
import matplotlib.pyplot as plt
import os
 
 
def get_tree(tree=[u"Z:/Музыка", ], G=nx.Graph(), itr=0, max_itr=900):
    point = tree.pop(0)
    itr = itr + 1
    sub_tree = [os.path.join(point, x) for x in os.listdir(point) if os.path.isdir(os.path.join(point, x)) and not is_hidden_dir(os.path.join(point, x))]
    if sub_tree:
        tree.extend(sub_tree)
        G.add_edges_from(map(lambda b: (point, b), sub_tree))
    if tree and itr <= max_itr:
        return get_tree(tree, G, itr)
    else:
        return G
 
def is_hidden_dir(d):
    import sys, subprocess
    if sys.platform.startswith("win"):
        p = subprocess.check_output(["attrib", d.encode('cp1251') if isinstance(d, unicode) else d])
        return True if 'H' in p[:12] else False
    else:
        return True if os.path.basename(d)[0] == '.' else False
 
def main():
    G = get_tree()
    nx.draw(G, with_labels=False, node_color="blue", alpha=0.6, node_size=50)
    plt.savefig("edge_colormap.png")
    plt.show()
 
 
if __name__ == "__main__":
    main()

File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 36, in <module>
main()
File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 29, in main
G = get_tree()
File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 11, in get_tree
sub_tree = [os.path.join(point, x) for x in os.listdir(point) if os.path.isdir(os.path.join(point, x)) and not is_hidden_dir(os.path.join(point, x))]
File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 11, in <listcomp>
sub_tree = [os.path.join(point, x) for x in os.listdir(point) if os.path.isdir(os.path.join(point, x)) and not is_hidden_dir(os.path.join(point, x))]
File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 23, in is_hidden_dir
p = subprocess.check_output(["attrib", d.encode('cp1251') if isinstance(d, unicode) else d])
NameError: name 'unicode' is not defined

Process finished with exit code 1

Что я делаю не так?

Попробовал сделать по другому - создал папку "1", в неё засунул файл lol.txt - высветилось окно построения, но пустое. Сделал в папке ещё папку - опять вылет с ошибками.

Jabbson · 05.07.2016, 12:31

попробуйте на втором питоне запустить или заменить (d, unicode) на (d, str)

@Александр Летов · 05.07.2016, 12:48 **[ТС]**

Сообщение от Jabbson

или заменить (d, unicode) на (d, str)

Traceback (most recent call last):
File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 39, in <module>
main()
File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 32, in main
G = get_tree()
File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 11, in get_tree
sub_tree = [os.path.join(point, x) for x in os.listdir(point) if
File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 12, in <listcomp>
os.path.isdir(os.path.join(point, x)) and not is_hidden_dir(os.path.join(point, x))]
File "C:/Users/User/Documents/Учёба/Практика/Graph.py", line 25, in is_hidden_dir
p = subprocess.check_output(["attrib", d.encode('cp1251') if isinstance(d, str) else d])
File "C:\Program Files\Python35-32\lib\subprocess.py", line 626, in check_output
**kwargs).stdout
File "C:\Program Files\Python35-32\lib\subprocess.py", line 693, in run
with Popen(*popenargs, **kwargs) as process:
File "C:\Program Files\Python35-32\lib\subprocess.py", line 947, in __init__
restore_signals, start_new_session)
File "C:\Program Files\Python35-32\lib\subprocess.py", line 1198, in _execute_child
args = list2cmdline(args)
File "C:\Program Files\Python35-32\lib\subprocess.py", line 751, in list2cmdline
needquote = (" " in arg) or ("\t" in arg) or not arg
TypeError: a bytes-like object is required, not 'str'

Сообщение от Jabbson

попробуйте на втором питоне запустить

от теперь networkx не видит

Jabbson · 05.07.2016, 12:56

так поставьте его туда)

@Александр Летов · 05.07.2016, 13:11 **[ТС]**

Сообщение от Jabbson

так поставьте его туда

а как это сделать? Я пользуюсь pycharm и он выдаёт ошибку. Error: Python packaging tool 'pip' not found
При попытке поставить сам pip Error: Python packaging tool 'pip' not found

Jabbson · 05.07.2016, 14:03

Установите pip не через pycharm.

Добавлено через 18 минут
хотя я почему-то думаю, что он у Вас есть.

@Александр Летов · 07.07.2016, 10:38 **[ТС]**

Сообщение от Jabbson

что он у Вас есть.

Ну, у меня есть pip, который поставился вместе с питоном 3.5. Через него же были установлены networkx и matplotlib.
В pycharm при использовании интерпретатора питона 3.5 они спокойно добавляются в проект. А если поменять на питон 2.7, при попытке добавления выдаются ошибки, которые я написал выше.

P.S. Я под виндой, а не под линуксом, если что.
P.P.S кажется что-то нагуглилось по теме установки networkx на 2.7. По результатам отпишусь

Добавлено через 9 минут
Не получилось. Скачал с сайта питона networkx-1.11-py2.7.egg но при установке через pip, он пытается установить через pip 3.5 и говорит, что networkx уже есть и предлагает только попробовать его обновить.
Как ему сказать что я хочу поставить для 2.7???

Добавлено через 1 час 33 минуты
UPD: Всё завелось. Только картинка чёт странная... буду думать

Добавлено через 14 минут
Так. В чём проблема я понял - он не видит файлы в папках. Но почему? И не хочет делать граф всего диска:

Кликните здесь для просмотра всего текста

C:\Python27\python.exe C:/Users/User/Documents/Учёба/Практика/Graph.py
Traceback (most recent call last):
File "C:/Users/User/Documents/��/��/Graph.py", line 39, in <module>
main()
File "C:/Users/User/Documents/��/��/Graph.py", line 32, in main
G = get_tree()
File "C:/Users/User/Documents/��/��/Graph.py", line 17, in get_tree
return get_tree(tree, G, itr)
Количество повторений этой ошибки (Line 17) превысило допустимый объём знаков. Кодировка сохранена
File "C:/Users/User/Documents/��/��/Graph.py", line 12, in get_tree
os.path.isdir(os.path.join(point, x)) and not is_hidden_dir(os.path.join(point, x))]
File "C:/Users/User/Documents/��/��/Graph.py", line 25, in is_hidden_dir
p = subprocess.check_output(["attrib", d.encode('cp1251') if isinstance(d, unicode) else d])
File "C:\Python27\lib\subprocess.py", line 530, in check_output
process = Popen(stdout=PIPE, *popenargs, **kwargs)
File "C:\Python27\lib\subprocess.py", line 618, in __init__
_cleanup()
RuntimeError: maximum recursion depth exceeded
Exception AttributeError: "'Popen' object has no attribute '_child_created'" in <bound method Popen.__del__ of <subprocess.Popen object at 0x03266850>> ignored

Process finished with exit code 1

Добавлено через 8 минут
Хм. Если вложенных папок слишком много, то он ругается. RuntimeError: maximum recursion depth exceeded in cmp
Как это обойти?

Добавлено через 23 часа 2 минуты
Вопросы всё ещё в силе:
Если вложенных папок слишком много, то он ругается. RuntimeError: maximum recursion depth exceeded in cmp
Как это обойти?
Хотя вот так он спокойно выводит список всех директорий:

Python
1
2
3
4
5
6
7
8
9
10
11
import os
pdir = 'Z:/'
#contdir = []
#for i in os.walk(pdir):
#    contdir.append(i)
#for i in contdir:
#    print(i)
 
for way, dirs, files in os.walk(pdir):
    for f in dirs :
        print(f)

И иногда возникает ошибка доступа PermissionError: [WinError 5] Отказано в доступе: 'Z:/found.000'
Запуск от имени администратора не помогает.

Новые блоги и статьи Все статьи Все блоги /
Очистка реквизитов документа при копировании Maks 09.04.2026 Алгоритм из решения ниже применим как для типовых, так и для нетиповых документов на самых различных конфигурациях. Задача: при копировании документа очищать определенные реквизиты и табличную. . .	модель ЗдравоСохранения 8. Подготовка к разному выполнению заданий anaschu 08.04.2026 https:/ / github. com/ shumilovas/ med2. git main ветка * содержимое блока дэлэй из старой модели теперь внутри зайца новой модели 8ATzM_2aurI	Блокировка документа от изменений, если он открыт у другого пользователя Maks 08.04.2026 Алгоритм из решения ниже реализован на примере нетипового документа, разработанного в конфигурации КА2. Задача: запретить редактирование документа, если он открыт у другого пользователя. / / . . .	Система безопасности+живучести для сервера-слоя интернета (сети). Двойная привязка. Hrethgir 08.04.2026 Далее были размышления о системе безопасности. Сообщения с наклонным текстом - мои. А как нам будет можно проверить, что ссылка наша, а не подделана хулиганами, которая выбросит на другую ветку и. . .
Модель ЗдрввоСохранения 7: больше работников, больше ресурсов. anaschu 08.04.2026 работников и заданий может быть сколько угодно, но настроено всё так, что используется пока что только 20% kYBz3eJf3jQ	Дальние перспективы сервера - слоя сети с космологическим дизайном интефейса карты и логики. Hrethgir 07.04.2026 Дальнейшее ближайшее планирование вывело к размышлениям над дальними перспективами. И вот тут может быть даже будут нужны оценки специалистов, так как в дальних перспективах всё может очень сильно. . .	Горе от ума kumehtar 07.04.2026 Эта мне ментальная установка, что вот прямо сейчас, мол, мне для полного счастья не хватает (нужное вписать), и когда я этого достигну - тогда и полный кайф. Одна из самых сильных ловушек на пути. . . .	Использование значений реквизитов справочника в документе, с определенными условиями и правами Maks 07.04.2026 1. Контроль срока действия договора Алгоритм из решения ниже реализован на примере нетипового документа "ЗаявкаНаРаботу", разработанного в конфигурации КА2. Задача: уведомлять пользователя, если. . .

Jabbson 5907 / 3359 / 1036 Регистрация: 03.11.2009 Сообщений: 10,008
	05.07.2016, 12:31
	попробуйте на втором питоне запустить или заменить (d, unicode) на (d, str) 0

Jabbson 5907 / 3359 / 1036 Регистрация: 03.11.2009 Сообщений: 10,008
	05.07.2016, 12:56
	так поставьте его туда) 0

Jabbson 5907 / 3359 / 1036 Регистрация: 03.11.2009 Сообщений: 10,008
	05.07.2016, 14:03
	Установите pip не через pycharm. Добавлено через 18 минут хотя я почему-то думаю, что он у Вас есть. 0