Сравнивание двух таблиц sqlite

@qozyrek · Регистрация: 19.11.2012

Author24 — интернет-сервис помощи студентам

Здравствуйте. У меня есть две почти одинаковые таблицы таблицы: a и b. Нужно их сравнить и в случае отсутствия какой-либо из строк - вывести эту строку на экран. В таблице есть столбец с уникальными числами. Я решил сравнивать по нему. Но что-то не могу понять как это сделать. Подскажите, пожалуйста, как это реализовать :|

@Ennjin · 04.03.2017, 19:43

qozyrek, Обязательно средствами питона? Потому что можно решить эту задачу правильно составленным sql запросом. Если второе, тогда вам нужно обратиться за помощью в другой раздел форма.

@qozyrek · 04.03.2017, 20:20 **[ТС]**

Ennjin, можно и так(вторым способом), но нужно будет решить есть ли вообще разница между таблицами, если она есть - записать её в третью таблицу.

Добавлено через 14 минут
Ennjin, вот кусок кода, который, как я думал сделает это

, но выводит полностью весь столбец одной таблицы и странным образом:

Python

current_table = c.execute('SELECT id FROM current_friends UNION SELECT id FROM fresh_friends')
one = c.fetchall
 
while one is not None:
    one = c.fetchone()
    print(one)

Кликните здесь для просмотра всего текста

(1,)
(4673821,)
(4689306,)
(6069598,)
(6140511,)
(7442774,)
(8984269,)
(9389693,)
(10062932,)
(11296155,)
(11583889,)
(12774619,)

Добавлено через 16 минут
Ennjin, это всё та же задача с друзьями Вк просто теперь нужно смотреть кто добавился и кого отбавили.
Вот, вроде, рабочий запрос:

SQL

1	SELECT id FROM current_friends WHERE NOT EXISTS(SELECT id FROM fresh_friends WHERE(fresh_friends.id = current_friends.id))

Но он показывает всё в куче(т.е. и удалённых, и добавленных). Вот почему я хотел делать первым способом, средствами питона.

@Ennjin · 04.03.2017, 20:24

qozyrek,
Достаточно взять данные из двух таблиц, записать их в разные переменные, и сравнить.
Если таблицы(переменные) равны, вернет True, иначе False

Добавлено через 2 минуты
А еще это можно сделать непосредственно sql запросом

@qozyrek · 05.03.2017, 17:48 **[ТС]**

Ennjin, вот то, что я набросал. Зависаю на стадии добавления этой самой разницы в отдельную таблицу. Можете взглянуть свежим глазом на мой гКод и сказать в чём дело?

Сама ошибка:

Кликните здесь для просмотра всего текста

[mohax@localhost ~]$ python ~/Projects/search/ttta.py
Traceback (most recent call last):
File "/home/mohax/Projects/search/ttta.py", line 67, in <module>
c.execute("""INSERT INTO b (id) VALUES ('%s')"""%(treeq))
sqlite3.IntegrityError: UNIQUE constraint failed: b.id

Код:

Кликните здесь для просмотра всего текста

Python

import requests
import json
import sqlite3
import time
 
url = 'https://api.vk.com/method/friends.search?user_id=143578788&count=100&fields=online,sex,city&access_token=36681f0f5bf5a07f660417a70151c27b181f743876e54c07891c73883697b31ccd001be05b22308acc30e&v=5.62'
r = 0
response = requests.get(url).text
data = json.loads(response)
i = 0
test = ""
testAth = ""
a = 0
conn = sqlite3.connect('/home/mohax/Projects/search/db/friends.sqlite')
c = conn.cursor()
d = conn.cursor()
 
c.execute("DELETE FROM fresh_friends")
 
def addUser(tableName, ident, first_name, last_name, sex, online, city):
    
    sex_one = ""    
    online_one = ""
    
    if sex == 1:
        sex_one = "женский"
    else:
        sex_one = "мужской"
 
    if online == 1:
        online_one = "в сети"
    else:
        online_one = "не в сети"
 
    c.execute("""INSERT INTO """ + tableName + """ (id, first_name, last_name, sex, online, city) 
              VALUES ('%s', '%s', '%s', '%s', '%s', '%s')"""%(ident, first_name, last_name, sex_one, online_one, city))
    conn.commit()
 
for item in data["response"]["items"]:
 
    i = i + 1
 
    try:
        city_title = data["response"]["items"][i-1]["city"]["title"]
        
        if item["first_name"] == "Мар'ян":
            addUser("fresh_friends", item["id"], "Марьян", item["last_name"], item["sex"], item["online"], city_title)        
        else:
            addUser("fresh_friends", item["id"], item["first_name"], item["last_name"], item["sex"], item["online"], city_title)   
        test += "%s %s %s (%s): online: %s sex: %s  %s\n" % (i, item["first_name"], item["last_name"], item["id"], item["online"], item["sex"], city_title)
        #print(test) 
    except KeyError:
        test += "%s %s %s (%s): online: %s sex: %s\n" % (i, item["first_name"], item["last_name"], item["id"], item["online"], item["sex"])
        addUser("fresh_friends", item["id"], item["first_name"], item["last_name"], item["sex"], item["online"], "Город не указан")
        
oneTable = c.execute('SELECT id FROM current_friends')
oneq = c.fetchall()
twoTable = c.execute('SELECT id FROM fresh_friends')
twoq = c.fetchall()
 
if oneq != twoq:
    r = 1
    current_table = c.execute('SELECT id FROM current_friends WHERE NOT EXISTS(SELECT id FROM fresh_friends WHERE(fresh_friends.id = current_friends.id))')
    treeq = c.fetchall
    
    while treeq is not None:
        c.execute("""INSERT INTO b (id) VALUES ('%s')"""%(treeq))
    
    
    treeTable = c.execute('SELECT id FROM b')
    treeq = c.fetchall()
    
#-    if oneq != treeq:
        #НУЖНО ДОБАВИТЬ ПРОВЕРКУ УДАЛИВШИХСЯ ДРУЗЕЙ И ДОБАВИВШИХСЯ 
#-else:
#-    time.sleep(3600)
#    if city_title == "Athens":
#        try:
#            a += 1
#            testAth +=  "%s %s %s (%s): online: %s sex: %s  %s\n" % (a, item["first_name"], item["last_name"], item["id"], item["online"], item["sex"], city_title)
#            addUser("fresh", item["id"], item["first_name"], item["last_name"], item["sex"], item["online"], city_title)       
#        except KeyError:
#            o = "Город не указан"
#            addUser("fresh_friends", item["id"], item["first_name"], item["last_name"], item["sex"], item["online"], o)
 
#print(test)

Добавлено через 20 часов 12 минут
Ennjin, мне помогли с запросами, в sqlite менеджере работают как надо. Но как только я их ставлю в код - никаких изменений в таблицах не наблюдается. Всё отрабатывает без каких-либо ошибок. Не подскажете в чём может быть дело?

Кликните здесь для просмотра всего текста

Python

import requests
import json
import sqlite3
import time
 
url = 'https://api.vk.com/method/friends.search?user_id=143578788&count=100&fields=online,sex,city&access_token=f68ee5df73e54dc3dd1316a5b37d85e46defa9e765db0e660bf616e2e97bfb601f027ae49efaf98fdf79e&v=5.62'
r = 0
response = requests.get(url).text
data = json.loads(response)
i = 0
test = ""
testAth = ""
a = 0
conn = sqlite3.connect('/home/mohax/Projects/search/db/friends.sqlite')
c = conn.cursor()
d = conn.cursor()
 
c.execute("DELETE FROM fresh_friends")
 
def addUser(tableName, ident, first_name, last_name, sex, online, city):
    
    sex_one = ""    
    online_one = ""
    
    if sex == 1:
        sex_one = "женский"
    else:
        sex_one = "мужской"
 
    if online == 1:
        online_one = "в сети"
    else:
        online_one = "не в сети"
 
    c.execute("""INSERT INTO """ + tableName + """ (id, first_name, last_name, sex, online, city) 
              VALUES ('%s', '%s', '%s', '%s', '%s', '%s')"""%(ident, first_name, last_name, sex_one, online_one, city))
    conn.commit()
 
for item in data["response"]["items"]:
 
    i = i + 1
 
    try:
        city_title = data["response"]["items"][i-1]["city"]["title"]
        
        if item["first_name"] == "Мар'ян":
            addUser("fresh_friends", item["id"], "Марьян", item["last_name"], item["sex"], item["online"], city_title)        
        else:
            addUser("fresh_friends", item["id"], item["first_name"], item["last_name"], item["sex"], item["online"], city_title)   
        test += "%s %s %s (%s): online: %s sex: %s  %s\n" % (i, item["first_name"], item["last_name"], item["id"], item["online"], item["sex"], city_title)
        #print(test) 
    except KeyError:
        test += "%s %s %s (%s): online: %s sex: %s\n" % (i, item["first_name"], item["last_name"], item["id"], item["online"], item["sex"])
        addUser("fresh_friends", item["id"], item["first_name"], item["last_name"], item["sex"], item["online"], "Город не указан")
        
oneTable = c.execute('SELECT id FROM current_friends')
oneq = c.fetchall()
twoTable = c.execute('SELECT id FROM fresh_friends')
twoq = c.fetchall()
 
if oneq != twoq:
    r = 1
    c.execute('''INSERT INTO del_friends SELECT cf.* FROM current_friends cf LEFT JOIN fresh_friends ff ON cf.Id = ff.Id LEFT JOIN del_friends df ON cf.Id = df.Id WHERE ff.Id IS NULL AND df.Id IS NULL''')
    d.execute(
   '''INSERT INTO new_friends
SELECT
  ff.*
FROM
  fresh_friends ff
  LEFT JOIN current_friends cf ON cf.Id = ff.Id
  LEFT JOIN new_friends nf ON ff.Id = nf.Id
WHERE
   cf.Id IS NULL AND nf.Id IS NULL''')
    print("ok")

@Ennjin · 05.03.2017, 18:22

qozyrek, После всех манипуляций с данными нужно применить изменения и закрыть соединение.

Python

1 2	conn.commit() conn.close()

@qozyrek · 05.03.2017, 18:28 **[ТС]**

Ennjin, точно

@qozyrek 8 / 8 / 5 Регистрация: 19.11.2012 Сообщений: 438
		1
	Сравнивание двух таблиц sqlite 04.03.2017, 19:32. Показов 3111. Ответов 6 Метки нет (Все метки) Здравствуйте. У меня есть две почти одинаковые таблицы таблицы: a и b. Нужно их сравнить и в случае отсутствия какой-либо из строк - вывести эту строку на экран. В таблице есть столбец с уникальными числами. Я решил сравнивать по нему. Но что-то не могу понять как это сделать. Подскажите, пожалуйста, как это реализовать :\| 0

@Ennjin 103 / 81 / 54 Регистрация: 25.11.2016 Сообщений: 278
	04.03.2017, 19:43	2
	qozyrek, Обязательно средствами питона? Потому что можно решить эту задачу правильно составленным sql запросом. Если второе, тогда вам нужно обратиться за помощью в другой раздел форма. 1

@Ennjin 103 / 81 / 54 Регистрация: 25.11.2016 Сообщений: 278
	04.03.2017, 20:24	4
	qozyrek, Достаточно взять данные из двух таблиц, записать их в разные переменные, и сравнить. Если таблицы(переменные) равны, вернет True, иначе False Добавлено через 2 минуты А еще это можно сделать непосредственно sql запросом 1

@qozyrek 8 / 8 / 5 Регистрация: 19.11.2012 Сообщений: 438
	05.03.2017, 18:28 [ТС]	7
	Ennjin, точно 0

Опции темы