User Tools

Site Tools


hcistats:cochran

Cochran's Q test

Introduction

Simply speaking, Cochran's Q test is a binomial data version of repeated-measure ANOVA or Friedman test. So, you have multiple binomial data (like “yes” or “no” responses), and you want to see whether the ratio of the responses are different across the groups (e.g., methods, software or devices the participant use). Let's say you have data as follows.

Are you using this software? (o=no, 1=yes)
Software ASoftware BSoftware C
User 1101
User 2001
User 3010
User 4011
User 5001
User 6111
User 7001
User 8011
User 9011
User 10011

Now, you want to compare the responses across the kinds of software with Cochran's Q test.



Effect Size

I haven't figured out how to directly calculate the effect size of Cochran's Q test. So, here, similarly to Kruskal-Wallis test, I calculate the effect size for a post-hoc McNemar's test.



R code example

The code for Cochran's Q test is similar to those for ANOVA. First, you need to prepare the data.

Answer <- c(1,0,1,0,0,1,0,1,0,0,1,1,0,0,1,1,1,1,0,0,1,0,1,1,0,1,1,0,1,1) Participant <- factor(c(1,1,1,2,2,2,3,3,3,4,4,4,5,5,5,6,6,6,7,7,7,8,8,8,9,9,9,10,10,10)) Software <- factor(rep(1:3, 10)) data <- data.frame(Participant, Software, Answer)

Then, include coin package, which is necessary for Cochran's Q test. After that, you just need to specify which the independent or dependent variable is with a similar syntax for ANOVA.

library(coin) symmetry_test(Answer ~ factor(Software) | factor(Participant), data = data, teststat = "quad")

Now, you get the result.

Asymptotic General Independence Test data: Answer by factor(Software) (1, 2, 3) stratified by factor(Participant) chi-squared = 8.2222, df = 2, p-value = 0.01639

Thus, you have a significant effect of Software on the responses.



Post-hoc test with McNemar's test

When you find any significant effect, you need to do a post-hoc test as you do for ANOVA or Friedman test. For Cochran's Q test, you can basically run multiple McNemar McNemar's tests and adjust the p values with Bonferroni or Holm correction. Unfortunately, this requires you to do a little bit of work. First you need to make a 2×2 table for each combination of Software.

(Later, I found that you don't need to make a 2×2 table to do McNemar's test. For more details, please see below.)

Software 2
yesno
Software 1yes11
no53
Software 3
yesno
Software 1yes20
no71
Software 3
yesno
Software 2yes51
no40

And run a McNemar's test for each 2×2 table.

data1 <- matrix(c(1, 1, 5, 3), ncol=2, byrow=T) mcnemar.test(data1) McNemar's Chi-squared test with continuity correction data: data1 McNemar's chi-squared = 1.5, df = 1, p-value = 0.2207 data2 <- matrix(c(2, 0, 7, 1), ncol=2, byrow=T) mcnemar.test(data2) McNemar's Chi-squared test with continuity correction data: data2 McNemar's chi-squared = 5.1429, df = 1, p-value = 0.0233 data3 <- matrix(c(5, 1, 4, 0), ncol=2, byrow=T) mcnemar.test(data3) McNemar's Chi-squared test with continuity correction data: data3 McNemar's chi-squared = 0.8, df = 1, p-value = 0.3711

Then, adjust the p value. Here we use the Bonferroni correction.

p <- c(0.2207, 0.0233, 0.3711) p.adjust(p, method="bonferroni") 0.6621 0.0699 1.0000

Thus, there is a significant difference between Software1 and Software3. McNemar's test in SPSS uses the binomial distribution, which often makes the results different from those you can get in R. For more details, see the code example for McNemar's test. Some versions of SPSS applies Cochran's Q test to each pair combination of the groups. This is also legitimate because Cochran's Q test becomes equivalent to Mcnemar's test without continuity correction when it applies to the data for two groups.

Finally, calculate the effect size for the difference between Software1 and Software3. Again, I am not 100% sure that this is the best way to calculate the effect size for Cochran's Q test, but I just followed the way we do for Kruskal-Wallis test.

sqrt(5.1429 / 20) 0.5070947

Please note that we need to use the total sample size (10 * 2 = 20) to calculate the effect size . Another way to do McNemar's test is to just take the data from the dataframe.

mcnemar.test(data[data$Software==1,]$Answer, data[data$Software==2,]$Answer) McNemar's Chi-squared test with continuity correction data: data[data$Software == 1, ]$Answer and data[data$Software == 2, ]$Answer McNemar's chi-squared = 1.5, df = 1, p-value = 0.2207

Make sure that an element in the same index in the two vectors for the test represents the data taken from the same participants (or the data considering the within-subject factor).

You may have some cases where you see a significant difference with Cochran's Q test, but don't see any difference with the post-hoc comparison. It is probably because Cochran's Q test may be too strong or a post-hoc comparison may be too strict (or the sample size may be too small). But please note that this can happen fairly often.



How to report

You can report the results of Cochran's Q test as follows: With a Cochran's Q test, we found that there exists a significant difference in usage among the three kinds of software we surveyed ((2) = 8.22, p < 0.05). A pairwise comparison using continuity-corrected McNemar's tests with Bonferroni correction revealed that significantly more participants used Software3 than Software1 (p<0.1, = 0.51).


Comments

Nik, 2015/10/31 18:09
I don't really sure if your explanation is accurate. Both Cochran and McNemar are "before-and-after" within-subject tests. While your example with Software A, B, C is acceptable ("event" is a "change of software"), example with McNemar is unclear. First, how you came up from software A,B,C to 1,2,3. Second, in case of simple contingency table the chi-squared test would be more appropriate. In your sample we don't have prior information about choice of any of two software.
Mangiafico, 2016/07/02 21:17
I think the critique by Nik is not correct. These tests can be used as before-and-after, but can also be used in other cases where the observations are paired in some way (not independent). If we just think about comparing Software 1 to Software 3, we want to know which is more popular. A chi-square test would ask a very different question. It would ask if there is an _association_ between using Software 1 and Software 3. McNemar is the test we want. It asks if there are many more cases in which a respondent uses Software 3 and not Software 1 than cases where a respondent uses Software 1 and not Software 3. If true, this means Software 3 is more popular than Software 1.
EdwardBleva, 2017/01/20 19:00
<a href=http://kupikvadrik.ru/>купить детский квадроцикл</a>
FrankieZen, 2017/01/31 11:38
Тайланд. Любые туры в Паттайе. Такси От тайской тур агентства Русалочка. Все описания туров, цены и фотографии можно посмотреть по ссылке Телефон в Таиланде (WhatsApp, Viber, Line, Telegram): +66–861559142 http://www.rusalochka.asia/tseny-prajsy-i-stoimost-3/tailand-tseny-ekskursij-v-pattaje
RobertDut, 2017/02/03 09:24
<a href=https://mrwhite.biz/>mrwhite</a> - buy dumps with pin online, validdumps.
Bruceweerm, 2017/02/04 09:42
good website http://myxnxxporn.com/
RobertKer, 2017/02/08 23:07
cool site <a href=http://sexfreevideos.net/>http://sexfreevideos.net/</a>
Michelaborm, 2017/02/13 19:10
Имеется такая услуга - добровольное медицинское обслуживание (или ДМО).
Она предполагает, что пациент вносит небольшую сумму за то, что посещает врачей в течение года БЕСПЛАТНО.
Однако соцопросы показали, что лишь 3% жителей города знают о ее существовании.
Почему так происходит?
Потому что частным клиникам намного выгодней сдирать с людей деньги за каждое посещение.
А если честный врач попытается посоветовать добровольное медицинское обслуживание клиенту - это сулит ему увольнением.
Информация о ДМО уже вызвала много скандалов, сразу после того как информацию об услуге рассекретил один врач.
Его уволили , после того, как он предложил ДМО своему пациенту.
Самое удивительное, что информация по ДМО есть в открытом доступе, просто натыкались на эту информацию единицы.
Как отстоять свои права?
О правилах предоставления такой услуги и обязанностях частных клиник можно узнать, сделав запрос в Яндексе: "добровольное медицинское обслуживание".
Обязательно обслуживание, а не страхование.

34j5c6h86
RichardFEarm, 2017/03/08 04:22
RC-Реагенты 1к70. Update! Newest Research Chemicals 2017 in stock!

В наличии мощные и продолжительные реагенты (1к70) SGT-78, O-2050, 5F-CUMYL-4CN-PINACA, 5F-CYPPICA
наилучшего качества, наичистейшей чистоты 99%! Только у нашей лаборатории в КНР, только у компании
DPS PHARMA LIMITED есть данные продукты в наличии завоевывающий рынок Европы и СНГ! Реальные и
актуальные предложения для cредних и крупных оптовиков! Любые объемы доставим успешно! А так же ходовые,
популярные и мощные каннабиноиды такие как ADBFC, ADB-C, AB-C, O-774, SGT-263, JWH-424
и другие популярные RC-товары a-PPV (a-PhenylpPyroValerone), Methyone, 4-MEC, a-PVP (Alfa), MDPV,
PV8, a-PVT, bk-MDMA, R-MDMA, 25I-Nbome, MXE, Ethylone, 4-CMC, 3-CMC, AB-Fubinaca, AB-Pinaca,
MAB-Chminaca и т.д! На подходе новые соединения каннабиноидных RC-продуктов: SGT-10, SGT-12, SGT-13,
SGT-139, SGT-142, SGT-147, SGT-45, SGT-41, SGT-23, SGT-68, SGT-237, SGT-67, SGT-55.
Cкидки и Акции в ходу, спешите выгодно закупиться и начать новый виток развития Вашего Международного
RC-бизнеса по поставкам RC-соединений в Ваш регион напрямую от нашей компании из КНР!

https://ru.drugspowerstore.com (вход на сайт через proxy, vpn, tor, анонимайзер, гугл-переводчик и т.п.)

E-mail: dpsmedexport@gmail.com
E-mail: dpschemicals@gmail.com
E-mail: dpspharmaceuticals@gmail.com
E-mail: dpspharmaltd@gmail.com
Jabber: dpspharma@xmpp.jp
Skype: drugspowerstore
VIPole: drugspowerstore
Telegram: drugspowerstore
ICQ: 644359233

-----------------------------------------------------------------------------------

Hi,

We wanna notify that our company DPS PHARMA Ltd is having a new stock of RC products such as:
SGT-78, O-2050, 5F-CUMYL-4CN-PINACA, 5F-CYPPICA, a-PPV (a-PhenylpPyroValerone very popular and
strongest analog of a-PVP), ADBFC, ADB-C, AB-C, O-774,
SGT-263, JWH-424, Methyone, 4-MEC, a-PVP (Alfa), MDPV, PV8, a-PVT, bk-MDMA, R-MDMA, Pentedrone,
LD-25, 25I-Nbome, MXE, Ethylone, 4-CMC, 3-CMC, AB-Fubinaca, AB-Pinaca, MAB-Chminaca, SGT-10,
SGT-12, SGT-13, SGT-139, SGT-142, SGT-147, SGT-45, SGT-41, SGT-23, SGT-68, SGT-237, SGT-67, SGT-55.

All products are available directly from our laboratory in China southern area. We can supply
toward any country worldwide (except US and UK) by safest and fast shipping ways as well.

DPS Pharma Co., Ltd|Drugs Power Store

E-mail: dpsmedexport@gmail.com
E-mail: dpschemicals@gmail.com
E-mail: dpspharmaceuticals@gmail.com
E-mail: dpspharmaltd@gmail.com
Jabber: dpspharma@xmpp.jp
Skype: drugspowerstore
VIPole: drugspowerstore
Telegram: drugspowerstore
ICQ: 644359233

Website: https://www.drugspowerstore.com
GalenVub, 2017/03/11 14:03
Имеется такая услуга - добровольное медицинское обслуживание (или ДМО).
Она предполагает, что вы вносите небольшую сумму за то, что посещает врачей весь год БЕСПЛАТНО.
Однако соцопросы показывают, что лишь 5% жителей Питера знают об этом.
Почему?
Да потому что клиникам выгоднее брать плату за каждый визит.
А если какой-нибудь сотрудник клиники попытается посоветовать добровольное медицинское обслуживание клиенту - это сулит ему увольнением.
Информация о ДМО уже спровоцировала множество скандалов, сразу после того как информацию об услуге рассекретил один врач.
Его уволили , после того, как он посоветовал ДМО своему пациенту.
Самое удивительное, что информация по ДМО находятся в открытом доступе, просто натыкались на эту информацию единицы.
Как отстоять свои права?
О правилах предоставления услуги и обязанностях частных клиник можно узнать, сделав запрос в Яндексе: "добровольное медицинское обслуживание".
Обязательно обслуживание, а не страхование.

34j5c6h86
Williamlom, 2017/03/15 13:27
Большинство проблем на сайтах с относительно низкой посещаемостью возможно раскрыть за пару часов и поправить пару недель.

Задачи которые я предлагаю уладить:

-Узнать как продвигает сайт ваш сегодняшнийспециалист и проверить его компетентность?
-Покажу недоработки допущенные раньше и сформирую проект по исправлению ситуации.
-Продемонстрирую как контролировать деятельность своего SEO эксперта.


Собираетесь взять SEO эксперта?

-Помогу провести собеседование потенциальногоSEO специалиста. Разберу по каким стандартам оценивать его уровень.
- Разберем различия между наемным в штат SEO, делегированном SEO и раскрутке сайтов личными средствами.


Желаете сами раскрутить имеющийся интернет-сайт. Расскажу все насчет продвижения, после консультации вам станет ясно:

-Сколько будет стоить проект по созданию сайта
-Сколько по времени необходимо будет его продвигать для того чтобы достичь топов
-Из каких именно стадий складывается само продвижение, схематически рассмотрим каждый из них.
-Разберем в связи с чем не следует пользоваться услугами фирм, оказывающих услуги по SEO


Желаете создать сайт и организовать его продвижение?

-Расскажу а также покажу каким способом разработать весьма экономный и хороший вариант сайта.
-В какой мере объемным или сложным может стать ваш личный интернет-сайт для того чтобы соперничать в топе.
-Сколько вбухивают все ваши конкуренты в продвижение.
-в какой мере осуществимо войти в топы с вашим интернет-сайтом и с вашим бюджетом.


Хотите узнать окупится ли консультирование?

Звоните по телефону или в скайп - я отвечу на всевозможные имеющиеся вопросы затрагивающие SEO и вашего web-сайта.

Любые вопросы - позвоните +7(812)9114848 или по скайпу admin1.ru
Часовая консультация стоит 3тыс рублей, допускается подписание договора и проплата на расчетный счет.
Оказываю бесплатные консультации за отзыв (т.к. у большинства web-сайтов проблему видно практически сразу)

acol7wns24
MichaelDof, 2017/03/24 08:22
close web site <a href=http://bags-obsession.com/>http://bags-obsession.com/</a>
RichardBig, 2017/03/24 15:49
<a href=https://realdumppin.org/>dumpbin</a> - credit card dumps checker, credit card dumps for sale.
LarryKip, 2017/03/24 20:05
suitable website https://www.stamps-devotion.com/
Rubenpsync, 2017/03/25 14:01
<a href=http://rt.pornhub.com/photo/194527412>Юлия Ковган секс бомба</a> - Юля Ковган любит сперму, Юлия Ковган домашний секс.
Dennisemity, 2017/03/31 23:58
Мало тревожиться о здоровье своего ребенка - надо предпринимать решительные действия для его защиты. Причем доверить данный вопрос следует исключительно опытным проверенным докторам.
На сегодняшний день прием индивидуального доктора по карману далеко не многим жителям России. А идти по каждому вопросу в поликлинику, простаивать долгие очереди и подвергать малыша вероятности заразиться вирусами от иных детей - тоже не вариант.
К счастью, разные частные клиники предлагают программу Детского Добровольного Медицинского Обслуживания (ДМО), которая помогает за несущественную сумму денег купить полис на годовое обслуживание у докторов.
К сожалению, не многие знают о такой услуге и не перестают лечить детей народными методами, выжидают длительное время в очередях и переплачивают за приемы частных врачей.
А программа Добровольного Медицинского Обслуживания для детей позволяет:
" Бесплатно получить больничный лист по уходу за ребенком;
" Бесплатно обследоваться у индивидуальных врачей педиатров;
" Бесплатно или со скидкой осуществлять лечебные процедуры и диагностику;
" Лечить чадо вовремя, качественно и без очередей.
Для того чтобы ознакомиться со списком клиник и условиями предоставления услуг нужно вбить в поиск Яндекса или Google фразу: "Добровольное Медицинское Обслуживание". После этого нужно подобрать приглянувшуюся клинику и оформить договор.

34j5c6h87
Jefferyjoppy, 2017/04/04 19:02
<a href=http://pressuha.ru/release/526341-kak-ya-kupil-kvartiru-v-zvenigorode-zhk-centralnyy.html>http://pressuha.ru/release/526341-kak-ya-kupil-kvartiru-v-zvenigorode-zhk-centralnyy.html </a> - Купить квартиру в Звенигороде, ООО Сити Эстейт.
Prokofev7p, 2017/04/06 05:45
Стабильный зaрaбoток от 8000 рублей в день! Гapантиpoвaнно!
Этo oтличнaя вoзможнoсть oбpеcти финанcовую независимocть!

Инфоpмация: http://webcrasty.ru/zarabotok/


<img>https://pp.userapi.com/c636829/v636829390/67de7/b8_Q_jjK14M.jpg</img>
Prokofev7p, 2017/04/09 05:26
Стaбильный заработок oт 8 тысяч рублей в день! Гaрантировaннo!
Этo отличнaя вoзможнocть oбpеcти финaнсoвую незaвисимоcть!

Информация: http://webcrasty.ru/zarabotok/


<img>https://pp.userapi.com/c636829/v636829390/67dcb/I2jHnXyu7KY.jpg</img>
CaseyLiapy, 2017/04/09 13:14
Мало хлопотать о здоровье своего ребенка - нужно делать решительные действия для его защиты. Причем поручить данный вопрос следует исключительно опытным проверенным врачам.
На сегодняшний день помощь индивидуального педиатра по карману далеко не всем жителям России. А ходить по каждому вопросу в поликлинику, простаивать долгие очереди и подвергать чадо риску заразиться вирусами от других детей - тоже не вариант.
К счастью, различные частные клиники предлагают программу Детского Добровольного Медицинского Обслуживания (ДМО), которая даёт возможность за незначительную сумму приобрести полис на годовое обслуживание у врачей.
К сожалению, не многие осведомлены о подобной услуге и не перестают лечить детей народными методами, выжидают часами в очередях и отдают большие деньги за приемы частных врачей.
А программа Добровольного Медицинского Обслуживания для детей позволяет:
" Бесплатно получить больничный лист по уходу за ребенком;
" Бесплатно обследоваться у личных врачей педиатров;
" Бесплатно или со скидкой проходить лечебные процедуры и диагностические процедуры;
" Лечить малыша своевременно, качественно и без очередей.
Для того чтобы ознакомиться со списком клиник и условиями оказания услуг нужно написать в поиск Яндекса или Google ключевое выражение: "Добровольное Медицинское Обслуживание". После этого нужно подобрать приглянувшуюся клинику и оформить договор.

34j5c6h87
Williamdenny, 2017/04/10 14:55
good web site <a href=https://iron-muscles.com/>https://iron-muscles.com/</a>
FrankMuG, 2017/04/10 14:55
good-natured site http://snails-magic.com/
MauriceWeame, 2017/04/13 03:46
high website http://1myhitmp3.com/mp3/macarena+original
Michaelnut, 2017/04/14 15:21
world resource http://1myhitmp3.com/mp3/marry+you+bruno
Charlesjef, 2017/04/17 05:31
Скачать базу данных организаций города Оренбург бесплатно http://bazdan24.ru/tovar/baza-dannyh-organizatsij-goroda-orenburg/

470pY747
JesusVop, 2017/04/17 11:20
<a href=https://vk.com/id36255941>Виктор Игоревич Кудрявцев секс</a>
Guest, 2017/04/25 09:14
We sell High Quality Grade (99%) Mephedrone (4MMC) and other research chemicals in both powder and crystal forms.

Email: lorena@cn-gaosheng.com , skype: lorenasn608

A-PPP
A-PVP 
BK-EBDP 
BK-DMBDB
BK-2C-B 
BUFF
MDPV 
MDMA crystal 
U-47700 
U-49900
HEX-EN 
4-CEC 
4-EMC 
4-CPRC 
4F-PHP 
4-MPD 
4-FMA 
4,4'-DMAR
3,4-CTMP
2-NMC 
2-FMA 
Methylone 
5-methylethylone
Wua-101 
MPHP 
MMB-Chminaca MMBC 
MDPHP 
MDMB-FUBINACA
Mephedrone 4mmc 
Mexedrone
Methadone
Hexedrone
3MMC 
4mec 
ST-135 
EG-018
Ephedrine 
5F-ADB
5F-AEB
5FAKB48 
5F-AB-FUPPYCA
AZ-037
5-Meo-Mipt 
5-Meo-Dalt 
3-Meo-Pcp
4-Aco-Dmt
5fur-144 
AM2201 
mam2201 
ur-144 
FAB-144 
5F-PCN 
5F-MN-24 
5FPB-22 
jwh-122 
Dibutylone 
EAM-2201 
NM-2201 
jwh-210 
PB-22 
5F-PB22 
5F-PV8 
5F-UR144 
AKB48 
5F-AKB48 
FUB-AMB
FUB-MDMB 
ADB-Fubinaca 
AB-Fubinaca 
AB-Pinaca 
Amphetamine
BB-22 
5F-BB22 
4-CL-PVP 
TH-PVP 
Alpha-pvp 
a-PBP 
A-PHP 
Alprazolam
Adrafinil
thj2201 
If you are interested in any of our product ,contact us by email: lorena@cn-gaosheng.com , skype: lorenasn608
u49900,mdmb-fubinaca,4-mek,fentanyl,5f-adb,4cec,nm2201,bk-ebdp,a-ppp,a-pvp,methylone,akb48, 2017/04/25 09:15
We are a chemical factory specializing in the line of legal research chemicals such as 4c-pvp, NM-2201, 4-CEC, MPHP, 2-NMC, BK-EBDP, 5F-PCN, FUB-AMB, 5-APB, 4-CPRC, TH-PVP, BK-2C-B, Ethylone
5F-ADB
5F-AEB
5MAPBI
4-CMC
3-CMC
4-BMC
Mephedrone 4mmc
MDPV
MDMA
MDMB-FUBINACA
MDPHP
Mexedrone
3-MMC
3-meo-pcp
3,4-CTMP
4-MEC
A-PVP
U-47700
U-49900
Methedrone
Methadone
penthylone
Methylone (bk-MDMA)
Ab-chminaca
ADB-fubinaca
5FAKB458
5fur-144
BK-DMBDB
4cl-pvp
5FPB-22
jwh-122
EAM-2201
jwh-210
PB-22
5F-PB22
5F-UR144
5F-AKB48
AB-Fubinaca
AB-Pinaca
BB-22
BUFF
5F-BB22
5F-AB-FUPPYCA
AZ-037
a-PVP
a-PBP
thj2201
PV-8
Wua-101
5-MEO-Dalt
5-MEO-MIPT
Butylone(bk-MBDB)
Dibutylone
We do supply other products Upon request from customer and we sell at moderate prices.
Please kindly contact us for more details via email..... lorena@cn-gaosheng.com , or via skype ..... lorenasn608
5-meo-mipt,4-cprc,2nmc,3-meo-pcp,jwh210,thj018,2-fdck,4-aco-dmt,alprazolam,fu-f,adrafinil,4F-pv8, 2017/04/25 09:16
We would like to introduce our best selling Research Chemicals products to you to promote your business.
BK-ebdp
Dibutylone
Bk-dmbdb
BUFF
U-47700
U-49900
Ethylone
Ephedrine
Methylone
Mdpv
A-PPP
A-pvp
furanylfentanyl
AB-Chiminaca
ADB-FUBINACA
ADB-CHMINACA
MAB-CHMINACA
MMB-CHMINACA
MDMB-FUBINACA
mmbc,mabc, mdphp
fub-amb
Fub-akd
Fab144
Wua-101
FDU-PB22
Nm2201, am2201,
2ci,2ce,2cp,2cb,
3fpm
4f-php
3,4-CTMP
Th-pvp
4-CL-PVP
4-CEC
4-emc
4-mpd
4-cprc
5F-AB-FUPPYCA
AZ-037
5-mapb,6-apb,5mapbi,alprazolam,5-meo-mipt,4-aco-dmt,3-meo-pcp,thj-018,jwh210,Hex-en,hexedrone,mexedrone,PV8,5f-pcn,5f-adb,5f-aeb,5F-NNEI(5F-MN24)

we do supply others products upon request if you need and we offer the most reliable transaction and sell at very affordable prices.

For more information and prices please feel free to contact via email...... lorena@cn-gaosheng.com, skype....... lorenasn608
u47700,5-methylethylone,bk-dmbdb,mdphp,4mpd,hexedrone,4f-php,aphp,5mapbi,mab-chminaca,fab144, 2017/04/25 09:16
We are willing to sell our research chemicals product to you if you are serious and prospect buyer and capable to establish long term business relationship with any interested buyers of research chemical and pharmaceutical Intermediates.
E-mail: lorena@cn-gaosheng.com
Skype: lorenasn608
A-PPP
BK-EBDP
BK-2C-B 
BUFF
4-CL-PVP
2-NMC
4-CEC
4-EMC
4-MPD
3-MEO-PCP
DIBUTYLONE
FUB-AMB  
TH-PVP    
4F-PHP
NM-2201    
MMBC
MDPHP
MDMB-FUBINACA
MEXEDRONE
HEX-EN 
U-47700  
U-49900
ADB-FUBINACA 
5-METHYLETHYLONE
5MAPBI 
5F-PCN  
5F-ADB
5F-AEB
5F-AB-FUPPYCA
AZ-037
SDB-005
4-CPRC   
ALPRAZOLAM
WUA-101
GeorgeEmpib, 2017/04/26 04:35
lucky website http://lingerie-swimwear.net/
Richardgon, 2017/05/02 21:54
качественный веб ресурс <a href=http://pressuha.ru/release/490820-obrazovatelnyy-centr-delovaya-evropa-golden-pragaru-letniy-lager-v-chehii-dlya-russkoyazychnyh-shkolnikov-otkryvaet-dveri.html>Летний лагерь в Чехии</a>
RobertReemy, 2017/05/07 00:06
<a href=https://vk.com/id36255941>Виктор Кудрявцев пассивный гей</a>
Th-pvp crystal ,Ketamine, ab-chminaca, ab-fubinaca, eam2201, jwh-122 for sale makenchemstore@gmail.com, 2017/05/09 02:57
We are supplier of high Quality Methylone ,Ketamine, Ethylone Big rock crystal ,Brown crystal and différent products of very good quality and competitive prices.makenchemstore@gmail.com

Other product includes:

Mephedrone 4mmc
MDPV
Ethylone Crystal
3mmc
4-MEC
A-PVP
methedrone
Methylone (bk-MDMA)
ST-135
AKB48
5F-AKB48
AB-Fubinaca
AB-Pinaca,
BB-22
Ab-chminaca
4-cmc Crystal
3-cmc Crystal
jwh-210
JWH-203
jwh-122
5Fur-144
EAM-2201
AM 2201
AM2202
am1220
Butylone crystal
pentedrone Crystal

we do supply others products upa on request if you need. We offer the most reliable transaction and sell at very affordable prices. We ship world wide and offer one of the best discreet delivery service ever to our customers address.www.cn-gaosheng.com.

Please contact us if interested via Email : makenchemstore@gmail.com
makenchemstore@gmail.com or skype names.................chemical.yes :
4mmc,3CMC,APVP,HEX-EN,ETHYLONE,BK-2C-B,4-EMC,4FA,MDPV,FUB-AMB,ADB-FUBI, 2017/05/17 17:19
We would like to introduce our best selling Research Chemicals products to you to promote your business.makenchemstore@gmail.com







Main RC products as follows:







BK-ebdp



Dibutylone



U-47700



U-49900



Ethylone Crystal



Methylone Crystal



Mdpv Crystal



A-PPP



A-pvp Crystal



furanylfentanyl



AB-Chiminaca



ADB-FUBINACA



ADB-CHMINACA



MAB-CHMINACA



MMB-CHMINACA



MDMB-FUBINACA



mmbc,mabc



fub-amb



Fub-akd



Fab144



FDU-PB22



2ci,2ce,2cp,2cb,



3fpm



4f-php



Th-pvp



4-CL-PVP



4-CEC



4-emc



4-mpd



4-cprc



5-mapb



6-apb,alprazolam,4-aco-dmt, 3-meo-pcp,thj-018,Hex-en,hexedrone,mexedrone,



4FPV8,5f-pcn,5f-adb,5f-aeb,5F-NNEI(5F-MN24)







we do supply others products upon request if you need and we offer the most reliable transaction and sell at very affordable prices.







For more information and prices please feel free to contact via email...... makenchemstore@gmail.com, skype....... chemical.yes
Th-pvp crystal ,Ketamine, ab-chminaca, ab-fubinaca, eam2201, jwh-122 for sale makenchemstore@gmail.com, 2017/05/17 17:20
We are supplier of high Quality Methylone ,Ketamine, Ethylone Big rock crystal ,Brown crystal and différent products of very good quality and competitive prices.makenchemstore@gmail.com call +1 213 935 9834

Other product includes:

Mephedrone 4mmc
MDPV
Ethylone Crystal
3mmc
4-MEC
A-PVP
methedrone
Methylone (bk-MDMA)
ST-135
AKB48
5F-AKB48
AB-Fubinaca
AB-Pinaca,
BB-22
Ab-chminaca makenchemstore@gmail.com
4-cmc Crystal
3-cmc Crystal
jwh-210
JWH-203 +1 213 935 9834
jwh-122
5Fur-144
EAM-2201
AM 2201
AM2202
am1220
Butylone crystal
pentedrone Crystal

we do supply others products upa on request if you need. We offer the most reliable transaction and sell at very affordable prices. We ship world wide and offer one of the best discreet delivery service ever to our customers address.+1 213 935 9834

Please contact us if interested via Email : makenchemstore@gmail.com
makenchemstore@gmail.com or skype names.................chemical.yes :
Richardamoft, 2017/05/22 05:57
good web site http://analdrunksister.com/desi-girl-trying-to-touch-my-dick-in-bus.html
WalterAcamE, 2017/05/22 17:28
relevant website http://pornsiteslist.org/caramel-candy.html
CecilFum, 2017/05/24 14:43
close site http://hugeanalslut.com/granny-soon-gets-fucking-better-bbc.html
DavidLourn, 2017/05/26 15:57
Прокси интернет-сервис Proxyelite.biz делает отличное предложение для вас все возможности для того, что бы закупки стремительных прокси-серверов из Австралия, Англия, Вьетнам, Германия, Гибралтар, Голландия, Гонконг, Египет, Израиль, Индия, Индонезия, Иран, Италия, Китай, Люксембург, Норвегия, Объединённые Арабские Эмираты, Польша, Пакистан, Россия, Саудовская Аравия, Сингапур, Турция, Украина, Хорватия, Швейцария, Чехия, Южная Корея, ЮАР, Япония. Протокол прокси HTTP и SOCKS5 в едином аккаунте. А так же VPN - Сервис Поддержка протоколов L2TP/IPsec,VPN over SSL, VPN over ICMP, VPN over DNS, SoftEtherVPN. Proxy-server (прокси-сервер, от англ. proxy — полномочие действовать от имени другого лица) — являет собой службу (програмное обеспечение), работающую в цифровой сети и дозволяющую своим клиентам делать запросы к остальным службам. Этим образом, прокси сервер выполняет роль посредника между клиентом (в частности, Вашим пк) и службой (к примеру, каким-либо Онлайн-вебсайтом), допуск к какой запрашивает заказчик. VPN (англ. Virtual Private Network — виртуальная неофициальная сеть). VPN-сеть образовывается «поверх» online Интернет, многократно увеличивая защищенность соединения. OpenVPN — осуществление программной сети с еще большей величиной гарантированности, безвредности и многофункциональности. Она вообще опирается на раскрытом исходном коде и непрерывно развивается командами опытных разрабов.


<a href=http://proxyelite.biz>элитные прокси москвы</a>
JaredInsit, 2017/05/31 01:59
good website http://somecalledme.com/loader/4098835626
Jesusdek, 2017/05/31 02:44
positive website http://worksheetscatalog.com/worksheet/free-math-worksheets-for-4th-grade.php
Pedrorew, 2017/05/31 08:02
nice web site http://icomparephones.com/samsung-tablet-deals-canada-cm.html
Ismaelbak, 2017/05/31 15:19
significant website http://publicschoolfinder.com/oklahoma-state-university-kappa-sigma.html
NormanHed, 2017/06/09 18:04
безукоризненный сайт <a href=https://yuristymsk.club/moskva/notarius-sitnikova-o-v-1260>нотариус метро Кунцево</a> - выезд нотариуса на дом метро Фили, нотариус на дом метро Молодежная.
research chemical, 2017/06/14 15:46
We are supplier of high Quality Methylone ,Ketamine, Ethylone Big rock crystal ,Brown crystal and différent products of very good quality and competitive prices.makenchemstore@gmail.com call +1 213 935 9834

Other product includes:

Mephedrone 4mmc
MDPV
Ethylone Crystal
3mmc
4-MEC
A-PVP
methedrone
Methylone (bk-MDMA)
ST-135
AKB48
5F-AKB48
AB-Fubinaca
AB-Pinaca,
BB-22
Ab-chminaca makenchemstore@gmail.com
4-cmc Crystal
3-cmc Crystal
jwh-210
JWH-203 +1 213 935 9834
jwh-122
5Fur-144
EAM-2201
AM 2201
AM2202
am1220
Butylone crystal
pentedrone Crystal

we do supply others products upa on request if you need. We offer the most reliable transaction and sell at very affordable prices. We ship world wide and offer one of the best discreet delivery service ever to our customers address.+1 213 935 9834

Please contact us if interested via Email : makenchemstore@gmail.com
makenchemstore@gmail.com or skype names.................chemical.yes :
Th-pvp crystal ,Ketamine, ab-chminaca, ab-fubinaca, eam2201, jwh-122 for sale makenchemstore@gmail.com
Briantroup, 2017/06/26 21:55
Регистрируешься - огромный бонусы.
Играешь - огромный выигрыш.
$<a href=https://gotovlc.com/51/1?l=32узнай как из 100 рублей сделать 20 000 рублей!</a>
Играй
<a href=https://gotovlc.com/51/4?l=120>Угадай кому принадлежит бюст - получи деньги</a>
<a href=https://gotovlc.com/51/4?l=120><img>http://krn.krapovy.ru/images/ugaday_bust_1.jpg</img></a>
<a href=http://vlkgo.com?id=C9nm7ieg&banner_id=7190><img>http://krn.krapovy.ru/images/vyigrysh.jpg</img></a>
<a href=https://lookatlink.com/M2TC>Играть онлайн</a>
<a href=http://vlkgo.com/stock/?id=C9nm7ieg&banner_id=2369>акции и бонусы!</a>
<a href=http://vlkgo.com?id=C9nm7ieg&banner_id=7286><img>http://ad.gameagregator.com/promo/banners/e8bba8d41cf734d460a16f3306a274f2.jpg</img></a><a href=https://lookatlink.com/M2TI><img>http://ad.gameagregator.com/promo/banners/17f03825f16d3fffc001ed6cbaeb1ddc.gif</img></a><a href=https://lookatlink.com/M2TK><img>http://ad.gameagregator.com/promo/banners/8e625d25d783a6d1ea17aad67f5e8cd1.gif</img></a>
research chemical th-pvp, 2017/06/30 11:35
We are supplier of high Quality Methylone xanax ,Ketamine, Ethylone Big rock crystal ,Brown crystal and différent products of very good quality and competitive prices.makenchemstore@gmail.com call +1 213 935 9834

Other product includes:

Mephedrone 4mmc
MDPV
Ethylone Crystal
3mmc
4-MEC
A-PVP
methedrone
Methylone (bk-MDMA)
ST-135
AKB48
5F-AKB48
AB-Fubinaca
AB-Pinaca,
BB-22
Ab-chminaca makenchemstore@gmail.com
4-cmc Crystal
3-cmc Crystal
jwh-210
JWH-203 +1 213 935 9834
jwh-122
5Fur-144
EAM-2201
AM 2201
AM2202
am1220
Butylone crystal
pentedrone Crystal

we do supply others products upa on request if you need. We offer the most reliable transaction and sell at very affordable prices. We ship world wide and offer one of the best discreet delivery service ever to our customers address.+1 213 935 9834

Th-pvp crystal ,Ketamine, ab-chminaca, ab-fubinaca, eam2201, jwh-122 for sale makenchemstore@gmail.com
Jeffreyquido, 2017/07/05 15:41
beautiful site <a href=http://token-gifts.com/>token gifts online</a>
ElbertGib, 2017/07/10 17:18
путный site <a href=https://sale-secure.com/>buying viagra</a> - visgra, cheap viagra online.
CraigSek, 2017/07/10 23:50
<a href=http://fridaydumps24.com>2017 track1 track2 pin</a> - ccv, buy
JoshuaKeync, 2017/07/11 08:09
<a href=https://goodshop.bz/>dumps 101</a> - carding dump sites, cc 2017
Josephporce, 2017/07/12 16:44
<a href=http://deluxedumps.com>buy dumps online</a> - verifited dumps, buy cc
Kennethnut, 2017/07/12 17:49
<a href=http://2rich4bitches.com>stuff of my own production</a> - track1 dumps, dumps 101
MichaelRob, 2017/07/14 15:00
<a href=http://dumpsmania24.com>100% valid</a> - dumps store, cc shop list
RobertNus, 2017/07/15 02:52
<a href=https://www.buybest1.biz/>cc with cvv</a> - dumps seller, 2017 track1 track2 pin
Etizolam,5capb,2fdck,apvp,fentanyl,6apb,3-meo-pcp,u47700,hex-en,4f-php,4mmc, 2017/07/20 06:03
E-mail: lorena@wh-wanli.com ,
Skype: rcvendor@outlook.com

We sell research chemicals and pharmaceutical Intermediates.

A-PPP
A-PVP
BK-EBDP
BK-2C-B
BUFF
4-CL-PVP
2-Bromo-LSD
2-A1MP
4-CEC
4-CDC
4-EMC
4-MPD
3-MEO-PCP
DIBUTYLONE
ETIZOLAM
FUB-AMB
FUB-AKB48
FUB-PINACA
FU-F
TH-PVP
THJ-018  
4F-PHP
NM-2201
MMBC
MDPHP
MDMB-FUBINACA
METHYLONE
MEXEDRONE
MXE
HEX-EN
U-47700
U-49900
ADB-FUBINACA
5-METHYLETHYLONE
5C-AKB48
5-MAPDI
5F-PCN
5F-ADB
5F-AEB
5F-MDMB-2201
5F-AB-FUPPYCA
5F-CUMYL-PINACA
5-MEO-MIPT
AZ-037
SDB-005
4-CPRC
ALPRAZOLAM
5CAPB

E-mail: lorena@wh-wanli.com ,
Skype: rcvendor@outlook.com
4cdc,5capb,dibutylone,5f-mdmb-2201,fub-akb48,bk-ebdp,4cec,5f-adb,a-ppp, 2017/07/20 06:05
We supply Research Chemicals products as follows:
BK-ebdp
Bk-2c-b
2-Bromo-LSD
2-A1MP
Dibutylone
Bk-dmbdb
BUFF
U-47700
U-49900
Ethylone
Ephedrine
Etizolam
Methylone,Mdpv,
MXE,A-PPP,A-pvp,fu-f,
AB-Chiminaca,
ADB-FUBINACA,
ADB-CHMINACA,
MAB-CHMINACA,
MMB-CHMINACA,
MDMB-FUBINACA,
mmbc,mabc,mdphp,
fub-amb,Fub-akb48,Fub-pinaca
Fab144,Wua-101,FDU-PB22,Nm2201,am2201,2ci,2ce,2cp,2cb,3fpm,4f-php,3,4-CTMP,Th-pvp,4-CL-PVP,4CEC,4CDC,4emc,4mpd,4cprc,5F-AB-FUPPYCA,5C-AKB48,5F-MDMB-2201,5F-CUMYL-PINACA,AZ-037,5-mapb,6-apb,5capb,5mapdi,alprazolam,5-meo-mipt,4-aco-dmt,3-meo-pcp,thj-018,jwh210,Hex-en,hexedrone,mexedrone,PV8,5f-pcn,5f-adb,5f-aeb,5F-MN24

E-mail: lorena@wh-wanli.com , skype: rcvendor@outlook.com
Timothycom, 2017/07/20 07:43
http://pravogolosa.net/oproektd
http://pravogolosa.net/lawd
http://pravogolosa.net/newd
http://pravogolosa.net/letterd
http://pravogolosa.net/rulesandpolicd
http://pravogolosa.net/manuad
http://pravogolosa.net/lawyeradvicd
http://pravogolosa.net/materiald
http://pravogolosa.net/buttoncodd
http://pravogolosa.net/newsweed
http://pravogolosa.net/oproekd
http://pravogolosa.net/lad
http://pravogolosa.net/ned
http://pravogolosa.net/letted
http://pravogolosa.net/rulesandpolid
http://pravogolosa.net/manud
http://pravogolosa.net/lawyeradvid
http://pravogolosa.net/materiadd
http://pravogolosa.net/buttoncod
http://pravogolosa.net/newswed
Kevinpraip, 2017/07/21 19:11
благоприятный веб сайт <a href=http://rgups23.ru/>Купить свидетельство, диплом курсов менеджмента Новосибирск</a>
jiansong, 2017/07/23 12:08
We are a chemical factory specializing in the line of legal research chemicals such as 4c-pvp Crystal, NM-2201, 4-CEC, MPHP, 2-NMC, BK-EBDP, 5F-PCN, FUB-AMB, 5-APB, 4-CPRC, TH-PVP, BK-2C-B.



our product Includes:



Methylone



Ethylone



MDMA



Mephedrone



Ketamine HCL



MDPV



A-PVP



Furanylfentanyl



4f php



4cmc



BK-ebdp CRYSTAL



4mpd



Deschloroketamine



Etizolam



Fentanyl



5mbdb2201



Amb-f



Adbf



5fadb



Hexedrone



Xanax



LSD



lysergic acid



diethylamide







We do supply other products Upon request from customer and we sell at moderate prices.



Please kindly contact us for more details via jiansong19@gmail.com







contact for more details via Email .....jiansong19@gmail.com







or you contact via skype ......chupacker1
BK ebdp, 2017/07/23 12:09
We are a chemical factory specializing in the line of legal research chemicals such as 4c-pvp Crystal, NM-2201, 4-CEC, MPHP, 2-NMC, BK-EBDP, 5F-PCN, FUB-AMB, 5-APB, 4-CPRC, TH-PVP, BK-2C-B.
our product Includes:
Methylone
Ethylone
MDMA
Mephedrone
Ketamine HCL
MDPV
A-PVP
Furanylfentanyl
4f php
4cmc
BK-ebdp CRYSTAL
4mpd
Deschloroketamine
Etizolam
Fentanyl
5mbdb2201
Amb-f
Adbf
5fadb
Hexedrone
Xanax
LSD
lysergic acid
diethylamide

We do supply other products Upon request from customer and we sell at moderate prices.
Please kindly contact us for more details via jiansong19@gmail.com

contact for more details via Email .....jiansong19@gmail.com

or you contact via skype ......chupacker1
PedroFub, 2017/08/07 20:46
fit resource http://www.studentid.co/submap110.xml
Ozmafasab, 2017/08/18 04:54
Hello!


Help! Say how to unlock access blocked sites, free? I use <a href=http://goo.gl/AMsLo2><b>NORD</b></a> but they say, it can be done for free. Someone has experience?
Please enter your comment. You cannot remove your comments by yourself. So double-check before you submit.:
If you can't read the letters on the image, download this .wav file to get them read to you.
 
hcistats/cochran.txt · Last modified: 2014/08/14 05:23 by Koji Yatani

Page Tools